精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

開源的閱讀順序(Layoutreader)模型使用指南 原創(chuàng)

發(fā)布于 2025-5-12 09:00
瀏覽
0收藏

開源的閱讀順序(Layoutreader)模型使用指南-AI.x社區(qū)

閱讀順序在文檔智能解析中的位置

閱讀順序檢測旨在捕獲人類讀者能夠自然理解的單詞序列。現(xiàn)有的OCR引擎通常按照從上到下、從左到右的方式排列識別到的文本行,但這并不適用于某些文檔類型,如多欄模板、表格等。LayoutReader模型使用seq2seq模型捕獲文本和布局信息,用于閱讀順序預(yù)測,在實驗中表現(xiàn)出色,并顯著提高了開源和商業(yè)OCR引擎在文本行排序方面的表現(xiàn)。

Github:https://github.com/yujunhuics/LayoutReader權(quán)重地址:https://www.modelscope.cn/models/yujunhuinlp/LayoutReader-only-layout-large

有伙伴私信不知如何使用,筆者通過版式分析的結(jié)果,后接開源筆者開源的模型,完善這個技術(shù)鏈路。供參考。先看效果:

開源的閱讀順序(Layoutreader)模型使用指南-AI.x社區(qū)

研報版式分析后接閱讀順序,如:reader:1

開源的閱讀順序(Layoutreader)模型使用指南-AI.x社區(qū)

論文版式分析后接閱讀順序,如:reader:1

詳細(xì)代碼已上傳:https://github.com/yujunhuics/LayoutReader/blob/main/vis.py

#!/usr/bin/env python
# _*_coding:utf-8_*_
# Author   :    Junhui Yu

from ultralytics import YOLO
import cv2
import torch
from model import LayoutLMv3ForBboxClassification
from collections import defaultdict

CLS_TOKEN_ID = 0
UNK_TOKEN_ID = 3
EOS_TOKEN_ID = 2


def BboxesMasks(boxes):
    bbox = [[0, 0, 0, 0]] + boxes + [[0, 0, 0, 0]]
    input_ids = [CLS_TOKEN_ID] + [UNK_TOKEN_ID] * len(boxes) + [EOS_TOKEN_ID]
    attention_mask = [1] + [1] * len(boxes) + [1]
    return {
        "bbox": torch.tensor([bbox]),
        "attention_mask": torch.tensor([attention_mask]),
        "input_ids": torch.tensor([input_ids]),
    }


def decode(logits, length):
    logits = logits[1: length + 1, :length]
    orders = logits.argsort(descending=False).tolist()
    ret = [o.pop() for o in orders]
    whileTrue:
        order_to_idxes = defaultdict(list)
        for idx, order in enumerate(ret):
            order_to_idxes[order].append(idx)
        order_to_idxes = {k: v for k, v in order_to_idxes.items() if len(v) > 1}
        ifnot order_to_idxes:
            break
        for order, idxes in order_to_idxes.items():
            idxes_to_logit = {}
            for idx in idxes:
                idxes_to_logit[idx] = logits[idx, order]
            idxes_to_logit = sorted(
                idxes_to_logit.items(), key=lambda x: x[1], reverse=True
            )
            for idx, _ in idxes_to_logit[1:]:
                ret[idx] = orders[idx].pop()
    return ret


def layoutreader(bboxes):
    inputs = BboxesMasks(bboxes)
    logits = layoutreader_model(**inputs).logits.cpu().squeeze(0)
    orders = decode(logits, len(bboxes))
    return orders


# report label
# id2name = {
#     0: 'Text',
#     1: 'Title',
#     2: 'Header',
#     3: 'Footer',
#     4: 'Figure',
#     5: 'Table',
#     6: 'Toc',
#     7: 'Figure caption',
#     8: 'Table caption',
#     9: 'Equation',
#     10: 'Footnote'
# }

# paper label
id2name = {
    0: 'Text',
    1: 'Title',
    2: 'Figure',
    3: 'Figure caption',
    4: 'Table',
    5: 'Table caption',
    6: 'Header',
    7: 'Footer',
    8: 'Reference',
    9: 'Equation'
}

color_map = {
    'Text': (255, 0, 255),
    'Title': (0, 255, 0),
    'Header': (125, 125, 0),
    'Footer': (255, 255, 0),
    'Figure': (0, 0, 255),
    'Table': (160, 32, 240),
    'Toc': (199, 97, 20),
    'Figure caption': (255, 90, 50),
    'Table caption': (255, 128, 0),
    'Equation': (255, 123, 123),
    'Footnote': (222, 110, 0)
}

image_path = 'page_4.png'


model_path = "./LayoutReader-only-layout-large"
# 下載地址:https://modelscope.cn/models/yujunhuinlp/LayoutReader-only-layout-large

layoutreader_model = LayoutLMv3ForBboxClassification.from_pretrained(model_path)

layout_model = YOLO('paper-8n.pt')
# 下載地址:https://huggingface.co/qihoo360/360LayoutAnalysis
# layout_model = YOLO('report-8n.pt')

result = layout_model(image_path, save=False, cnotallow=0.45, save_crop=False, line_width=1)
print(result)

img = cv2.imread(image_path)
page_h, page_w = img.shape[:2]

x_scale = 1000.0 / page_w
y_scale = 1000.0 / page_h

bbox_cls = result[0].boxes.cls.tolist()
xyxyes = result[0].boxes.xyxy.tolist()
confes = result[0].boxes.conf.tolist()
print(xyxyes)

boxes = []
for left, top, right, bottom in xyxyes:
    if left < 0:
        left = 0
    if right > page_w:
        right = page_w
    if top < 0:
        top = 0
    if bottom > page_h:
        bottom = page_h

    left = round(left * x_scale)
    top = round(top * y_scale)
    right = round(right * x_scale)
    bottom = round(bottom * y_scale)
    assert (
            1000 >= right >= left >= 0and1000 >= bottom >= top >= 0), \
        f'Invalid box. right: {right}, left: {left}, bottom: {bottom}, top: {top}'
    boxes.append([left, top, right, bottom])

print(boxes)
orders = layoutreader(boxes)
print(orders)
xyxyes = [xyxyes[i] for i in orders]
bbox_cls = [bbox_cls[i] for i in orders]
confes = [confes[i] for i in orders]
print(xyxyes)

for idx, b_cls, xyxy, conf in zip(range(len(xyxyes)), bbox_cls, xyxyes, confes):
    top_left_x, top_left_y, bottom_right_x, bottom_right_y = xyxy[0], xyxy[1], xyxy[2], xyxy[3]
    cv2.rectangle(img, (int(top_left_x), int(top_left_y)), (int(bottom_right_x), int(bottom_right_y)),
                  color_map[id2name[b_cls]],
                  2)
    cv2.putText(img, f"reader:{idx}--" + id2name[b_cls] + ":" + str(round(conf, 2)),
                (int(top_left_x), int(top_left_y) + 5),
                cv2.FONT_HERSHEY_SIMPLEX,
                1,
                color_map[id2name[b_cls]], 3)  # Add label text
cv2.imwrite("vis-result.jpg", img)


公眾號大模型自然語言處理  作者:余俊暉

原文鏈接:??https://mp.weixin.qq.com/s/PcE9_hxPlGzZku-oCJrTlg??

?著作權(quán)歸作者所有,如需轉(zhuǎn)載,請注明出處,否則將追究法律責(zé)任
收藏
回復(fù)
舉報
回復(fù)
相關(guān)推薦
亚洲的天堂在线中文字幕| 亚洲青青青在线视频| 欧美一级高清免费播放| 成人小视频免费看| 伊人久久精品| 精品国产鲁一鲁一区二区张丽| 欧美国产一区二区在线| 国产精品女人久久久| 亚洲精品美女91| 在线视频精品一| 色悠悠在线视频| 东京一区二区| 一区二区三区加勒比av| 日韩高清在线播放| 韩国av免费在线观看| 日韩电影在线看| 久久久亚洲国产| 国产精品久久国产精麻豆96堂| 免费萌白酱国产一区二区三区| 欧美日韩亚洲不卡| 青青草成人免费在线视频| 日本视频在线| 久久久综合网站| 国产精华一区二区三区| 亚洲最新av网站| 久久免费黄色| 91国产美女在线观看| 成人自拍小视频| 欧美亚洲国产精品久久| 日韩大片免费观看视频播放| 亚洲成人激情小说| 亚洲色图综合| 欧美日韩国产综合草草| 成人在线观看a| 日本孕妇大胆孕交无码| 中文字幕亚洲成人| 五月天亚洲综合小说网| 九色蝌蚪在线| 91日韩精品一区| 国产欧美日韩一区二区三区| 亚洲春色一区二区三区| 精品在线视频一区| 国产免费一区二区三区香蕉精| 特级毛片www| 欧美视频不卡| 欧美精品久久久久久久| 久久99久久98精品免观看软件 | 高端美女服务在线视频播放| 亚洲欧美一区二区视频| 日韩人妻精品一区二区三区| 天天在线视频色| 中文字幕日韩精品一区| 精品少妇人妻av一区二区| 三区四区在线视频| 1024成人网| 精品国产无码在线| gogogogo高清视频在线| 亚洲毛片av在线| 污污污污污污www网站免费| 精产国品自在线www| 亚洲免费观看高清在线观看| 久久久久久久免费视频| 羞羞网站在线看| 亚洲成年人影院| 国产午夜福利在线播放| 中文日产幕无线码一区二区| 在线亚洲欧美专区二区| 中文字幕免费高清在线| www久久久| 欧美变态凌虐bdsm| 女同性恋一区二区三区| 亚洲精品亚洲人成在线| 中文字幕9999| 极品久久久久久| 亚洲黑丝一区二区| 热久久这里只有精品| 中国女人一级一次看片| 国产一区二区成人久久免费影院| 成人三级视频在线观看一区二区| 少妇精品视频一区二区| 日本一区二区三区在线观看| 一区二区三区四区国产| 日韩三级电影视频| 色综合天天视频在线观看| 中文字幕亚洲乱码| 视频成人永久免费视频| 亚洲精品美女久久久| 国产真实乱人偷精品人妻| 欧美1级片网站| 国内外成人免费激情在线视频| 亚洲 欧美 中文字幕| 精品在线观看视频| 国产亚洲欧美一区二区三区| 国产高清av在线| 一区二区高清在线| 18岁视频在线观看| 日本精品视频| 亚洲网站视频福利| 久久成人在线观看| 日产国产高清一区二区三区| 97se在线视频| 春暖花开成人亚洲区| 一区二区三区四区在线| 九九热在线免费| 国产成人在线中文字幕| 日韩在线视频导航| 日韩av大片在线观看| 久国产精品韩国三级视频| 久久国产精品亚洲va麻豆| 国产网站在线免费观看| 色综合久久中文综合久久牛| 丰满少妇一区二区三区专区| 欧美精品乱码| 97超碰蝌蚪网人人做人人爽| 国产人妖一区二区| 国产亚洲精品bt天堂精选| 国内精品视频一区二区三区| 精品麻豆剧传媒av国产九九九| 亚洲视频在线观看免费| 日韩大片免费在线观看| 国产成人精品免费在线| 亚洲图片都市激情| 欧美一级大黄| 日韩国产精品一区| 国产亚洲欧美精品久久久www | av在线中文| 色噜噜狠狠一区二区三区果冻| 性感美女一区二区三区| 久久久久久久久久久久久久| 国产精品高潮呻吟久久av无限 | 国产亚洲综合在线| 欧美 日韩 亚洲 一区| 一区二区日韩| 超碰日本道色综合久久综合 | 美女18一级毛片一品久道久久综合| 日韩欧美在线综合网| 无码人妻精品中文字幕| 蜜臀99久久精品久久久久久软件 | 一区二区三区午夜视频| 国产精品视频色| 国内av一区二区三区| 日韩欧亚中文在线| 国产精品无码午夜福利| 日韩视频三区| 精品无人区一区二区三区| 不卡专区在线| 亚洲国产精品人人爽夜夜爽| 国产精品第72页| a在线播放不卡| 霍思燕三级露全乳照| 欧美电影在线观看完整版| 97在线观看视频国产| 天堂av资源在线| 色综合咪咪久久| 欧美 日韩 成人| 日本欧美在线观看| 亚洲精蜜桃久在线| 日本电影久久久| 久久久成人精品视频| 国产三级三级在线观看| 国产精品久久一区二区三区不卡| 在线观看亚洲国产| 麻豆传媒一区二区三区| 亚洲精品永久www嫩草| 日韩黄色三级在线观看| 久久精视频免费在线久久完整在线看| 91亚洲国产成人久久精品麻豆 | 亚洲国产欧美一区二区三区同亚洲 | 狠狠综合久久av一区二区蜜桃| 国产精品www网站| 在线观看黄av| 日韩一区二区三区精品视频| 国产亚洲精品成人| 久久女同精品一区二区| 最新天堂中文在线| 欧美阿v一级看视频| 国产一区喷水| 亚洲成人短视频| 久久婷婷国产麻豆91天堂| 亚洲不卡免费视频| 色悠悠久久综合| 久草手机视频在线观看| 成人性生交大片免费看中文网站 | 久久国产免费看| 久久免费一级片| 亚洲丝袜美腿一区| 国产在线高清精品| 97人人在线视频| 色狠狠久久aa北条麻妃| 亚洲欧美另类一区| 日本韩国视频一区二区| 黄色一级片中国| 久久女同精品一区二区| 人妻少妇偷人精品久久久任期| 久久xxxx| a级黄色片免费| 欧美精品尤物在线观看| 国产成人一区二区三区免费看| 亚洲最大网站| 欧美激情aaaa| 色综合久久影院| 日韩精品中文字幕在线播放| 中文字幕一区二区三区波野结| 亚洲亚洲人成综合网络| 青青青视频在线播放| av在线播放成人| 911av视频| 日韩黄色片在线观看| 波多野结衣av一区二区全免费观看| 红桃视频在线观看一区二区| 国产福利久久| 国产精品毛片aⅴ一区二区三区| 91国在线精品国内播放| 中文字幕免费高清电视剧网站在线观看| 亚洲男人天堂古典| 高h放荡受浪受bl| 欧美精品 日韩| 亚洲精品91天天久久人人| 亚洲成人精品一区二区| 五月天av网站| 国产精品久线在线观看| 真实乱视频国产免费观看| av激情亚洲男人天堂| 国产ts在线观看| 国产一区在线视频| 日韩av在线中文| 琪琪一区二区三区| 一本色道无码道dvd在线观看| 日韩一级不卡| 久久99中文字幕| 国产精品扒开腿做爽爽爽软件| 亚洲伊人婷婷| 久久激情电影| 亚洲国产一区二区三区在线播 | 91看片淫黄大片91| 五月天久久久| 特级毛片在线免费观看| 99视频精品视频高清免费| 亚洲韩国在线| 国产精品久久占久久| 色一情一区二区三区四区| 国产亚洲欧美日韩在线观看一区二区| 国产区一区二区三区| 国产另类在线| 成人三级在线| 狼人天天伊人久久| 久久99导航| 少妇一区二区视频| 日韩欧美99| 成人中文在线| 中文字幕中文字幕一区三区| 希岛爱理一区二区三区| 黄色网zhan| 国语精品一区| 水蜜桃色314在线观看| 久久国产精品久久久久久电车| 男人操女人免费软件| 久久精品女人| 超碰在线97免费| 麻豆成人久久精品二区三区红 | 欧美成人精品在线播放| 污污在线观看| 午夜免费久久久久| 日本成人三级电影| 国产欧美日韩91| 日韩欧美久久| 狠狠色综合一区二区| 你懂的一区二区三区| 亚洲人体一区| 中文无码久久精品| 欧美,日韩,国产在线| 视频一区免费在线观看| 日本在线播放一区二区| 国产风韵犹存在线视精品| 久久久久亚洲无码| 中文在线资源观看网站视频免费不卡| 女同久久另类69精品国产| 亚洲综合男人的天堂| 日韩在线 中文字幕| 欧美日韩日日夜夜| 秋霞av鲁丝片一区二区| 亚洲图片欧美午夜| 亚洲性图自拍| 日韩免费在线观看视频| 成人污版视频| 乱色588欧美| 性欧美69xoxoxoxo| 男女高潮又爽又黄又无遮挡| 久久99精品久久久久久久久久久久| wwwxxxx在线观看| 久久久久久久久蜜桃| 人妻少妇无码精品视频区| 一区二区三区在线观看动漫 | 欧美日韩国产小视频| 丰满人妻一区二区三区四区53 | 欧美成人一区二区三区片免费 | 亚洲精品日韩专区silk| 影音先锋在线国产| 日韩视频免费直播| 国产无套粉嫩白浆在线2022年| 欧美成人h版在线观看| 天然素人一区二区视频| 国产v亚洲v天堂无码| 成人在线亚洲| 久久精品.com| 丁香另类激情小说| 无码人妻精品中文字幕| 色屁屁一区二区| 人妻少妇精品无码专区久久| 日韩亚洲欧美中文高清在线| 625成人欧美午夜电影| 91精品婷婷国产综合久久蝌蚪| 日韩一区三区| 国产第一页视频| 成人免费看黄yyy456| 午夜国产福利一区二区| 欧美三级视频在线播放| 水莓100在线视频| 久久久女人电视剧免费播放下载| 免费成人高清在线视频| 欧洲亚洲一区二区三区四区五区| 136国产福利精品导航网址| 亚洲自拍第三页| 国产精品久久久久精k8| 黄色av网站免费观看| 日韩av在线网址| 国内老司机av在线| 91久久精品www人人做人人爽| 久久亚洲精品中文字幕蜜潮电影| 成人精品视频一区二区| 久久综合九色欧美综合狠狠| 日韩成人在线免费视频| 亚洲成人精品视频| 都市激情久久综合| 国产精品区一区二区三含羞草| 在线看片不卡| 天天操夜夜操很很操| 亚洲四区在线观看| 国产伦精品一区二区三区免.费 | 久久久免费看| 国产亚洲网站| 中国极品少妇videossexhd | 国产又黄又大又粗视频| 91亚洲精品久久久蜜桃| 中文字幕亚洲高清| 亚洲精品一区二区三区婷婷月| 性国裸体高清亚洲| 免费不卡亚洲欧美| 视频一区二区三区中文字幕| 成人免费无遮挡无码黄漫视频| 色综合天天综合网国产成人综合天 | 黄色大片在线免费看| 99久久99久久精品国产片果冻| 亚洲国产成人精品激情在线| 日韩经典中文字幕| 欧美电影免费观看高清完整| 欧美在线3区| 久久精品久久久精品美女| 午夜精品一区二区三级视频| 欧美一区二区三区免费在线看| 超鹏97在线| 国产伦精品一区二区三区免费视频| 99国产精品私拍| a毛片毛片av永久免费| 欧洲一区在线电影| 黄色网址在线免费播放| 懂色一区二区三区av片| 在线视频精品| 99久久99久久精品免费| 日韩一级完整毛片| mm视频在线视频| 日韩精品一区二区三区四区五区 | 成人性生活免费看| 欧美中文字幕不卡| 国产福利视频在线观看| 国产精品视频在线免费观看| 蜜桃伊人久久| 国产67194| 精品亚洲一区二区三区四区五区| 日韩天堂在线| 日本久久久网站| 国产无一区二区| 国产福利免费视频| 日本久久久久久久久久久| 99精品全国免费观看视频软件| 又大又长粗又爽又黄少妇视频| 欧美日韩中文字幕在线| 黄色网在线免费观看| 精品伦精品一区二区三区视频| 奇米影视一区二区三区| 久久久久久久黄色| 中文字幕亚洲一区在线观看 | 国产成人福利夜色影视| 91网站在线观看免费| 国产亚洲欧美日韩日本| 亚洲精品福利网站| 国产精品久久激情| 亚洲国产免费看| 熟女少妇a性色生活片毛片| 日韩精品免费综合视频在线播放|