精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

基于MiniO存儲的RAGFlow+Dify圖片處理方案

人工智能
鑒于 RAGFlow 的 Docker 部署本就包含了一個 MinIO 實例,原本主要用于存儲知識庫的原始文件、塊數據等,利用這個現有的 MinIO 服務來存儲提取的圖片和映射關系是一個很好的本地化部署方案,也可以在上一版方案基礎上,移除對外部云服務(阿里云 OSS)和獨立圖片服務器的依賴。

上篇文章中介紹了如何基于 RAGFlow 知識庫,通過 Dify 的 HTTP 請求獲取映射 + Code 節點替換,將占位符解析為最終的 <img> 標簽,來穩定的實現問答中圖片正常顯示問題。

圖片

Dify+RAGFLow:基于占位符的圖片問答升級方案(最佳實踐)

其中的"占位符"和"實際圖片訪問 URL"映射關系的存儲使用了阿里云的 OSS 存儲服務。初期選擇阿里云 OSS 作為存儲,主要是方便大家快速驗證和迭代 RAG 應用的核心邏輯,避免過早陷入基礎設施的維護細節。

有知識星球的星友提出希望能提供本地部署的存儲方案,市面上有挺多優秀的開源對象存儲框架可供選擇,Ceph、OpenStack Swift 功能全面但架構復雜高,出于規模可控和運維簡單的考慮,MinIO 和 SeaweedFS 都是不錯的選擇。

鑒于 RAGFlow 的 Docker 部署本就包含了一個 MinIO 實例,原本主要用于存儲知識庫的原始文件、塊數據等,利用這個現有的 MinIO 服務來存儲提取的圖片和映射關系是一個很好的本地化部署方案,也可以在上一版方案基礎上,移除對外部云服務(阿里云 OSS)和獨立圖片服務器的依賴。

圖片

以下,enjoy:

1、“語義幻覺” vs “格式遵循”

在正式進入 MinIO 的存儲方案調整前,我們再來回顧下,在富文本中直接嵌入完整 URL 可能導致 LLM“幻覺”并修改圖片鏈接的考量所在。

1.1直接嵌入 URL

當 LLM 在其上下文中看到一個完整的、看似有意義的 URL 時,例如<img src="..."> 或 http://.../filename.png,特別是像<img>標簽這樣結構化的 HTML,它有一定概率(不同 LLM 實測篡改 URL 的概率不太一致)會嘗試去“理解”這個 URL 指向的內容,并結合周圍的文本進行推理。

例如如果文本描述了“燃油噴射器泄漏”,而 URL 的文件名是 page1_img1_uuid.png,LLM 可能會認為存在不匹配,并“好心”地嘗試生成一個它認為更符合語義的 URL,例如 .../fuel_injector_leak.png。這樣導致了很多盆友說為什么知識庫中能渲染圖片,但是回答中卻無法顯示的問題。

其實這也很好理解,本質上這是源于 LLM 被訓練來生成連貫、相關的文本,有時會過度泛化到它不應修改的結構化數據上。

1.2占位符方案的意義

[IMG::page1_img1_uuid.png]這種格式對 LLM 來說,更像是一個需要特殊處理的“元數據標記”或“代碼片段”,而不是一段可供自由發揮的自然語言或標準 HTML。通過 Prompt 工程明確指示 LLM 將這些標記視為特殊占位符,并在需要引用時原樣復制,實測確實可以大大降低它進行“創造性修改”的動機。LLM 更傾向于遵循這種明確的格式指令,而不是去猜測 page1_img1_uuid.png 的語義含義并嘗試“改進”它。

總結來說,使用占位符的方案,是把潛在的圖片鏈接錯誤問題,從一個不可控的 LLM“語義理解導致的幻覺修改”問題,轉變為一個相對更容易通過 Prompt 工程來約束的“格式遵循”問題。要求 LLM 精確復制一個特殊格式的字符串,通常比要求它不對一個看起來像自然語言一部分的 URL 進行語義修改要更容易實現和控制。

2、RAGFlow 的 MinIO 訪問結構

2.1內部訪問

RAGFlow 的其他服務(如 API 服務、Worker)在 Docker 網絡內部通常通過服務名(例如 minio)和默認端口(9000 for API, 9001 for Console)訪問 MinIO。

2.2外部訪問

首先需要明確的是,RAGFlow的MinIO 服務是否映射到了宿主機。在 docker-compose.yml 的開頭第一行可以看到 include: - ./docker-compose-base.yml 這行,它表示 docker-compose.yaml 文件本身并不包含所有服務的完整定義,而是包含了同目錄下另一個名為 docker-compose-base.yml 文件的內容。

圖片

像 MinIO、MySQL 這些基礎服務的具體配置實際是定義在 docker-compose-base.yml 文件中。

圖片

我們打開 docker-compose.yaml 同級文件夾下的 docker-compose-base.yml,來看下 minio 服務的具體定義內容。

為了方便大家看的更直觀些,我在關鍵的位置添加了注釋如下:

minio:
    image: quay.io/minio/minio:RELEASE.2023-12-20T01-00-02Z
    container_name: ragflow-minio
    command: server --console-address ":9001" /data
    ports:                             # <--- 關鍵部分在這里
      - ${MINIO_PORT}:9000           # <--- API 端口映射
      - ${MINIO_CONSOLE_PORT}:9001    # <--- Console 端口映射
    env_file: .env                     # <--- 環境變量從 .env 文件加載
    environment:
      - MINIO_ROOT_USER=${MINIO_USER}  # <--- MinIO 用戶名 (來自 .env)
      - MINIO_ROOT_PASSWORD=${MINIO_PASSWORD} # <--- MinIO 密碼 (來自 .env)
      - TZ=${TIMEZONE}
    volumes:
      - minio_data:/data
    networks:
      - ragflow
    restart: on-failure

1、端口已映射: minio 服務明確定義了 ports: 部分,將容器內部的 API 端口 9000 和 Console 端口 9001 映射到了宿主機。 

2、端口號是變量: 映射到宿主機的具體端口號不是固定的 9000 和 9001,而是由環境變量 ${MINIO_PORT} 和 ${MINIO_CONSOLE_PORT} 決定的。 

3、環境變量來源: 這些環境變量(MINIO_PORT, MINIO_CONSOLE_PORT, 以及 MINIO_USER, MINIO_PASSWORD)的值是從項目根目錄下的 .env 文件中讀取的 (env_file: .env)。

2.3訪問憑證獲取

我們需要找到 env 中的 minio 訪問憑證,以便接下里修改 process_pdf.py 腳本能夠連接和上傳文件。打開與 docker-compose.yaml 和 docker-compose-base.yml 文件位于同一目錄下的 .env 文件后可以發現,MinIO 配置信息如下: 

圖片

MinIO API 宿主機端口: 9000 

MinIO Console 宿主機端口: 9001 

MinIO 用戶名 (Access Key ID): rag_flow 

MinIO 密碼 (Secret Access Key): infini_rag_flow

2.4訪問測試

通過瀏覽器訪問 http://<你的宿主機 IP>:9001 來打開 MinIO 的 Web 管理界面 (Console)。注意需要把<你的宿主機 IP>替換為你運行 Docker 的那臺機器的實際 IP 地址。如果不清楚如何查看宿主機的 IP 地址,參考下方圖示進行操作:

圖片

3、MinIO Bucket 配置

3.1Bucket 創建

登錄 MinIO Console 后(使用 .env 文件中的用戶名/密碼)創建 Bucket。點擊左側 "Buckets" 、 "Create Bucket",建議使用一個明確的名稱,例如 ragflow-public-assets ,取消勾選 "Versioning" (版本控制),否則會占用更多空間。

圖片

圖片

3.2設置公共讀策略

創建 Bucket 后,點擊該 Bucket 名稱進入詳情。選擇 "Access Policy" 將 Bucket 的訪問策略設置為 "public"。這一步很重要,確保 Dify 和最終用戶能通過 URL 讀取圖片和映射文件。

圖片

4、相關腳本優化

修改后的源碼和Dify YAML文件在知識星球No.33期

圖片

4.1修改 process_pdf.py

主要改動包括:

替換 oss2 導入為 minio 導入,移除與 oss2 相關的初始化和配置代碼。

移除 --oss_map_prefix, --image_dir, --mount_dir 命令行參數及其相關邏輯(包括本地圖片復制)。

修改 extract_images_from_pdf 的調用簽名,傳入 MinIO 相關參數。

添加將 placeholder_map 上傳到 MinIO 的邏輯,并打印 MinIO 公開 URL。

更新腳本末尾的說明,移除關于 image-server 的指令,改為提示用戶在 Dify HTTP 節點中使用 MinIO 映射文件的 URL。

移除錯誤處理和最終清理中與 ./images 相關的部分。

圖片

4.2修改 PyMuPDF_test.py

修改函數簽名:

接收minio_client, bucket_name, image_prefix, minio_endpoint_for_url,移除 image_server_dir, image_server_url。 

移除本地臨時目錄:

刪除 temp_dir 和 os.makedirs(temp_dir, ...). 

圖片處理循環:

獲取 png_bytes 后,不再保存到本地 temp_path。 

生成 MinIO 的 image_object_name(使用 image_prefix)。 

直接使用 minio_client.put_object 上傳 png_bytes (包裹在 io.BytesIO 中),設置 content_type='image/png'。 

構建 MinIO 的公開 image_url(使用傳入的 minio_endpoint_for_url)。 

圖片

占位符 placeholder 使用 os.path.basename(image_object_name)。 

img_info 中記錄 object_name 和 MinIO URL,移除 temp_path。 更新錯誤處理。 

移除本地保存

刪除 with open(temp_path, "wb") 代碼塊。 

圖片

4.3修改 Dify 工作流

HTTP Request 節點:

將其中的 URL 字段修改為指向 MinIO 上傳的 *map.json 文件的公開訪問 URL(即 process_pdf.py 腳本最后打印出的那個 URL,例如 http://<你的宿主機 IP>:9000/ragflow-public-assets/mappings/your_document_map.json)。

圖片

確保請求方法是 GET。

圖片

其他如 Header、Body 等通常不需要設置。

Code 節點:

輸入應該連接到上述 HTTP Request 節點的 body 輸出。

代碼邏輯保持不變:解析傳入的 JSON 字符串(映射關系),然后在 LLM 返回的文本中查找 [IMG::...] 占位符,并使用映射中的 MinIO URL 將其替換為 <img src="..."> HTML 標簽。

5、寫在最后

完成以上所有修改后,處理流程將完全依賴于 RAGFlow 自帶的 MinIO 實例,不再需要獨立的圖片服務器和外部 OSS 服務,同時保留了占位符方案帶來的 LLM 輸出穩定性優勢。這種方法簡化了部署架構,實現了完全本地化,是更優的方案,尤其是在項目成熟后。

仍需說明的是,當前工作流設計有個無法流式輸出影響體驗的問題,主要因為 Code 節點是一個批處理節點,需要等待 LLM 的完整輸出才能進行處理,下期展示下如何進一步通過 Tampermonkey 用戶腳本為本地 Dify 添加前端圖片占位符替換功能。

責任編輯:龐桂玉 來源: 韋東東
相關推薦

2025-04-17 01:00:00

DifyRAGFLow

2025-04-11 09:02:47

2025-04-07 07:00:00

2018-04-23 15:14:02

混合云云存儲公有云

2018-07-13 08:45:57

Ceph對象存儲混合云

2024-10-16 09:49:18

2025-05-30 00:00:00

2021-09-29 08:08:13

前端技術編程

2010-01-05 16:58:43

圖片處理

2025-10-15 01:45:00

DockerMinIO文件存儲

2022-11-09 07:40:18

2013-12-30 16:00:37

華為OceanStor虛擬化容災

2025-05-30 03:00:00

RAGFlow

2025-05-28 02:45:00

Dify扣子Ragflow

2012-01-11 10:55:02

ASP.NET MVC

2015-04-21 16:42:39

騰訊云圖片服務

2009-06-30 09:16:45

數據庫存儲JSP文件

2018-03-20 10:37:33

存儲大數據管理

2025-02-07 11:32:20

2020-10-11 21:00:31

開發存儲服務技術
點贊
收藏

51CTO技術棧公眾號

奇米777第四色| 成人动漫视频在线观看免费| 免费污网站在线观看| 激情久久99| 亚洲视频中文字幕| 亚洲激情在线播放| 日韩欧美你懂的| 黄色免费视频大全| 91美女视频在线| 国产成人亚洲综合a∨婷婷图片| 久久久在线视频| 欧美a在线播放| 动漫视频在线一区| 欧美日韩一级片网站| 高清欧美精品xxxxx| 在线视频二区| 99久久精品一区| 国产精品私拍pans大尺度在线 | 国产精品欧美综合在线| av蓝导航精品导航| 成人黄色三级视频| 国产视频欧美| 久久国产精品久久久久久| 三上悠亚ssⅰn939无码播放| 亚洲无线观看| 欧美日韩亚洲高清一区二区| 男人日女人下面视频| 最新av在线播放| 国产精品女主播av| 明星裸体视频一区二区| 丰满肥臀噗嗤啊x99av| 久久99精品久久久久久国产越南| 欧美在线xxx| 麻豆成人在线视频| 亚欧美无遮挡hd高清在线视频| 亚洲精品综合久久中文字幕| 精品人妻二区中文字幕| 999精品视频在线观看| 欧美亚洲高清一区二区三区不卡| 99爱视频在线| 九色porny视频在线观看| 中文字幕字幕中文在线中不卡视频| 欧美一级二级三级| 欧美激情 亚洲| 91国产美女在线观看| 黄色国产精品视频| 亚洲丝袜精品| 亚洲视频在线观看三级| 色播亚洲视频在线观看| 日本黄在线观看| 91在线精品秘密一区二区| 成人免费视频视频在| 国产成人久久精品77777综合| 美女一区二区三区| 国产精品视频久久久久| 中文字幕 欧美激情| 久久三级福利| 国产精品高清在线| 国产免费av一区| 99精品国产一区二区青青牛奶| 欧美激情区在线播放| 欧美黄色一级网站| 韩日视频一区| 欧美日韩国产999| 久久精品国产亚洲av香蕉| 国产一区欧美| 2018日韩中文字幕| 亚洲欧美自拍视频| 日本视频免费一区| 久久久久国产精品| 夜夜夜精品看看| 亚洲国产一二三精品无码| 国产写真视频在线观看| 亚洲少妇30p| 肉大捧一出免费观看网站在线播放 | 亚洲一卡二卡三卡四卡五卡| 久久久久久久久久久久久国产| 国产精品扒开做爽爽爽的视频| 亚洲欧美自拍偷拍色图| 咪咪色在线视频| 久草免费在线色站| 欧美日韩午夜视频在线观看| 久草青青在线观看| 精品裸体bbb| 欧美巨大另类极品videosbest | 欧美亚韩一区| 国产一区二区黑人欧美xxxx| 国精品人伦一区二区三区蜜桃| 99久久这里只有精品| 欧美激情在线播放| 国产一级18片视频| 美日韩一区二区三区| av一本久道久久波多野结衣| 色综合成人av| 亚洲天堂网中文字| 欧美日韩在线一| 精品久久久网| 亚洲国产成人精品女人久久久| av中文字幕免费观看| 中文字幕一区二区三区欧美日韩| 69精品小视频| 一级黄色片免费| 成人av午夜电影| 日韩资源av在线| 香蕉成人app免费看片| 色综合视频在线观看| 久久发布国产伦子伦精品| 美女搞黄视频在线观看| 韩国三级成人在线| 欧美午夜激情小视频| 国产高潮免费视频| 9l亚洲国产成人精品一区二三| 午夜精品久久久久久久99老熟妇| 亚洲毛片一区| 国产精品久久一区| 黄色av一区二区三区| 国产精品美女久久久久aⅴ国产馆| 草草视频在线免费观看| 九九热这里有精品| 精品小视频在线| 久久久国产精华液| 九色porny丨国产精品| 欧美精品一区二区三区在线看午夜 | 尤物视频免费观看| 国产.精品.日韩.另类.中文.在线.播放| 日本不卡高清视频一区| 久久久男人天堂| 日韩欧美成人午夜| 免费成人美女女在线观看| 国产美女精品| 国产一区视频观看| 日本高清在线观看| 91.com视频| 欧美激情久久久久久久| 美女精品在线观看| 精品欧美一区二区在线观看视频 | 久久99国产精品视频| 久久久久久久久久久久av| 国产精品区在线观看| 国产精品色一区二区三区| 国产亚洲天堂网| 欧洲精品一区| 国外色69视频在线观看| 亚洲欧美国产高清va在线播放| 亚洲欧美综合在线精品| www.色欧美| 成人羞羞动漫| 国产精品日韩一区| 国产成人天天5g影院在线观看| 狠狠躁夜夜躁人人爽天天天天97 | 欧美激情精品久久久久久大尺度 | 日本成人片在线| 亚洲欧美国产视频| 欧美一区二区三区不卡视频| 91丨porny丨国产| 奇米影视亚洲狠狠色| 日本天堂在线播放| 亚洲成人精品| 91免费的视频在线播放| 久久77777| 日韩欧美一区二区在线视频| 免费一级片在线观看| 国产精品乡下勾搭老头1| 国产精品第157页| 激情av综合| 奇米4444一区二区三区| av免费在线一区二区三区| 欧美日韩色一区| 九九精品视频免费| 岛国精品在线观看| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 妖精一区二区三区精品视频| 国产精品精品久久久| 麻豆视频在线| 日韩精品一区在线观看| 精品国产乱码一区二区| 国产性色一区二区| 不用播放器的免费av| 欧美va亚洲va日韩∨a综合色| 国产精品免费一区二区三区四区| 女人高潮被爽到呻吟在线观看 | 久久99蜜桃精品| 在线码字幕一区| 日韩免费成人| 5278欧美一区二区三区| 3p在线观看| 精品区一区二区| 久久久噜噜噜久久久| 波多野结衣毛片| 亚洲丝袜制服诱惑| 五月天激情小说| 全国精品久久少妇| 久久香蕉视频网站| 欧美尿孔扩张虐视频| 国产精品视频不卡| 黄页网站在线| 一区二区三区国产视频| 精品人妻少妇嫩草av无码专区| 欧美日韩免费一区| 51精品免费网站| 久久综合五月天婷婷伊人| 男生操女生视频在线观看| 99精品视频免费观看视频| 亚洲韩国在线| 欧美变态网站| 亚洲一区二区三区xxx视频| 欧美性xxx| 韩国v欧美v日本v亚洲| 777电影在线观看| 精品呦交小u女在线| 国产日韩欧美视频在线观看| 色网综合在线观看| 精品在线视频免费观看| 国产精品二三区| 精品人伦一区二区三电影| 风流少妇一区二区| 亚洲图片 自拍偷拍| 日韩和的一区二区| 丝袜老师办公室里做好紧好爽| 久久久久av| 亚洲欧美国产精品桃花| 亚洲丝袜啪啪| 都市激情久久久久久久久久久| 久久精品国产福利| 国产成人精品久久久| av最新在线| 欧美国产第一页| 免费成人黄色| 正在播放欧美一区| 免费在线视频一级不卡| 亚洲第一天堂无码专区| 朝桐光av在线一区二区三区| 欧美日韩免费一区二区三区视频| 国产九色在线播放九色| 亚洲成人一区二区在线观看| 国产精品免费一区二区三区在线观看 | 欧美美女一区二区| 一本色道久久hezyo无码| 久久 天天综合| 亚洲色图 在线视频| 免费在线观看成人av| av之家在线观看| 国产精品女主播一区二区三区| 国产一线二线三线女| 欧美涩涩视频| h无码动漫在线观看| 亚洲午夜精品一区 二区 三区| 中文字幕中文字幕99 | 亚洲天堂av高清| 欧美色图另类| 欧美大片免费久久精品三p| 国产白浆在线观看| 日韩精品一区二区三区视频 | 日本精品免费视频| 中文字幕免费一区二区| 精品日韩在线播放| 欧美1区3d| 久久久天堂国产精品| 午夜精品久久| 欧美视频免费看欧美视频| 在线看片日韩| 哪个网站能看毛片| 久热综合在线亚洲精品| 国产成人手机视频| 久久成人免费日本黄色| 亚洲人视频在线| 国产成人一区二区精品非洲| 国产午夜在线一区二区三区| 99re热这里只有精品视频| 天天躁日日躁aaaa视频| 国产精品女主播av| 欧美人妻精品一区二区免费看| 亚洲综合免费观看高清完整版在线| 青青操国产视频| 欧美日韩在线视频一区二区| 亚洲中文字幕无码爆乳av| 亚洲成人av观看| 国内外成人免费激情在线视频网站| 97超碰在线免费| 日韩av电影手机在线| 四虎地址8848精品| 国产精品免费一区二区三区观看| 偷拍精品福利视频导航| 一区二区精品国产| 欧美精品国产| 欧美日韩在线不卡视频| 韩国成人精品a∨在线观看| 无码人妻一区二区三区一| www国产精品av| 亚洲精品成人av久久| 一区二区高清视频在线观看| 四虎成人在线观看| 51久久夜色精品国产麻豆| 天堂av手机版| 最新日韩中文字幕| 91黄页在线观看| 国产精品v片在线观看不卡| 国产亚洲久久| 欧美1o一11sex性hdhd| 日韩一区二区在线免费| 黄网站欧美内射| 久久精品国产精品亚洲综合| 99re这里只有| 日韩理论片一区二区| 国产成人精品网| 欧美一区二区三区视频免费播放| 午夜成人鲁丝片午夜精品| 色老头一区二区三区在线观看| 超级碰碰不卡在线视频| 国产美女被下药99| 日本欧美高清| 国语精品免费视频| 国产一区二区三区福利| 最近2019免费中文字幕视频三 | 青青青手机在线视频观看| 日韩有码片在线观看| 天堂中文最新版在线中文| 亚洲一区二区三区毛片| 欧美美女视频| 91国视频在线| 国产凹凸在线观看一区二区| 国产美女网站视频| 日韩欧美精品在线观看| 日本黄色一区二区三区| 久久亚洲春色中文字幕| 中韩乱幕日产无线码一区| 国产综合 伊人色| 欧美午夜视频| 91aaa精品| 亚洲国产激情av| 中文字幕免费观看| 日韩精品视频在线| 96av在线| 国产综合精品一区二区三区| 亚洲欧美综合| 四虎1515hh.com| 亚洲男人的天堂一区二区| 中文字幕精品无码亚| 亚洲欧美日韩中文视频| 日本在线高清| 精品亚洲第一| 国产欧美日本| 国产乱了高清露脸对白| 性做久久久久久免费观看欧美| www香蕉视频| 欧美福利在线观看| 粉嫩一区二区三区四区公司1| 日韩精品第1页| 国产乱人伦偷精品视频不卡| 日韩影院一区二区| 欧美电影在线免费观看| 精品黄色免费中文电影在线播放| 国产精品午夜视频| 久久国产成人精品| 欧美日韩中文不卡| 中文字幕色av一区二区三区| 国产精品怡红院| 欧美wwwxxxx| 国产精品22p| 国自产拍偷拍精品啪啪一区二区| 成人av网站大全| 中文字幕第15页| 国产午夜精品美女视频明星a级| 国产精品第七页| 91丝袜美腿高跟国产极品老师| 国产欧美日韩另类| 日韩精品福利网站| 高清不卡亚洲| 亚洲一区二区自拍偷拍| 国产一区美女在线| 久久久久成人精品无码| 亚洲第一福利视频| 新片速递亚洲合集欧美合集| 日本一区二区三不卡| 老司机精品视频一区二区三区| 91嫩草|国产丨精品入口| 日韩欧美一级精品久久| 国产传媒在线| 欧美一级二级三级九九九| 激情综合色播激情啊| 精品视频一区二区在线观看| 日韩av在线精品| 九九热这里有精品| 免费不卡av在线| 国产欧美日本一区二区三区| 国产美女自慰在线观看| 国内精品视频久久| 久久av综合| 又黄又爽又色的视频| 精品久久久久久久大神国产| 2017亚洲天堂1024| 国产精品久久波多野结衣| 丝瓜av网站精品一区二区 | 日韩欧美电影| 又黄又色的网站| 欧美三级一区二区| 超碰在线99| 天天综合五月天| 久久久精品一品道一区| www.久久久久久|