精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

基于MiniO存儲的RAGFlow+Dify圖片處理方案

人工智能
鑒于 RAGFlow 的 Docker 部署本就包含了一個 MinIO 實例,原本主要用于存儲知識庫的原始文件、塊數據等,利用這個現有的 MinIO 服務來存儲提取的圖片和映射關系是一個很好的本地化部署方案,也可以在上一版方案基礎上,移除對外部云服務(阿里云 OSS)和獨立圖片服務器的依賴。

上篇文章中介紹了如何基于 RAGFlow 知識庫,通過 Dify 的 HTTP 請求獲取映射 + Code 節點替換,將占位符解析為最終的 <img> 標簽,來穩定的實現問答中圖片正常顯示問題。

圖片

Dify+RAGFLow:基于占位符的圖片問答升級方案(最佳實踐)

其中的"占位符"和"實際圖片訪問 URL"映射關系的存儲使用了阿里云的 OSS 存儲服務。初期選擇阿里云 OSS 作為存儲,主要是方便大家快速驗證和迭代 RAG 應用的核心邏輯,避免過早陷入基礎設施的維護細節。

有知識星球的星友提出希望能提供本地部署的存儲方案,市面上有挺多優秀的開源對象存儲框架可供選擇,Ceph、OpenStack Swift 功能全面但架構復雜高,出于規模可控和運維簡單的考慮,MinIO 和 SeaweedFS 都是不錯的選擇。

鑒于 RAGFlow 的 Docker 部署本就包含了一個 MinIO 實例,原本主要用于存儲知識庫的原始文件、塊數據等,利用這個現有的 MinIO 服務來存儲提取的圖片和映射關系是一個很好的本地化部署方案,也可以在上一版方案基礎上,移除對外部云服務(阿里云 OSS)和獨立圖片服務器的依賴。

圖片

以下,enjoy:

1、“語義幻覺” vs “格式遵循”

在正式進入 MinIO 的存儲方案調整前,我們再來回顧下,在富文本中直接嵌入完整 URL 可能導致 LLM“幻覺”并修改圖片鏈接的考量所在。

1.1直接嵌入 URL

當 LLM 在其上下文中看到一個完整的、看似有意義的 URL 時,例如<img src="..."> 或 http://.../filename.png,特別是像<img>標簽這樣結構化的 HTML,它有一定概率(不同 LLM 實測篡改 URL 的概率不太一致)會嘗試去“理解”這個 URL 指向的內容,并結合周圍的文本進行推理。

例如如果文本描述了“燃油噴射器泄漏”,而 URL 的文件名是 page1_img1_uuid.png,LLM 可能會認為存在不匹配,并“好心”地嘗試生成一個它認為更符合語義的 URL,例如 .../fuel_injector_leak.png。這樣導致了很多盆友說為什么知識庫中能渲染圖片,但是回答中卻無法顯示的問題。

其實這也很好理解,本質上這是源于 LLM 被訓練來生成連貫、相關的文本,有時會過度泛化到它不應修改的結構化數據上。

1.2占位符方案的意義

[IMG::page1_img1_uuid.png]這種格式對 LLM 來說,更像是一個需要特殊處理的“元數據標記”或“代碼片段”,而不是一段可供自由發揮的自然語言或標準 HTML。通過 Prompt 工程明確指示 LLM 將這些標記視為特殊占位符,并在需要引用時原樣復制,實測確實可以大大降低它進行“創造性修改”的動機。LLM 更傾向于遵循這種明確的格式指令,而不是去猜測 page1_img1_uuid.png 的語義含義并嘗試“改進”它。

總結來說,使用占位符的方案,是把潛在的圖片鏈接錯誤問題,從一個不可控的 LLM“語義理解導致的幻覺修改”問題,轉變為一個相對更容易通過 Prompt 工程來約束的“格式遵循”問題。要求 LLM 精確復制一個特殊格式的字符串,通常比要求它不對一個看起來像自然語言一部分的 URL 進行語義修改要更容易實現和控制。

2、RAGFlow 的 MinIO 訪問結構

2.1內部訪問

RAGFlow 的其他服務(如 API 服務、Worker)在 Docker 網絡內部通常通過服務名(例如 minio)和默認端口(9000 for API, 9001 for Console)訪問 MinIO。

2.2外部訪問

首先需要明確的是,RAGFlow的MinIO 服務是否映射到了宿主機。在 docker-compose.yml 的開頭第一行可以看到 include: - ./docker-compose-base.yml 這行,它表示 docker-compose.yaml 文件本身并不包含所有服務的完整定義,而是包含了同目錄下另一個名為 docker-compose-base.yml 文件的內容。

圖片

像 MinIO、MySQL 這些基礎服務的具體配置實際是定義在 docker-compose-base.yml 文件中。

圖片

我們打開 docker-compose.yaml 同級文件夾下的 docker-compose-base.yml,來看下 minio 服務的具體定義內容。

為了方便大家看的更直觀些,我在關鍵的位置添加了注釋如下:

minio:
    image: quay.io/minio/minio:RELEASE.2023-12-20T01-00-02Z
    container_name: ragflow-minio
    command: server --console-address ":9001" /data
    ports:                             # <--- 關鍵部分在這里
      - ${MINIO_PORT}:9000           # <--- API 端口映射
      - ${MINIO_CONSOLE_PORT}:9001    # <--- Console 端口映射
    env_file: .env                     # <--- 環境變量從 .env 文件加載
    environment:
      - MINIO_ROOT_USER=${MINIO_USER}  # <--- MinIO 用戶名 (來自 .env)
      - MINIO_ROOT_PASSWORD=${MINIO_PASSWORD} # <--- MinIO 密碼 (來自 .env)
      - TZ=${TIMEZONE}
    volumes:
      - minio_data:/data
    networks:
      - ragflow
    restart: on-failure

1、端口已映射: minio 服務明確定義了 ports: 部分,將容器內部的 API 端口 9000 和 Console 端口 9001 映射到了宿主機。 

2、端口號是變量: 映射到宿主機的具體端口號不是固定的 9000 和 9001,而是由環境變量 ${MINIO_PORT} 和 ${MINIO_CONSOLE_PORT} 決定的。 

3、環境變量來源: 這些環境變量(MINIO_PORT, MINIO_CONSOLE_PORT, 以及 MINIO_USER, MINIO_PASSWORD)的值是從項目根目錄下的 .env 文件中讀取的 (env_file: .env)。

2.3訪問憑證獲取

我們需要找到 env 中的 minio 訪問憑證,以便接下里修改 process_pdf.py 腳本能夠連接和上傳文件。打開與 docker-compose.yaml 和 docker-compose-base.yml 文件位于同一目錄下的 .env 文件后可以發現,MinIO 配置信息如下: 

圖片

MinIO API 宿主機端口: 9000 

MinIO Console 宿主機端口: 9001 

MinIO 用戶名 (Access Key ID): rag_flow 

MinIO 密碼 (Secret Access Key): infini_rag_flow

2.4訪問測試

通過瀏覽器訪問 http://<你的宿主機 IP>:9001 來打開 MinIO 的 Web 管理界面 (Console)。注意需要把<你的宿主機 IP>替換為你運行 Docker 的那臺機器的實際 IP 地址。如果不清楚如何查看宿主機的 IP 地址,參考下方圖示進行操作:

圖片

3、MinIO Bucket 配置

3.1Bucket 創建

登錄 MinIO Console 后(使用 .env 文件中的用戶名/密碼)創建 Bucket。點擊左側 "Buckets" 、 "Create Bucket",建議使用一個明確的名稱,例如 ragflow-public-assets ,取消勾選 "Versioning" (版本控制),否則會占用更多空間。

圖片

圖片

3.2設置公共讀策略

創建 Bucket 后,點擊該 Bucket 名稱進入詳情。選擇 "Access Policy" 將 Bucket 的訪問策略設置為 "public"。這一步很重要,確保 Dify 和最終用戶能通過 URL 讀取圖片和映射文件。

圖片

4、相關腳本優化

修改后的源碼和Dify YAML文件在知識星球No.33期

圖片

4.1修改 process_pdf.py

主要改動包括:

替換 oss2 導入為 minio 導入,移除與 oss2 相關的初始化和配置代碼。

移除 --oss_map_prefix, --image_dir, --mount_dir 命令行參數及其相關邏輯(包括本地圖片復制)。

修改 extract_images_from_pdf 的調用簽名,傳入 MinIO 相關參數。

添加將 placeholder_map 上傳到 MinIO 的邏輯,并打印 MinIO 公開 URL。

更新腳本末尾的說明,移除關于 image-server 的指令,改為提示用戶在 Dify HTTP 節點中使用 MinIO 映射文件的 URL。

移除錯誤處理和最終清理中與 ./images 相關的部分。

圖片

4.2修改 PyMuPDF_test.py

修改函數簽名:

接收minio_client, bucket_name, image_prefix, minio_endpoint_for_url,移除 image_server_dir, image_server_url。 

移除本地臨時目錄:

刪除 temp_dir 和 os.makedirs(temp_dir, ...). 

圖片處理循環:

獲取 png_bytes 后,不再保存到本地 temp_path。 

生成 MinIO 的 image_object_name(使用 image_prefix)。 

直接使用 minio_client.put_object 上傳 png_bytes (包裹在 io.BytesIO 中),設置 content_type='image/png'。 

構建 MinIO 的公開 image_url(使用傳入的 minio_endpoint_for_url)。 

圖片

占位符 placeholder 使用 os.path.basename(image_object_name)。 

img_info 中記錄 object_name 和 MinIO URL,移除 temp_path。 更新錯誤處理。 

移除本地保存

刪除 with open(temp_path, "wb") 代碼塊。 

圖片

4.3修改 Dify 工作流

HTTP Request 節點:

將其中的 URL 字段修改為指向 MinIO 上傳的 *map.json 文件的公開訪問 URL(即 process_pdf.py 腳本最后打印出的那個 URL,例如 http://<你的宿主機 IP>:9000/ragflow-public-assets/mappings/your_document_map.json)。

圖片

確保請求方法是 GET。

圖片

其他如 Header、Body 等通常不需要設置。

Code 節點:

輸入應該連接到上述 HTTP Request 節點的 body 輸出。

代碼邏輯保持不變:解析傳入的 JSON 字符串(映射關系),然后在 LLM 返回的文本中查找 [IMG::...] 占位符,并使用映射中的 MinIO URL 將其替換為 <img src="..."> HTML 標簽。

5、寫在最后

完成以上所有修改后,處理流程將完全依賴于 RAGFlow 自帶的 MinIO 實例,不再需要獨立的圖片服務器和外部 OSS 服務,同時保留了占位符方案帶來的 LLM 輸出穩定性優勢。這種方法簡化了部署架構,實現了完全本地化,是更優的方案,尤其是在項目成熟后。

仍需說明的是,當前工作流設計有個無法流式輸出影響體驗的問題,主要因為 Code 節點是一個批處理節點,需要等待 LLM 的完整輸出才能進行處理,下期展示下如何進一步通過 Tampermonkey 用戶腳本為本地 Dify 添加前端圖片占位符替換功能。

責任編輯:龐桂玉 來源: 韋東東
相關推薦

2025-04-17 01:00:00

DifyRAGFLow

2025-04-11 09:02:47

2025-04-07 07:00:00

2018-04-23 15:14:02

混合云云存儲公有云

2018-07-13 08:45:57

Ceph對象存儲混合云

2024-10-16 09:49:18

2025-05-30 00:00:00

2021-09-29 08:08:13

前端技術編程

2010-01-05 16:58:43

圖片處理

2025-10-15 01:45:00

DockerMinIO文件存儲

2022-11-09 07:40:18

2013-12-30 16:00:37

華為OceanStor虛擬化容災

2025-05-30 03:00:00

RAGFlow

2025-05-28 02:45:00

Dify扣子Ragflow

2012-01-11 10:55:02

ASP.NET MVC

2015-04-21 16:42:39

騰訊云圖片服務

2009-06-30 09:16:45

數據庫存儲JSP文件

2018-03-20 10:37:33

存儲大數據管理

2025-02-07 11:32:20

2020-10-11 21:00:31

開發存儲服務技術
點贊
收藏

51CTO技術棧公眾號

无码视频一区二区三区| 亚洲制服丝袜在线播放| 国内外激情在线| 国产jizzjizz一区二区| 51久久精品夜色国产麻豆| 波多野结衣一本| 亚洲高清影院| 精品日韩中文字幕| 亚洲欧洲一区二区在线观看| www.黄色小说.com| 视频一区视频二区中文字幕| 久久久国产成人精品| 国产精品九九九九九| 亚洲成人高清| 91久久精品国产91性色tv| 日韩 欧美 自拍| 可以在线观看的av网站| 国产成人综合亚洲网站| 国产精品69av| 天天操天天摸天天干| 99久久.com| 亚洲剧情一区二区| 极品人妻一区二区| 国产一区精品福利| 日韩欧美国产一区二区| 高清无码一区二区在线观看吞精| 理论视频在线| 99在线精品一区二区三区| 亚洲综合中文字幕在线观看| 国产精品第六页| 一区二区三区四区五区在线| 欧美猛男性生活免费| 日韩一区二区a片免费观看| 国产精品qvod| 欧美videossexotv100| 中国黄色片一级| jizz欧美| 欧美色成人综合| 毛葺葺老太做受视频| 一区二区三区短视频| 亚洲成人午夜影院| 国产在线视频综合| caoporn97在线视频| 中文字幕在线不卡视频| 亚洲成人a**址| 国产一级二级三级在线观看| 91啪九色porn原创视频在线观看| 国产精选一区二区| 天天av天天翘| 99精品国产视频| 国产精品二区在线| 丰满人妻一区二区三区免费视频 | 老太脱裤让老头玩ⅹxxxx| 超碰人人在线| 一区二区三区中文字幕精品精品| 永久免费在线看片视频| 国产在线二区| 亚洲男人的天堂在线aⅴ视频| 天天爱天天做天天操| 成人在线播放| 亚洲国产日韩在线一区模特| 99在线观看视频免费| av在线中出| 欧美日韩亚洲视频一区| 波多野结衣家庭教师视频| 在线女人免费视频| 91电影在线观看| 国产精品自拍视频在线| 欧美区一区二区| 精品91自产拍在线观看一区| 朝桐光av一区二区三区| 国产99亚洲| 日韩在线观看免费网站 | 日本高清中文字幕二区在线| 久久欧美中文字幕| 欧美久久在线| 午夜激情在线观看| 亚洲午夜一二三区视频| 亚洲国产精品久久久久爰色欲| 26uuu亚洲电影| 337p亚洲精品色噜噜噜| 免费观看一区二区三区| 国产va免费精品观看精品视频| 中文字幕亚洲在线| 久久成人国产精品入口| 奶水喷射视频一区| 国产日韩精品在线观看| 国精产品一品二品国精品69xx| 99re这里都是精品| 亚洲午夜精品一区二区| 欧美aaa免费| 色婷婷精品久久二区二区蜜臂av| 国产aⅴ爽av久久久久| 国内精品偷拍| 综合欧美国产视频二区| 久久综合综合久久| 青青草精品视频| 国产精品久久波多野结衣| 黄色美女网站在线观看| 一区二区久久久| 少妇激情一区二区三区| 97久久精品| 少妇精69xxtheporn| 国产午夜视频在线播放| 蜜桃久久av一区| 国产精品一区二区在线观看 | 精品国产无码一区二区三区| 久久综合久久综合亚洲| 波多野结衣 作品| 日韩在线观看不卡| 亚洲精品国产品国语在线| 三级黄色录像视频| 久久久一二三| 99国产超薄丝袜足j在线观看| 国产污视频在线| 亚洲成人激情av| 国内av免费观看| 日本一区二区在线看| 性欧美暴力猛交69hd| 国产v片在线观看| 国产精品午夜在线观看| 国产精品专区在线| 国产一区二区三区黄网站| 亚洲欧美在线免费观看| 日本在线观看中文字幕| 国产一区二区三区四区在线观看| 日韩av电影免费观看| 成人免费一区二区三区牛牛| 欧美一区二区三区在线看| 精品无人区无码乱码毛片国产| 在线成人国产| 99国内精品久久久久久久软件| 日本在线观看网站| 欧美怡红院视频| 亚洲a v网站| 新67194成人永久网站| 国产精品区免费视频| 在线观看操人| 91精品国产91久久久久久一区二区| 91在线无精精品白丝| 米奇777在线欧美播放| 国产综合18久久久久久| 金瓶狂野欧美性猛交xxxx| 日韩欧美电影在线| 天天综合天天做| 国产综合色在线| 欧美h视频在线观看| 亚洲欧洲日韩精品在线| 色妞色视频一区二区三区四区| 亚洲中文无码av在线| 国产亚洲精品aa| 久久精品一区二| 久久av影视| 国产精品久久久久久久久久久新郎 | 麻豆传媒一区二区三区| 亚洲欧美日韩精品久久久| 成人亚洲免费| 播播国产欧美激情| 国产视频在线观看视频| 一区二区免费看| 在线xxxxx| 亚洲激情在线| 久久偷窥视频| 免费在线成人激情电影| 久久精品99久久香蕉国产色戒| 91尤物国产福利在线观看| 亚洲免费观看高清在线观看| 免费不卡av网站| 黄色亚洲精品| 日本a级片久久久| 日本免费在线一区| 欧美精品xxx| 神马精品久久| 欧美三级在线播放| 精品国产欧美日韩不卡在线观看| 成人在线综合网站| 日本wwww视频| 欧美一区2区| 91免费版网站在线观看| 女厕盗摄一区二区三区| 国产一区二区三区毛片| 国产激情视频在线播放 | 亚洲国产精品久久久久婷蜜芽| 国产精品日韩精品中文字幕| 成人欧美一区二区三区在线湿哒哒| 美女日批视频在线观看| 亚洲香蕉在线观看| 国产精品天天操| 天天影视色香欲综合网老头| 91社区视频在线观看| 高清av一区二区| 中文字幕在线观看第三页| 欧美+亚洲+精品+三区| 六月婷婷久久| 国产精品日本一区二区不卡视频| 69影院欧美专区视频| 午夜不卡视频| 国产婷婷成人久久av免费高清| 国产精品欧美激情在线| 欧美日韩在线视频首页| 可以直接看的黄色网址| 26uuu另类欧美亚洲曰本| 国产5g成人5g天天爽| 欧美一级片在线视频| 日韩av一区二区三区| 激情五月六月婷婷| 人人狠狠综合久久亚洲婷| 国产精品成人观看视频免费| av久久网站| 欧美在线视频网站| 黄色在线看片| 久久亚洲精品网站| 国产视频在线看| 亚洲精品久久久久| 精品国产亚洲AV| 欧美日韩国产bt| 国语对白永久免费| 亚洲国产乱码最新视频| 女人18毛片毛片毛片毛片区二| 久久蜜臀精品av| 黄色国产在线视频| 国内精品免费**视频| 9久久婷婷国产综合精品性色| 亚洲日本免费| www.九色.com| 综合一区av| 色香蕉在线观看| 成久久久网站| 色视频一区二区三区| 亚洲自拍都市欧美小说| 久久av二区| 欧美三级电影在线| 国产精品裸体一区二区三区| 视频免费一区二区| 91在线观看免费高清| 亚洲狼人综合| 国产美女久久精品| 韩国精品视频在线观看 | 国语对白做受69按摩| 欧美日韩另类视频| 久久精品视频久久| 亚洲一区二区影院| 精品无码黑人又粗又大又长| 亚洲精品国产精品乱码不99| 老湿机69福利| 亚洲精品久久久蜜桃| 91视频综合网| 亚洲国产精品一区二区www| 国产在线观看免费视频今夜| 亚洲精品免费看| 精品国产精品国产精品| 亚洲欧美日韩电影| 国产大片免费看| 亚洲综合丁香婷婷六月香| 国产精品suv一区二区69| 亚洲成国产人片在线观看| 日韩高清免费av| 精品二区三区线观看| 久久久成人免费视频| 91成人在线免费观看| 进去里视频在线观看| 欧美日韩高清在线| 国产黄a三级三级看三级| 亚洲成**性毛茸茸| 天堂资源中文在线| 在线观看国产成人av片| 精品国产丝袜高跟鞋| 欧美激情一区二区三区在线视频观看| 国产在线xxx| 欧洲美女免费图片一区| jizz久久久久久| 亚洲一区二区免费| 久久久久观看| 日韩欧美视频第二区| 性欧美69xoxoxoxo| 日本欧美视频在线观看| 久久xxxx| 三级性生活视频| 99久久精品国产一区二区三区 | 日韩美女视频免费看| 农村妇女一区二区| 国产成人精品免费视频大全最热 | av中文在线播放| 欧美日韩一区成人| 性猛交富婆╳xxx乱大交天津| 日韩精品在线免费观看视频| 午夜激情视频在线观看| 91精品国产91久久久久久久久| 亚洲四虎影院| 国产福利久久| 日韩片欧美片| 欧美在线观看www| 美女视频黄 久久| 尤物网站在线观看| 国产精品久久久久久久久图文区 | 亚洲精选久久| 免费一区二区三区在线观看| 成人va在线观看| 国产精品麻豆免费版现看视频| 亚洲国产裸拍裸体视频在线观看乱了 | 一区二区三区视频网站| 韩国精品久久久999| 国产91亚洲精品久久久| 精品国产免费人成电影在线观...| sdde在线播放一区二区| 日韩精品―中文字幕| 国产综合久久久久久鬼色| 美国黄色一级毛片| 一区二区高清在线| 国产精品久久久久久69| 亚洲美女中文字幕| 金瓶狂野欧美性猛交xxxx| 成人激情免费在线| 欧美中文字幕一区二区| 欧美a v在线播放| 国产河南妇女毛片精品久久久| 免费在线观看a视频| 大桥未久av一区二区三区| 亚洲av无码乱码国产精品久久| 色偷偷偷综合中文字幕;dd| videos性欧美另类高清| 风间由美久久久| 午夜精品视频一区二区三区在线看| 色诱视频在线观看| 99riav久久精品riav| 久久精品视频6| 欧美成人一区二区| 中国av在线播放| 91精品国产综合久久久久久蜜臀 | 91免费看片在线观看| 久久精品www人人爽人人| 91精品国产综合久久精品性色 | 女同一区二区三区| 久草免费福利在线| 国产精品99久久久久久久女警| 国产一二三av| 欧美人体做爰大胆视频| 啊v视频在线| 国产精品日本精品| 成人高清电影网站| 日本www.色| 欧美韩国日本不卡| 中文字幕在线播放不卡| 国产亚洲xxx| 高清av一区二区三区| 亚洲国产精品一区二区第四页av| 久久综合图片| 丰满的亚洲女人毛茸茸| 欧美性做爰猛烈叫床潮| 91porn在线观看| 国产精品视频xxx| 青青一区二区三区| 五月天视频在线观看| 国产精品福利一区二区| 99久久国产免费| 欧美精品videossex性护士| 久久久久观看| 午夜精品久久久内射近拍高清| 久久久91精品国产一区二区精品| 无码人妻久久一区二区三区| 国产一区二区三区在线| 亚洲欧洲日韩精品在线| 51xx午夜影福利| 成人午夜激情影院| 欧美日韩精品区| 国产亚洲欧美日韩精品| 激情亚洲小说| 国产女主播自拍| 91社区在线播放| 中文字幕精品无码亚| 久久中文字幕视频| 久久综合五月婷婷| 黄色av免费在线播放| 成人欧美一区二区三区视频网页| www.五月天激情| 欧美综合在线观看| 日韩午夜电影网| 伊人av在线播放| 色综合久久中文综合久久97| aiai在线| av免费观看久久| 久久久久久黄| caoporn91| 亚洲视频在线视频| 日韩精品视频一区二区三区| 欧美国产激情视频| 日韩毛片一二三区| 天堂v在线观看| 国产日韩在线视频| 99精品视频免费观看视频| 大吊一区二区三区| 精品国产一区二区国模嫣然| 国产精品亚洲一区二区三区在线观看 | 色视频在线观看免费| 国产色婷婷国产综合在线理论片a| 亚洲电影av| 手机av在线看| 亚洲免费成人av电影| 亚洲精品在线播放| 爱情岛论坛成人|