日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

圖RAG烹飪問(wèn)答系統(tǒng):Neo4j+Milvus雙路召回實(shí)踐

圖RAG烹飪問(wèn)答系統(tǒng):Neo4j+Milvus雙路召回實(shí)踐 你有沒(méi)有遇到過(guò)這種情況想做一道菜網(wǎng)上搜了一堆菜譜但每個(gè)菜譜都默認(rèn)你有某種食材或調(diào)料而你想問(wèn)的是“能不能不放花生”“有沒(méi)有替代豬肉的辦法”“宮保雞丁和魚(yú)香肉絲都用什么技法”這類(lèi)需要把菜譜拆開(kāi)、跨菜譜比較的問(wèn)題。普通搜索返回的是整篇文章LLM直接回答又容易一本正經(jīng)地胡說(shuō)八道。我去年一直在琢磨怎么把菜譜變成可查詢(xún)、可推理的結(jié)構(gòu)化知識(shí)最后做了這個(gè)“圖 RAG 烹飪問(wèn)答系統(tǒng)”底層用 Neo4j 存菜譜知識(shí)圖譜用 Milvus 做語(yǔ)義向量召回再把兩者的結(jié)果組裝成上下文丟給 LLM 生成答案。這個(gè)項(xiàng)目已經(jīng)跑通了一個(gè)可演示的版本思路也可以遷移到其他垂直領(lǐng)域的知識(shí)問(wèn)答。這篇文章是完整的工程實(shí)踐記錄涉及數(shù)據(jù)建模、環(huán)境安裝、代碼實(shí)現(xiàn)和排坑過(guò)程適合正在做 RAG 應(yīng)用、或者想了解怎么把圖數(shù)據(jù)庫(kù)和向量數(shù)據(jù)庫(kù)結(jié)合在一起使用的開(kāi)發(fā)者參考。1. 為什么烹飪問(wèn)答需要“圖向量”雙路召回1.1 菜譜天然是圖結(jié)構(gòu)菜譜不是一段純文本它是一張關(guān)系網(wǎng)。一道菜包含多種食材、多種調(diào)料、多個(gè)步驟和技法食材之間有替代關(guān)系比如“花生”可以被“腰果”替代但“醬油”很難被“鹽”替代菜肴屬于某個(gè)菜系又和另一道菜共用同樣的技法。這種多對(duì)多的關(guān)系用關(guān)系型數(shù)據(jù)庫(kù)硬存也行但查詢(xún)“哪些菜不需要用油”“糖和蜂蜜能不能互換”就會(huì)寫(xiě)出一大堆 JOIN而且越查越復(fù)雜。圖數(shù)據(jù)庫(kù)就是為這種關(guān)系網(wǎng)絡(luò)準(zhǔn)備的Neo4j 里的節(jié)點(diǎn)和關(guān)系能直接表達(dá)“A 是 B 的替代品”“C 使用了 D 技法”查詢(xún)起來(lái)非常自然。早期我想用純向量數(shù)據(jù)庫(kù)做這個(gè)問(wèn)答因?yàn)椴俗V文本可以先向量化再檢索實(shí)現(xiàn)簡(jiǎn)單。但很快發(fā)現(xiàn)一個(gè)問(wèn)題向量檢索擅長(zhǎng)的是“語(yǔ)義相似”它知道“宮保雞丁”和“雞丁炒花生米”在語(yǔ)義上有點(diǎn)像但它不知道雞丁和花生米之間是否存在某種依賴(lài)關(guān)系也無(wú)法推理“去掉花生米之后這道菜的結(jié)構(gòu)還成立嗎”。圖數(shù)據(jù)庫(kù)恰恰補(bǔ)上了這塊短板——它能把菜譜中的實(shí)體和關(guān)系暴露給后續(xù)的生成步驟讓 LLM 不只是“讀到”一段文本而是“看到”一個(gè)可理解、可驗(yàn)證的知識(shí)結(jié)構(gòu)。1.2 純向量檢索的短板與圖 RAG 的互補(bǔ)邏輯我一開(kāi)始只用了向量檢索效果怎么說(shuō)呢問(wèn)它“魚(yú)香肉絲有沒(méi)有不放豬肉的做法”它能搜到一些魚(yú)香肉絲菜譜但給出來(lái)的答案就是把菜譜原封不動(dòng)貼出來(lái)沒(méi)有任何替代建議因?yàn)樗緵](méi)檢索到“豬肉”這個(gè)實(shí)體在食材關(guān)系網(wǎng)中的位置。后來(lái)我在檢索結(jié)果里強(qiáng)行塞入實(shí)體關(guān)系效果立刻變好。這讓我意識(shí)到RAG 的上下文不一定是“一堆文本塊”還可以是“一個(gè)從知識(shí)圖譜里提取出來(lái)的子圖”。這種把圖結(jié)構(gòu)作為上下文的一部分喂給 LLM 的做法就是所謂圖 RAG。具體來(lái)說(shuō)這個(gè)系統(tǒng)的雙路召回邏輯是先用 Milvus 做語(yǔ)義粗篩從所有菜譜中找到與用戶(hù)問(wèn)題最相關(guān)的 Top-K 個(gè)菜譜然后把這幾個(gè)候選菜譜在 Neo4j 里對(duì)應(yīng)的節(jié)點(diǎn)撈出來(lái)沿著關(guān)系向外擴(kuò)展一跳拿到關(guān)聯(lián)的食材、技法、替代關(guān)系最后把“候選菜譜文本 圖擴(kuò)展出的關(guān)系三元組”合并成結(jié)構(gòu)化的上下文交給 LLM 生成回答。向量負(fù)責(zé)“廣度”圖負(fù)責(zé)“深度”LLM 負(fù)責(zé)“組織語(yǔ)言和推理”。1.3 系統(tǒng)整體架構(gòu)與數(shù)據(jù)流概覽整個(gè)系統(tǒng)由四個(gè)模塊組成菜譜數(shù)據(jù)處理、Neo4j 圖譜、Milvus 向量庫(kù)、LLM 服務(wù)編排。處理流程如下收集菜譜原始文本我用的是開(kāi)源中文菜譜數(shù)據(jù)集大約 4000 道菜。用規(guī)則模板 簡(jiǎn)單命名實(shí)體識(shí)別從菜譜中抽取出菜名、食材列表、調(diào)料列表、步驟、技法、口味標(biāo)簽。將抽取結(jié)果節(jié)點(diǎn)化寫(xiě)入 Neo4j菜譜節(jié)點(diǎn)、食材節(jié)點(diǎn)、技法節(jié)點(diǎn)、口味節(jié)點(diǎn)以及它們之間的關(guān)系。同時(shí)把菜譜的核心信息拼接成一段文本例如“菜名魚(yú)香肉絲食材豬里脊、木耳、胡蘿卜…技法炒口味魚(yú)香……”向量化后寫(xiě)入 Milvus。用戶(hù)提問(wèn)時(shí)先用 LLM 做一層查詢(xún)理解提取食材/菜名等實(shí)體然后用這些實(shí)體直接到 Neo4j 查相關(guān)圖譜同時(shí)把原始問(wèn)題送入 Milvus 進(jìn)行向量檢索。把圖譜查詢(xún)結(jié)果和向量召回結(jié)果合并構(gòu)造 prompt調(diào)用 LLM 生成最終答案。流程圖我故意不畫(huà)文字描述可能更直觀(guān)。整個(gè)系統(tǒng)用 Python 編寫(xiě)Neo4j 和 Milvus 都是獨(dú)立服務(wù)LLM 可以接 OpenAI 兼容接口也可以接本地部署的模型我后來(lái)為了省錢(qián)換成了 Ollama 跑的 Qwen。下面從建模開(kāi)始逐層拆解。2. 知識(shí)圖譜建模用 Neo4j 把菜譜變成可以推理的圖2.1 菜譜數(shù)據(jù)獲取與清洗數(shù)據(jù)是項(xiàng)目的起點(diǎn)。我用了一個(gè)開(kāi)源的中文菜譜數(shù)據(jù)集包含菜名、原料列表、步驟、菜系等字段。原始數(shù)據(jù)質(zhì)量參差不齊最大的問(wèn)題有三個(gè)同一食材有不同寫(xiě)法“馬鈴薯”和“土豆”“花生米”和“花生仁”調(diào)料和食材混在一個(gè)字段里步驟是長(zhǎng)文本很難直接拆出技法。我的處理思路是先做詞表歸一化把常見(jiàn)同義詞映射到一個(gè)標(biāo)準(zhǔn)名稱(chēng)再根據(jù)一個(gè)預(yù)置的食材調(diào)料詞典把原料字段分割成結(jié)構(gòu)化列表。這個(gè)詞典我維護(hù)了大概 800 個(gè)常見(jiàn)條目雖然不能覆蓋全部食材但覆蓋了訓(xùn)練數(shù)據(jù)集里 90% 以上的情況。清洗后的數(shù)據(jù)格式大致是{ name: 魚(yú)香肉絲, cuisine: 川菜, ingredients: [豬里脊, 木耳, 胡蘿卜, 冬筍, 泡椒, 蔥姜蒜], seasonings: [醬油, 醋, 糖, 鹽, 淀粉], steps: [里脊切絲加鹽、淀粉腌制備用, 木耳、胡蘿卜、冬筍切絲, 熱鍋涼油下肉絲滑熟, 爆香泡椒、蔥姜蒜加入配菜翻炒, 調(diào)入醬油、醋、糖勾芡出鍋], techniques: [炒, 滑炒, 勾芡], flavors: [魚(yú)香, 酸甜, 微辣] }清洗這一步容易被忽略但它是整個(gè)項(xiàng)目的地基。如果食材沒(méi)有歸一化圖里的同一個(gè)食材可能會(huì)拆成好幾個(gè)節(jié)點(diǎn)替代關(guān)系就會(huì)斷裂。我后來(lái)特意加了一個(gè)合并步驟把 Neo4j 中同名的食材節(jié)點(diǎn)合并這樣關(guān)系才能聚攏。2.2 節(jié)點(diǎn)與關(guān)系設(shè)計(jì)Recipe、Ingredient、Technique、Flavor、替代關(guān)系知識(shí)圖譜沒(méi)有唯一正確的設(shè)計(jì)但有一個(gè)原則節(jié)點(diǎn)要代表“會(huì)被反復(fù)查詢(xún)的實(shí)體”關(guān)系要代表“會(huì)被反復(fù)提問(wèn)的語(yǔ)義”。我的圖譜包含以下節(jié)點(diǎn)類(lèi)型Recipe菜譜屬性有 name、cuisine、description。Ingredient食材/調(diào)料屬性有 name、category食材還是調(diào)料。Technique技法屬性有 name例如炒、蒸、炸、烤。Flavor口味標(biāo)簽屬性有 name例如魚(yú)香、麻辣、清淡。DietaryTag膳食標(biāo)簽屬性有 name例如素食、清真、無(wú)麩質(zhì)。這個(gè)節(jié)點(diǎn)對(duì)替代推薦特別有用。關(guān)系類(lèi)型及含義關(guān)系起點(diǎn)終點(diǎn)含義CONTAINSRecipeIngredient菜譜包含該食材USES_TECHNIQUERecipeTechnique菜譜使用了某種技法HAS_FLAVORRecipeFlavor菜譜具有某種口味CAN_SUBSTITUTEIngredientIngredient兩種食材在特定場(chǎng)景下可以互換RELATED_RECIPERecipeRecipe共用至少兩種食材的菜譜相似CAN_SUBSTITUTE關(guān)系是圖譜里最有價(jià)值的部分。我從兩個(gè)渠道構(gòu)建一部分是人工整理的常見(jiàn)替代規(guī)則比如花生替代腰果、豬油替代植物油、白糖替代冰糖另一部分是從“共用食材和技法”的關(guān)系中推導(dǎo)候選替代關(guān)系再人工過(guò)濾。最終得到約 600 條替代邊不多但足夠覆蓋常見(jiàn)問(wèn)題。2.3 Cypher 導(dǎo)入從 CSV 批量創(chuàng)建圖譜數(shù)據(jù)清洗完成后我用 Cypher 語(yǔ)句把結(jié)構(gòu)化數(shù)據(jù)導(dǎo)入 Neo4j。這里不推薦逐條執(zhí)行 CREATE 語(yǔ)句數(shù)據(jù)量大時(shí)太慢。我直接導(dǎo) CSV 文件。步驟如下把菜譜、食材、技法、口味分別導(dǎo)出為 CSV 文件。把菜譜-食材關(guān)系、菜譜-技法關(guān)系等導(dǎo)出為關(guān)系 CSV 文件。用LOAD CSV WITH HEADERS FROM file:///recipes.csv AS row逐行創(chuàng)建節(jié)點(diǎn)。為了加速創(chuàng)建關(guān)系先為節(jié)點(diǎn)創(chuàng)建唯一約束例如CREATE CONSTRAINT recipe_name_unique FOR (r:Recipe) REQUIRE r.name IS UNIQUE。核心導(dǎo)入語(yǔ)句示例// 創(chuàng)建食材節(jié)點(diǎn) LOAD CSV WITH HEADERS FROM file:///ingredients.csv AS row MERGE (i:Ingredient {name: row.name}) SET i.category row.category; // 創(chuàng)建菜譜節(jié)點(diǎn) LOAD CSV WITH HEADERS FROM file:///recipes.csv AS row MERGE (r:Recipe {name: row.name}) SET r.cuisine row.cuisine, r.description row.description; // 創(chuàng)建關(guān)系 LOAD CSV WITH HEADERS FROM file:///recipe_ingredient.csv AS row MATCH (r:Recipe {name: row.recipe_name}) MATCH (i:Ingredient {name: row.ingredient_name}) MERGE (r)-[:CONTAINS]-(i);這里有個(gè)注意點(diǎn)CSV 導(dǎo)入時(shí)如果數(shù)據(jù)里有中文逗號(hào)或換行符容易導(dǎo)致解析錯(cuò)位。我的解決辦法是導(dǎo)出 CSV 時(shí)統(tǒng)一用\t作為分隔符然后在LOAD CSV里指定FIELDTERMINATOR \t。另外源數(shù)據(jù)里食材名稱(chēng)可能帶前后空格導(dǎo)入前要清洗否則MATCH匹配不上。2.4 Neo4j 安裝與配置的坑Windows 桌面版、APOC 插件Neo4j 的安裝值得一提因?yàn)椴煌到y(tǒng)差別很大。我在 Windows 上用的是 Neo4j Desktop。下載安裝后需要?jiǎng)?chuàng)建一個(gè)本地?cái)?shù)據(jù)庫(kù)設(shè)置密碼。常見(jiàn)問(wèn)題有兩個(gè)一是初始密碼要求比較復(fù)雜容易記不住建議直接存到密碼管理器里二是導(dǎo)入 CSV 時(shí)提示“Couldnt load the external resource”這是因?yàn)槟J(rèn)導(dǎo)入目錄是數(shù)據(jù)庫(kù)的import文件夾不是任意路徑。把 CSV 文件放到數(shù)據(jù)庫(kù)目錄/import/下就能解決。另一個(gè)繞不開(kāi)的坑是 APOC 插件。我原本想用apoc.load.json解析數(shù)據(jù)但 Neo4j Desktop 里啟用 APOC 需要手動(dòng)把插件 jar 包放進(jìn)plugins目錄并且在配置文件里開(kāi)啟。不同 Neo4j 版本對(duì) APOC 版本要求不同如果對(duì)不上啟動(dòng)會(huì)報(bào)錯(cuò)。我的建議是Noe4j 5.x 用對(duì)應(yīng)的 APOC 5.x 版本不要圖新去官方 GitHub 的 Releases 頁(yè)面找匹配版本。如果你和我一樣只是簡(jiǎn)單導(dǎo)入 CSV其實(shí)不用 APOC核心 Cypher 就能完成。所以 APOC 不是必需品遇到問(wèn)題可以跳過(guò)。安好之后我推薦在瀏覽器打開(kāi)http://localhost:7474用 Neo4j Browser 檢查圖譜。寫(xiě)幾個(gè) Cypher 查詢(xún)看看節(jié)點(diǎn)有沒(méi)有建立關(guān)系。我第一次導(dǎo)入后發(fā)現(xiàn)很多菜譜節(jié)點(diǎn)沒(méi)有連上食材排查后發(fā)現(xiàn)是食材名稱(chēng)里多了一個(gè)空格用TRIM函數(shù)清理后就正常了。這種小問(wèn)題很耗時(shí)間但踩過(guò)坑之后就好了。3. 語(yǔ)義向量庫(kù)用 Milvus 承載菜譜的語(yǔ)義檢索3.1 文本切分與向量化模型選擇圖譜負(fù)責(zé)確定性關(guān)系向量庫(kù)負(fù)責(zé)把菜譜文本的整體語(yǔ)義納入檢索。我的做法是把每道菜生成一段“菜譜摘要文本”格式為菜名魚(yú)香肉絲菜系川菜食材豬里脊、木耳、胡蘿卜、冬筍技法炒、滑炒、勾芡口味魚(yú)香、酸甜這段文本直接送入 embedding 模型生成向量。不需要做復(fù)雜的分塊因?yàn)槊康啦说男畔⒘坎淮笠欢挝谋咀阋员磉_(dá)核心語(yǔ)義。如果某道菜步驟特別多我可以把步驟也拼在后面但實(shí)驗(yàn)下來(lái)對(duì)召回結(jié)果影響不大。模型方面我嘗試過(guò)text2vec-large-chinese和bge-large-zh-v1.5最終選了后者。原因是英文中文混合場(chǎng)景下 bge 更穩(wěn)且向量維度是 1024Milvus 支持起來(lái)沒(méi)有壓力。如果你用 OpenAI 的 embedding 接口也行但中文語(yǔ)義檢索效果未必比本地模型好而且有網(wǎng)絡(luò)和費(fèi)用考量。3.2 Milvus 安裝非 Docker 方式與集合設(shè)計(jì)Milvus 是個(gè)分布式向量數(shù)據(jù)庫(kù)常規(guī)推薦用 Docker 啟動(dòng)但如果你在 Windows 上不想裝 Docker其實(shí)也有辦法。Milvus Lite 是一個(gè)可以嵌入到 Python 應(yīng)用中的輕量版本適合開(kāi)發(fā)測(cè)試。不過(guò)我的項(xiàng)目用的是 Milvus 2.3 standalone 的 Windows 非 Docker 安裝方式這里必須說(shuō)清楚官方本身不支持 Windows 直接運(yùn)行 Milvus 服務(wù)但可以通過(guò) WSL2 運(yùn)行或者使用 Docker Desktop 的 Linux 容器。如果不用 Docker我的做法是在一臺(tái)固定機(jī)器上用 Linux 虛擬機(jī)裝 Milvus standalone然后本地 Python 通過(guò)局域網(wǎng)訪(fǎng)問(wèn)。WSL2 的安裝方式相對(duì)簡(jiǎn)單很多教程寫(xiě)“Milvus Windows 安裝非 Docker”實(shí)際都是在 WSL2 里跑。你可以把下面的命令在 WSL2 的 Ubuntu 里執(zhí)行。# 下載 milvus standalone 安裝腳本 wget https://github.com/milvus-io/milvus/releases/download/v2.3.4/milvus-standalone-docker-compose.yml # 編輯 docker-compose.yml把映射端口改成自己需要的 # 啟動(dòng) docker compose up -d這本質(zhì)上還是 Docker 容器但省掉了安裝 Docker Desktop 的步驟。如果你連 Docker 都不想要還有一個(gè) Milvus Lite 方案pip install milvus-lite然后直接用默認(rèn)本地存儲(chǔ)跑。我的建議是開(kāi)發(fā)階段用 Milvus Lite部署階段再用真正的 Milvus 服務(wù)。兩者 API 幾乎一致切換成本很小。Milvus 集合設(shè)計(jì)比較簡(jiǎn)單。我創(chuàng)建了一個(gè)recipe_vectors集合字段如下字段名類(lèi)型說(shuō)明idINT64主鍵我用自增整數(shù)recipe_nameVARCHAR(255)菜譜名稱(chēng)textVARCHAR(2048)摘要文本embeddingFLOAT_VECTOR(1024)向量?jī)?nèi)容建集合時(shí)要注意索引參數(shù)。我用的是IVF_FLAT索引nlist128。查詢(xún)參數(shù)設(shè)nprobe16。說(shuō)實(shí)話(huà)數(shù)據(jù)量只有幾千條用FLAT索引暴力搜索也很快但為了測(cè)試更大的數(shù)據(jù)集還是建了 IVF 索引。3.3 Attu 管理界面版本匹配問(wèn)題Milvus 自帶命令行沒(méi)有可視化界面很多人會(huì)裝 Attu 這個(gè) GUI 工具來(lái)查看數(shù)據(jù)。這里有個(gè)高頻坑Attu 和 Milvus 的版本必須匹配。比如 Milvus 2.3.x 的客戶(hù)端就不能用太老的 Attu 連接我一開(kāi)始裝了 Attu 2.3 的早前版本連接時(shí)總是報(bào)錯(cuò)“Unsupported media type”后來(lái)升級(jí)到 v2.4 才正常。建議安裝前先去 Attu 的 GitHub Releases 頁(yè)面看一下說(shuō)明確認(rèn)支持你的 Milvus 版本。另外連接地址要寫(xiě)對(duì)如果 Milvus 跑在 WSL2 里你在 Windows 瀏覽器里訪(fǎng)問(wèn)的是localhost:8000但在代碼里連接 Milvus 時(shí)要用 WSL2 的 IP通??梢酝ㄟ^(guò)ifconfig查到不能直接用 localhost否則連接會(huì)被拒絕。3.4 寫(xiě)入與查詢(xún)向量——近鄰搜索參數(shù)我用pymilvus完成寫(xiě)入和查詢(xún)。寫(xiě)入的核心代碼from pymilvus import connections, Collection, FieldSchema, CollectionSchema, DataType connections.connect(aliasdefault, hostlocalhost, port19530) fields [ FieldSchema(nameid, dtypeDataType.INT64, is_primaryTrue), FieldSchema(namerecipe_name, dtypeDataType.VARCHAR, max_length255), FieldSchema(nametext, dtypeDataType.VARCHAR, max_length2048), FieldSchema(nameembedding, dtypeDataType.FLOAT_VECTOR, dim1024), ] schema CollectionSchema(fields, descriptionrecipe semantic vectors) collection Collection(recipe_vectors, schema) collection.create_index(embedding, {index_type: IVF_FLAT, metric_type: COSINE, params: {nlist: 128}})查詢(xún)時(shí)我把用戶(hù)問(wèn)題向量化后調(diào)用collection.searchsearch_params {metric_type: COSINE, params: {nprobe: 16}} results collection.search( data[question_vector], anns_fieldembedding, paramsearch_params, limit5, output_fields[recipe_name, text] )這里有個(gè)小經(jīng)驗(yàn)距離度量我用COSINE而不是L2。因?yàn)槲谋鞠蛄康哪iL(zhǎng)和菜譜長(zhǎng)度有一定關(guān)系余弦相似度更能反映語(yǔ)義方向的一致。如果發(fā)現(xiàn)召回結(jié)果里混入一些奇怪菜譜可以調(diào)大nprobe或limit再結(jié)合圖譜過(guò)濾。4. 檢索增強(qiáng)編排怎么把圖和向量結(jié)果喂給 LLM4.1 兩階段召回向量粗篩 圖擴(kuò)展精排回到最初的痛點(diǎn)用戶(hù)問(wèn)“魚(yú)香肉絲有沒(méi)有不放豬肉的做法”如果只做向量召回系統(tǒng)會(huì)返回魚(yú)香肉絲的菜譜文本但不會(huì)返回“可以用雞胸肉替代豬里脊”的結(jié)論。必須讓圖數(shù)據(jù)庫(kù)參與進(jìn)來(lái)。我的編排流程是先用 LLM 對(duì)問(wèn)題進(jìn)行實(shí)體識(shí)別提取出菜名和食材名。例如這個(gè)問(wèn)題會(huì)提取出{ recipes: [魚(yú)香肉絲], ingredients: [豬肉] }。然后走兩路召回向量召回計(jì)算問(wèn)題向量在 Milvus 里返回 Top-5 菜譜名比如[魚(yú)香肉絲, 青椒肉絲, 木須肉]。圖譜召回拿著實(shí)體去 Neo4j 查先找魚(yú)香肉絲節(jié)點(diǎn)再查它包含哪些食材重點(diǎn)查 “豬肉” 這個(gè)食材節(jié)點(diǎn)有哪些替代關(guān)系同時(shí)查共享“炒”技法或相近口味的其他菜譜。兩路召回結(jié)果取并集。如果向量召回中的菜譜在圖譜里不存在就以圖譜為準(zhǔn)如果圖譜里有關(guān)系但向量沒(méi)召回也沒(méi)關(guān)系圖譜數(shù)據(jù)會(huì)直接進(jìn)入上下文。4.2 上下文組裝如何形成 LLM 可讀的 JSON這是整個(gè)系統(tǒng)最巧妙的部分。LLM 不能直接讀圖所以我把圖查詢(xún)結(jié)果序列化成三元組列表并和向量召回的文本拼在一起。一個(gè)典型的上文結(jié)構(gòu)如下{ question: 魚(yú)香肉絲有沒(méi)有不放豬肉的做法, vector_recall: [ {recipe_name: 魚(yú)香肉絲, text: 菜名魚(yú)香肉絲食材豬里脊、木耳、胡蘿卜...}, {recipe_name: 青椒肉絲, text: 菜名青椒肉絲食材豬里脊、青椒...} ], graph_facts: [ {type: contains, from: 魚(yú)香肉絲, to: 豬里脊}, {type: contains, from: 魚(yú)香肉絲, to: 木耳}, {type: can_substitute, from: 豬里脊, to: 雞胸肉, constraint: 口感略相似調(diào)味不變}, {type: can_substitute, from: 豬肉, to: 牛肉, constraint: 適合不喜歡豬肉脂肪的情況}, {type: technique, from: 魚(yú)香肉絲, to: 滑炒} ] }我把這些 JSON 直接拼到 prompt 里要求 LLM 優(yōu)先使用 graph_facts 中的關(guān)系做推理不要憑空編造食材替代。這樣做的好處是讓生成過(guò)程有據(jù)可循回答“能替代”或“不能替代”時(shí)能引用圖譜里的關(guān)系給出理由。4.3 調(diào)用 LLM 生成答案OpenAI 兼容接口 提示詞模板LLM 調(diào)用我用的是 OpenAI 兼容接口這樣可以方便地切換不同后端。下面的代碼演示了如何構(gòu)造請(qǐng)求import json from openai import OpenAI client OpenAI(base_urlhttp://localhost:11434/v1, api_keynone) def generate_answer(context: dict) - str: sys_prompt 你是資深中餐大廚。請(qǐng)根據(jù)提供的食譜知識(shí)和食材關(guān)系用簡(jiǎn)潔明確的語(yǔ)言回答問(wèn)題。如果圖譜中給出了替代關(guān)系請(qǐng)直接引用。如果沒(méi)有明確的替代關(guān)系請(qǐng)說(shuō)明食譜中沒(méi)有明確記錄替代方案。不要編造關(guān)系。 user_prompt f問(wèn)題{context[question]}\n\n檢索信息\n{json.dumps(context, ensure_asciiFalse)}\n\n請(qǐng)根據(jù)以上信息回答。 resp client.chat.completions.create( modelqwen2.5:7b, messages[{role: system, content: sys_prompt}, {role: user, content: user_prompt}], temperature0.3 ) return resp.choices[0].message.content我后來(lái)把模型切成 Qwen 2.5 7B 跑在 Ollama 上回答質(zhì)量雖然比 GPT-4 略遜色但速度夠快且離線(xiàn)可用。如果需要更好的推理能力可以換成更大的模型或 GPT-4 系列不過(guò) prompt 里的 graph_facts 要寫(xiě)得足夠清晰否則大模型也會(huì)忽略。4.4 一個(gè)完整問(wèn)題的檢索鏈路代碼演示我把整個(gè)檢索和生成過(guò)程封裝成一個(gè)answer()函數(shù)def answer(question: str): # 1. 用LLM做實(shí)體識(shí)別 entities extract_entities(question) # 2. 向量召回 vec_docs vector_search(question, top_k5) # 3. 圖譜召回 graph_facts graph_search(entities) # 4. 合并上下文 context {question: question, vector_recall: vec_docs, graph_facts: graph_facts} # 5. 調(diào)用LLM生成答案 final generate_answer(context) return finalextract_entities也是調(diào)用 LLM用一個(gè)簡(jiǎn)單的提示詞讓它輸出 JSON。vector_search就是上一節(jié)提到的 Milvussearch。graph_search則是幾個(gè) Cypher 查詢(xún)的組合核心代碼// 根據(jù)菜譜名找食材 MATCH (r:Recipe {name: $recipe_name})-[:CONTAINS]-(i:Ingredient) RETURN i.name // 查食材的替代關(guān)系 MATCH (a:Ingredient {name: $ingredient_name})-[:CAN_SUBSTITUTE]-(b:Ingredient) RETURN a.name, b.name // 查共享食材的相似菜譜用共現(xiàn)食材數(shù)排序 MATCH (r:Recipe {name: $recipe_name})-[:CONTAINS]-(i:Ingredient)-[:CONTAINS]-(other:Recipe) WHERE other r WITH other, count(i) AS shared ORDER BY shared DESC LIMIT 3 RETURN other.name, shared這些查詢(xún)?cè)?Python 中用neo4j驅(qū)動(dòng)執(zhí)行返回的 Record 轉(zhuǎn)成字典列表。要點(diǎn)是一個(gè)問(wèn)題可能涉及多個(gè)食材和菜譜因此每個(gè)實(shí)體都要查一次然后把結(jié)果合并注意去重。5. 實(shí)測(cè)效果與排坑記錄從“答非所問(wèn)”到“懂行老饕”5.1 測(cè)試問(wèn)題與檢索結(jié)果對(duì)比系統(tǒng)跑通后我做了幾組測(cè)試下面用表格列出典型問(wèn)題和效果對(duì)比。問(wèn)題純向量 RAG 的回答圖 向量 RAG 的回答魚(yú)香肉絲有沒(méi)有不放豬肉的做法給出了魚(yú)香肉絲的完整菜譜讓用戶(hù)自己做取舍直接指出可用雞胸肉或牛肉替代豬里脊并說(shuō)明圖譜中有明確替代關(guān)系同時(shí)推薦了青椒肉絲作為類(lèi)似選擇的參考宮保雞丁可以不放花生嗎介紹宮保雞丁的做法建議把花生去掉提示花生在宮保雞丁中主要提供酥脆口感如果沒(méi)有花生可以用腰果或杏仁替代并說(shuō)明這是基于食材替代關(guān)系得出的結(jié)論哪些菜適合蒸返回了幾個(gè)包含“蒸”字的菜譜片段從圖譜中直接檢索到標(biāo)簽為“蒸”的技法節(jié)點(diǎn)關(guān)聯(lián)的菜譜列表并額外推薦了“粉蒸肉”“蒸魚(yú)”等經(jīng)典菜可以看出圖結(jié)構(gòu)帶來(lái)的增量信息不是“另一個(gè)文本塊”而是推理路徑。LLM 的回答不再是羅列而是“判斷依據(jù)”。5.2 關(guān)鍵坑一實(shí)體對(duì)齊與同義詞擴(kuò)展圖 RAG 最容易被忽視的坑是實(shí)體對(duì)齊。如果我提取出的食材是“豬里脊”而圖譜中的食材叫“里脊肉”查詢(xún)就匹配不到。我做了三層處理第一層在實(shí)體識(shí)別時(shí)提示 LLM 盡量輸出標(biāo)準(zhǔn)名稱(chēng)第二層在 Neo4j 查詢(xún)時(shí)對(duì)每個(gè)實(shí)體名生成一個(gè)同義詞集合例如通過(guò)apoc.text.phonetic或自定義同義詞表第三層也是最簡(jiǎn)單的在提取實(shí)體后先做一次模糊匹配用 Neo4j 的CONTAINS或 Levenshtein 相似度找到標(biāo)準(zhǔn)名。我實(shí)際用了近似匹配MATCH (i:Ingredient) WHERE i.name CONTAINS $keyword OR $keyword CONTAINS i.name RETURN DISTINCT i.name LIMIT 5但這會(huì)產(chǎn)生很多噪聲所以最終方案是維護(hù)一個(gè)同義詞映射字典例如{雞胸肉: [雞脯肉, 雞胸], 里脊肉: [豬里脊, 里脊]}。識(shí)別出的實(shí)體先查字典沒(méi)有的話(huà)再走模糊匹配。這個(gè)字典隨著測(cè)試中發(fā)現(xiàn)的漏配逐漸擴(kuò)充。5.3 關(guān)鍵坑二Neo4j 連接池與并發(fā)查詢(xún)當(dāng)查詢(xún)邏輯變復(fù)雜Neo4j 驅(qū)動(dòng)的連接管理也會(huì)出問(wèn)題。我之前每個(gè)請(qǐng)求都新創(chuàng)建一個(gè)GraphDatabase.driver()很快報(bào)“Too many open files”。正確做法是全局維護(hù)一個(gè) driver 實(shí)例讓它內(nèi)部管理連接池from neo4j import GraphDatabase driver GraphDatabase.driver(bolt://localhost:7687, auth(neo4j, password)) # 在應(yīng)用啟動(dòng)時(shí)初始化不要每次查詢(xún)都調(diào)用 driver() 構(gòu)造器查詢(xún)時(shí)用driver.session()會(huì)自動(dòng)從池中獲取連接用完釋放。但要注意如果某個(gè)查詢(xún)耗時(shí)較長(zhǎng)應(yīng)該將 session 內(nèi)的事務(wù)盡量簡(jiǎn)短。我把一個(gè)復(fù)雜的圖譜查詢(xún)拆成多個(gè)獨(dú)立小查詢(xún)用多線(xiàn)程并發(fā)執(zhí)行總耗時(shí)反而更低。5.4 關(guān)鍵坑三Milvus 無(wú) Docker 安裝后的服務(wù)狀態(tài)管理我最初用 Milvus Lite 開(kāi)發(fā)后面換到獨(dú)立的 Milvus 服務(wù)后遇到最折騰的問(wèn)題是服務(wù)啟動(dòng)依賴(lài) etcd。Milvus standalone 的 Docker Compose 會(huì)同時(shí)啟動(dòng) etcd、minio 和 milvus 三個(gè)容器哪個(gè)掛了都會(huì)起不來(lái)。用docker compose logs milvus查看日志時(shí)最常見(jiàn)的錯(cuò)誤是 etcd 連接超時(shí)。我的解決方式是在啟動(dòng) Milvus 之前先確認(rèn) etcd 容器健康或者在 docker-compose.yml 里增加健康檢查和 restart 策略。如果你在 Windows 下用 WSL2注意要把 WSL2 本機(jī)內(nèi)存分配調(diào)大否則 Milvus 啟動(dòng)時(shí)容易 OOM。還有一個(gè)跟部署相關(guān)的點(diǎn)pymilvus客戶(hù)端和服務(wù)端版本要匹配。我客戶(hù)端從 2.2 升到 2.3 后舊代碼里connections.connect沒(méi)變但返回的結(jié)果集類(lèi)型變了output_fields字段名稱(chēng)大小寫(xiě)也略微不同。遇到問(wèn)題后去 GitHub Issues 一搜發(fā)現(xiàn)很多人遇到同樣的問(wèn)題。所以固定依賴(lài)版本非常重要?jiǎng)e一有新版本就升級(jí)。6. 還能怎么玩圖 RAG 在其它領(lǐng)域的擴(kuò)展思路烹飪問(wèn)答只是圖 RAG 的一個(gè)切入點(diǎn)。這套“知識(shí)圖譜建立關(guān)系結(jié)構(gòu) 向量庫(kù)建立語(yǔ)義索引 LLM 做生成推理”的組合可以遷移到很多場(chǎng)景。比如醫(yī)療領(lǐng)域的“用藥禁忌查詢(xún)”藥物之間的相互作用可以用圖關(guān)系表示癥狀描述和藥物說(shuō)明書(shū)文本可以向量化問(wèn)“高血壓患者能不能吃布洛芬”LLM 就能從圖中找到藥物節(jié)點(diǎn)之間的禁忌關(guān)系而不是靠猜。又比如工業(yè)維修問(wèn)答設(shè)備故障代碼、零件依賴(lài)關(guān)系、歷史維修記錄正好是圖結(jié)構(gòu)向量召回相關(guān)故障描述圖擴(kuò)展出可能的原因和零件關(guān)系生成答案時(shí)自然帶上維修步驟。我在遷移到這個(gè)系統(tǒng)時(shí)最大的體會(huì)不是寫(xiě)代碼而是想清楚“哪些知識(shí)必須用圖表達(dá)哪些知識(shí)用向量表達(dá)”。如果關(guān)系是顯式的、可枚舉的例如“A 替代 B”“A 屬于 B”放圖數(shù)據(jù)庫(kù)如果關(guān)系是模糊的、語(yǔ)義的例如“這個(gè)菜譜看起來(lái)像另一道菜”“這段描述和用戶(hù)問(wèn)題相關(guān)”放向量數(shù)據(jù)庫(kù)。兩者不是替代關(guān)系而是分工。這套項(xiàng)目的代碼我放在 GitHub 上了有需要的朋友可以留言交流。最后分享一個(gè)小技巧測(cè)試圖 RAG 系統(tǒng)時(shí)不要只問(wèn)你準(zhǔn)備好的問(wèn)題試著讓朋友隨便說(shuō)一句“我想吃酸甜口的但沒(méi)有雞肉”看系統(tǒng)能不能正確處理“酸甜”口味和“雞肉”缺失這兩個(gè)約束。如果這個(gè)都能回答得像樣說(shuō)明你的圖譜和提示詞工程真的過(guò)關(guān)了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久25| 校园春色 亚洲| 亚洲天堂区| 操逼视频国产无套| 大逼色网站| 91精品丝袜久久久久久无码人妻| 日本色婷婷| 丝袜人妻av一区二区| 9精品久久| 激情第四色| 成人激情无码在线视频| 亚洲牲交| 怡红院久久老司机| 欧美91丝袜| 日韩pv中文| 做爱A级亚欧| 97爱综合| 亚洲欧美在线丝袜| 夜夜嗨老熟女AV一区二区三区| 欧美日韩国产中文精品字幕自在自线,| 黄色片大香蕉| 国产精品毛片?v一区二区三区 | 秋霞曰韩R级| 亚洲图片欧美色图| 97久久国产精品女不卡| 热久久无毒不卡| 自拍欧美| 欧美五区| 男人下部插入女人下部| 91美女丝袜诱惑视频| 黄色免费网页无码| a级成人毛片免费视频高清| 日韩熟女三十乱伦| 亚洲AV无码乱码| 五月天精品| 美女网站黄页| 91热热色| 亚洲图片 欧美电影| 91n免费处女| 操学生天天| 东北黄色电影| 殴美,日韩国产伦精品| 日韩性爱高清免费视频| 中文字幕123| 日韩国产欧美伦理在线| 国产特级毛片AAAAAA高潮流水 | 久久久网站| 国产一区二区三区影片| 亚洲最大无码中文字幕网站| 福利在线观看一区二区| 黄片色区软件| 日韩av不卡在线观看| 中文字幕乱在线伦视频中文字幕乱码在线| 三男一女不戴套的A片| 亚洲图片欧美色图| 99久久久无码国产精品性啊聊| 久久精品国产97欧美精品亚洲| 日韩综合97P| 99久热精品99re6热| 久久久久78| 少妇专区一二三四五| 日韩精品99久久久久久中文字幕| 伊人精品视频| 智利AV在线网| 久久亚洲欧美一区二区三区-亚洲国产精品第一区二区 | 大香蕉免费中文| 久久精品色欧美aⅴ一区二区| 不卡中文字幕aⅴ在线| 日韩三级在线观看网站| 999久久久免费精品国产牛牛| 亚洲本色精品一区二区久久| 麻豆成人影音在线| 久久久久久久伊人精品| 亚洲一区日韩| 五月婷在线| 国产精品久久久亚洲一区| 国模吧 一区二区三区| 久久婷婷综合国际产色怕| 久久美女国产| 成人激情无码在线视频| 日本精品一区二区中文字幕| 狠狠五月天| 炮色五月| 1000午夜黄色| 上床啊啊啊| 偷拍欧美激情| 蜜臀在线免费观看在线免费观看| 亚洲aw毛茸茸在线 | 色五月激情综合网| 久久一二三四五六七八九区区区| 中文伊人大香蕉视频| 亚洲熟妇乱女区二区三区| 欧美内射少妇| 亚洲视频,小说| 免费网色网站| 亚洲精品97久久中文字幕| 日韩欧美蜜桃精品久久中文字幕久久| 久久久极品| 亚洲色人| 一区二区三区 日韩欧美| 婷婷操逼| 91在线视频免费中出| 国产综合久久久鬼色| 啊啊啊好大好湿| 国产精品3| 高清无码学生妹高潮| 麻豆天天躁天天揉揉AV| 亚洲性爱免费电影| 美日韩成人| 久无码| 伊人久久久日韩一区| 人人操人人射人人干| 欧美在线电影| 一级黄色性爱裸体视频| 久久草在线综合视频| 免费观看有码高清视频| 久久久99999久网站| www.acm成人黄色毛片| 亚洲成成熟女人综合一区二区| 中文字幕一区二区视频在线观看| 黄色一区二区秘书性感| 老熟女91av| 啊啊啊啊啊啊啊啊要喷了| 国产精品对白自产拍| 在线a亚洲视频播放在线| 两性色网| 九一屌逼| 青青操日韩| 17c嫩草51久久91嫩草| 超碰成人公开| 欧美综合97www| 久久熟女久| 久夜视频| 五月丁香社区婷婷日韩欧美精品影院| 久久熟妇五十路一区| 欧洲色综合| 内射老妇BBWX0C0CK| 国产呦精品一区二区三区下载| 久久一二区四| 黄站在线免费观看| 一区操逼| 婷婷激情啪啪| 玖玖超碰熟| 亚洲图片欧美色| 日本性爱少妇| 亚洲一二三精品久久网| 四虎av在线| 十八禁av无码免费网站APP| 天天爽天天爽| x97av| 韩美日操逼| 久久久人妻| 欧美猛交黑寡妇中文字幕| 精品人妻一区二区三区四区| 国产精品久久久久无码A√| 精品久久一区二区三区四区五区| 蜜臀一二三区| 国产一区二区a毛片| 亚洲情色第一页| 亚洲天天影视色综合| 国产精品久久久久久亚洲色欲| 日韩,欧美,中文在线| 国产亚洲精品农村妇女 | 欧美亚洲91| 国产女人91精品嗷嗷嗷嗷| 99re在线观看| 国产色产精品在线观看| 99爱视频| 97 国产精品| 亚洲欧美在线观看无码| 欧美老熟另类| 国产又粗又长视频| 91黑丝在线播放| 久久99久久99精品天美传媒棢·纸:.| 久久国产AⅤ| 大香交伊人网| 欧美精品系列| 大香蕉五月天| 中文字幕欧洲有码| 青青草丝袜在线视频| 嗯嗯啊啊好大好爽| 福利社区午夜一区二区| 国产精品视频播放| 久久午夜鲁丝片| 久久久久久久久久久97| 九九精品网| 国产一区二区三区精品观看啪| 色香伊人| 密乳AV免费观看| 超碰性爱97| 国产在线播放成人免费| 懂色综合久久久| 一二三区精品视频| 久操大香蕉手机视频在线看 | 久操高青| 最新国产精品| 欧美人妻二区三区| 久久精品国产亚洲AV清纯| 六六久久日韩不卡| 97超碰9| 99这里有精品| 亚洲精品97| 国产欧美日韩女同性恋ww喷水精品 | 日韩精品一区的| 天天综合麻豆视频| 色播综合| 91精片| 后入 亚洲 美女 射| 中文字幕国产| 尹人大香蕉视频在线| 亚洲色阁| 久久久久久久少妇| 日本国产亚洲一区在线观看| 91精品成人| 亚洲性爱电影| 91男人天堂网| 熟女六十路| 午夜AV污污污| av在线资源| 四虎影视精品| 色婷婷aV一区二区三区麻豆综合| 亚洲97综| 欧美亚洲美少妇一区二区| 精品国产丝袜一区二区三区乱码| 超碰久久精品| 日本午夜久久电影| 一级性爱视频免费观看| 亚洲色图自拍| 久久av成人无码免费| 久久华人网| 97人人草| 在线视频免费观看午夜| 日韩超碰精品综合| 国产操逼逼网| 60秒不遮不挡| 97色诱| 温婉少妇玩3p| 天天操天天日天天干| 美女黄频a美女大全免费皮| 99少妇| 欧美日韩情色一区二区| 福利社区午夜一区二区| 97国产中文| 亚洲第一成人影院色播| 91九色丨风韵犹存| 亚洲鸥美色图| 欧美精品99久久久| 亚洲**2021在线观看| 亚洲精品一区二区免费在线观看| 日本中文字幕在线视频| 97日韩| 妇人噜噜| 婷婷六月天| 麻豆视频国产一区二区| 四虎在线免费视频| 天天日少妇逼AV| 国产精品视频自拍在线| 亚洲日精品| 国产自产91区13区| 国产树林里野战在线看| 色网色网色网色网色网色| 亚码人妻| 黑操B| 高清国产成人无码| 精品九九| 亚洲熟女一区| 婷婷丁香六月天| 操逼视频色| 97在线播放 | 欧美激情性久久久久久| 超碰天天去日穴| 亚洲射综合网| 色五月婷婷色| 国产隔壁老王影院在线| 亚洲男人天堂手机版| 夜夜国产一区| 717影院理论午夜伦八戒| 毛片久久| 欧美少妇高潮视频| 天天色怡春院| 97超碰69| 五月天色五月| 一区操逼日比视频| 曰韩人妻中文字幕在线| 97伊人超碰| 绑缚麻绳人妻寝取完整版| 婷婷在线精品| 男女激情黄色网址| 超清福利精品视频在线| 日韩情色一区二区| 99色骚| 色一射色一射| 99综合免费视频| 国产女人与拘做受视频免费| 欧美激情一区| 加勒比99999| 四虎在线免费视频| 97精品国产精品免费观看| 亚洲AV无码久久久国产精品| 国产成人午夜视频网址| 亚洲一区二区在线观看91| 男人天堂最新手机版在线青青草| 久久精品国产99国产精品亚洲| 亚洲1区| 成人性爱美曰韩| 国产精品免费1区2区视频| 91精品人妻一区二区三区蜜桃| 色臀aV| 女生自91网站| 99热精品青草在线| 97天天摸天天碰| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 在线综合网| 超碰97综合网| 天美传媒av一区二区| 丝袜制服字幕在线| 国产suv精品一区二区四区999| 色婷婷99| 色情综合| 2024人人操人人摸| www.丁香五月| 91精品黄在线观看| 看一级黄色视频| 成人三级片无码| 国产AV毛片| 色欲三区| 91在线秘 男同| 欧美色图第一页| 亚洲区 欧美区| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | 九九久久久九九| 久久免费精彩视频| 九九热精品| 91色久| 伊人色综合网电影| 99在线观看| 青草av在线| 亚洲国产无码精品首页久久久| 亚洲精品国产无码高清| 一二三四视频中文字幕在线看| 欧州一区二区三区四区| 午夜成人爽爽爽爽A片李冰冰| 欧成人精品H无码| 午夜在线播放| 国产无码精品久久久久久| 日本二三四区| 毛片一区二区| 国产成久久综合片| 囯戸精品高潮呻吟旡码| 人人干黄色| 丰满人妻一区二区三区性色| av绯色| 中国女人内射6XXXXX| 国产精品一区av在线| 国内毛片热久久思思热| 无码不卡亚洲成?人片| 特色a在线上| 欧美性91| 精品黄色电影| 国产v片在线免费观看| 伊人操你| 亚洲一区二区精品福利| 在线国产探花| 天美传媒一二三区永久网站| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 巨乳特殊服务按摩| 成人怡红院| 亚洲成人激情小说视频| 国内亚洲高清无码| 午夜视频黄| 国产精品无码久久久久2028| 国产超碰人人操| 久久女婷| 丁香激情五月天| 女人高潮抽搐喷水视频网站| 日本免费中文一区二区三区四区 | 日本一区二区三区精品| 青青草字幕AV| 97神马久久| 国产精品美女视频诱惑| 亚洲图片日本AⅤ欧美在线| 国产成人免费观看在线视频| 色色色色网站| 美女露胸露屁股| 蜜桃视频一区二区三区 | 岛国激情视频在线观看| 岛国黄色短视频| 日韩一级欧美一级在线观看| 久草久热| 国产亚洲精品美女| 超碰九区| 天天看天天在线精品| 欧美精品自慰系列寂寞少妇| 99.色网| 欧美色图 人妻| 欧美—性—交—色| 欧美日韩大香蕉| 天天干天天操天天干天天操| 99国内精品| 加勒比伊人综合| 久久r精品| 私人尤物在线精品不卡| 国产精品色片一区二区| 98一区二区精品| 夜夜综合| 欧综合网| 青青操综合网| 91蜜臀熟女| 欧美日韩青操| 男人天堂欧美| 黄色小视频日本txt| 裸体美女免费看网站青草| 97高清啪啪| 台湾佬中文娱乐网久久久久久久久久com | 久干网| 台欧久久精品视频| 麻豆久久久久久久久丝袜 | 免费视频一二三区| 日韩在线性爱免费视频| 操逼操逼逼操操逼91 | 后入日本1234| 色哟哟AⅤ| 日本国产欧美高清在线| 九九九网页| 天操天操夜操夜月月年年操操| 国产精品成人午夜福利| 欧美日韩国产中文精品字幕自在自线| 99热精品在线在线| 夜夜高潮夜夜爽高清视频一 | 亚洲丝袜综合| 人人摸人人干人人拍97| 色诱中文字幕| 91精品人妻一品二品三品| 91影库| 女人的久久久| 久久久免费高清中文视频| 欧美精品23| 亚洲一区二区三区婷婷| 日韩av一级黄片| 欧美亚综合色图| 91n处女在线观看| 中日韩久久久| 麻豆婷婷成人一二三| 亚洲熟女一区二区| 嗯啊抽插大香蕉网页| 性欧美天天| 97免费在线观看| 日韩欧美经典在线观看| 手机不卡视频不卡在线一二三区| 人妻娇喘 激情视频| 92午夜免费福利视频| 日本一区99| 欧美99999| 91美女丝袜诱惑视频| 性生活性生大爱77AV国产| 在线播放一级无码视频| 亚洲网自拍| 欧美色图片| 国产女人高潮视频| 日本韩国五十路六十路七十路老熟女作爱视频网站| 国产一级特黄大片处女| 97硬碰| 男女无套 免费网站| 26uuu国产免费观看| 亚洲中文电影| 国产日韩区| 久热伊人99re| 欧美色乱| 蜜桃视频精品一区二区| 啊啊啊啊啊啊在线| 五月丁香综合| 青草一区二区| 丁香六月啪| 一本一道久久综合久久| 自拍鲍鱼一区在线高清观看免费| 久久久少妇诱惑精品视频| 性色生活片久久毛片婬片免费放女人一级毛片 | 色爽爽文学| 久久三区四区| 五月天色五月| 91色狼| 亚洲国产欧美日韩人妻日中文| 精人妻一区二区三区| 亚洲中文字幕三级在线| 欧美九九九| 桃色五月天| 精品999一区二区| 亚洲少妇色| 9久精品| 久热久一区二区三区| 精品蜜乳AV免费观看| 欧美内射少妇| 国产综合在线视频网站| 丝袜翘臀后入欧美校园亚洲自拍另类小说一区中文字幕少妇诱惑 | 日本精品网站在线中文| 亚州色站 日韩电影| 男女做爰猛烈动高潮A片免费应用 少妇厨房愉情理伦片bd在线观看 不卡中文字幕aⅴ在线 | 国产尤物AV尤物在线观看不卡| 中文字幕诱惑制服人妻丝袜美丝袜美| 国产精品干干干| 色天堂在线观看| 国产一级黄色片在线观看 | 精品一区二区综合熟妇| 九九九九一区| 欧美熟妇视频 | 伊人大香蕉在线| 亚洲欧美精品国产一区二区| 亚洲国产中文字幕| 日本黄 R色 成 人网站| 亚洲天堂资源网| 欧洲中文字幕| 男女激情黄色网址| 男女啊啊啊啊啊| 九九热九九热| 亚欧性爱无码| 亚春色色| 蜜臀精品1区2区| 日韩在线一区高清在线| 91超碰在线播放| 婷婷五月综合在线| 黄色片A级一区二区三区| 久久久九九九九| 欧美十八禁在线看| 天天综合91| 亚拍在线| 色噜噜综合在线| 成 人片 黄色大片| 欧美熟妇精品黑人巨大91| 麻豆福利视频导航| 强奸a片网| 思思热一热婷婷热一热| 偷拍精品一区二区三区| 亚洲情色一区二区三区| 午夜大香蕉| 亚洲 欧美 日韩 国产一区二区| 91超碰碰在线| 丁香五月成人| 亚洲小电影免费涩涩成人在线高清 | 中文字幕精品专区搜索结果91| 9999免费精彩视频| 囯产精品久久久久久久久久梁医生| 精品成人女人久久| 国产女人高潮视频| 狠狠爱夜夜干| 91 在线亚洲| 国产成人精品无码久久| 不卡日本一区二区| 中文字幕视频免费| 欧美黄页在线| 成人免费福利网站国产| 久久超碰网| 日韩精品影视| 精品大久久| 亚洲 欧美日韩 另类| 看日韩黄片| 玖日综合网| 老师充足的奶水小说| 99人人干| 夜夜操青青草| 国产精品九九九| 91色s| 午夜福利久久久噜久噜久久综合| 欧美东京热精品A∨| 12一15性XXXX粉嫩国产| 好湿好紧视频| 人妻内射一区二区在线视频| 97色插| 色色色欧美| 青娱乐二区免费| 久久香蕉国产线看观看亚洲女人 | 一区二区三区一亚洲中文字幕、综合区灬| 躁躁日曰躁2020| 国产成人精品日本亚洲语言| 翔田千里AⅤHD无码| 日韩有码中文字幕女同性恋| 人妻激情在线视频| 啊啊好多水| 成功精品影院| 国产av美女被艹的乱叫| 中国小夫妻勾搭露脸淫荡对白| 91麻豆天美国产欧美日| 97最新在线播放视频| 国产精品黄色三级av| 亚洲一级黄色毛片| 久操免费观看| 欧美精品亚洲精品日韩传电影| 超碰碰97| av在线人气| 激情av| 黄片无码在线制服| 国产成人午夜视频网址| 日韩熟女操逼| 国语少妇精| 天天影视综合色| 久久精品电影| 熟妇人妻一区二区三在线| 国产天天骚| 人妻熟女一区在| 2018色综合天天操| 久久香蕉综合一本到3atv| 国产精品视频麻豆入口| 91少妇| 亚洲欧美首页| 久久久久久久| 亚洲欧美97√| 97综合激情| 麻豆一区二区AV天美| 久久9精品网站| 亚洲中亚日激情视频| 熟女网站最新| 成人熟女视频一区二区三区| 啊啊啊 在线观看| 亚洲色人妻综合| 国产成人在线观看网址| 97在线免费看视频| 91痴汉| 国产久9| 大香蕉2017| 亚洲情色 无码专区| 中文无线日韩一区| 欧美日本视频一区| 国产精品一区二区麻豆| 99这里只有精品| av橘色网站| 91国产丝袜白虎| 97欧美资源| 啊啊啊好大好深| 蜜臀99久| 亚洲色综合| 欧美不卡五十路| 高清有码一区二区| 亚洲精品白浆高清久久久久久 | 超碰狠狠操| 99国产人成精品| 91亚州日韩高清| 中文啪啪视频| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 欧美人与动性人交a| 丝袜综合| 欧色综合| 国产1727欧美| 国产丸一视频| 骚鸭AV| 久久无码精品| 12一15性XXXX粉嫩国产| 麻豆视频国产一区二区| 亚洲图片色图欧美另类| 亚洲人妻中文高清| 五月天婷婷久久| 超碰狠狠操| 久久久久精| 久久国模av| 97网站在线观看| 网友自拍第1页| 私人尤物在线精品不卡| 亚洲精品尤物yw在线影院| 欧美顶级黄色大片免费| 欧美久热| 夜夜狼人妻| 啊啊啊啊啊,啊啊啊啊好舒服,操我舒服啊啊啊 | 韩国国产欧美情侣视频在线| 久久九九热| 99热这里只有精品18| 91视频综合网| 欧美日产国产在线成人第一区| 欧美亚洲色的图| 午夜传煤十二区精品| 97鸡把在线视频| 亚洲天天更新| 无码高清操逼| 免费A V在线播放| 日日夜夜天天| 自拍丝袜美腿人妻| 日韩av电影网站| 国产精品乱码久久久| 亚洲黄片免费在线播放| 亚洲砖码砖专无区2023| 日韩AV一区二区三区四四| 丝袜综合| 偷拍99| 国产乱伦视频污| 亚洲AV性爱电影| 亚洲综合小说另类图欧美视频激情小说色五月天 | 亚洲综合影片| 超碰在线综合97| 久久的免费性爱视频| 午夜福利免费精品视频| 俺去也婷婷| 91网站18在线| 日韩BBN| 思思热在线视频免费| 精品性爱一二三区| 欧洲综合视频| 麻豆a'v电影| 国产老女人久久毛| 中国乱伦一区二区| 操b在线观看| 午夜寂寞欧美| 操我啊啊啊啊啊| 啊啊啊啊,啊啊好多水| 中日韩一区二区三区欧美| 国产视频一区二区免费| 欧美狠狠弄| 就去色综合| 伊人精品久久网站| 夜夜操天| AV色五月天| 国产在线视频午夜精华在| 国产亚洲禁久一区二区| 97超碰色屌| 97久久久久久久久久| 蜜乳AV免费观看| 五月天社区| 夜夜操中文字幕| 男人天堂新| 日本性爱不卡视频| 九九久久国产精品| 中文字幕精品码亚洲| 强奸乱伦大香蕉网| 九九热这里只有在线精品视 伊人草 成人菠萝蜜视频在线观看 | 日韩人妻一区二区| 一区三区啪啪| 性色av一区二区| 熟女人妻精品一区二区视频 | 91伊人大香蕉| 4141514逼喷水三级片| 亚洲97资源| 操逼逼中文字幕| 美女的肌被草喷水视频| 蜜臀久久99精品久久久久久成人小说 | AA丁香综合激情| 日噜夜夜夜夜夜夜夜夜夜夜爽爽爽爽爽爽爽爽爽爽爽爽 | 午夜欧美神马久久久久| 久久久人妻| 色5月婷婷| 大香蕉青青9| 国产精品蜜臀久久久久无码AV| 欧美|91色综合| 成人九九| av网页一区二区三区| 欧美天天综| 日韩亚洲欧美中文字幕| 天天日天天舔| 91日韩网站| 国产精品香蕉热久久新品| 97亚洲欧美日韩| 久久精品国产Aⅴ| 久久久久久午夜男人的天堂| 日日骚av| 青草av在线| 国产av色网| 日韩欧美一级特黄大片| 亚洲少妇综合在线播放| 国产怡红院| 久久久久久久97| 日韩精品99999| 欧美黑人168页欧美黑人167| 国产AV无码AV| 午夜精品人妻二区三区| 伊人久久综合精品欧美| 97在线观视频免费观看| 51久久夜色精品国产麻豆| 日韩AV一区二区三区三州三州| 国产深夜福利| 人人喜人人妻| 91美女在线观看| 国产11页| 91超碰在线| 中文字幕一区二区三区人妻少妇在线| 网友自拍第一页| 丁香五月激情网| 91麻豆天美传媒在线| 人妻嗯啊啊在线播放| 99久久99九九99九九九| 五月丁香| 97视频在线播放| 黄色大片一区二区密桃丝袜| 天天综合91| 亚洲色欲一区二区三区| 強姦亂倫a| 极品久久久久久久久久久久久久| 韩日性爱av| 中文无线日韩一区| 国产亚洲综合欧美一区| 久久欧美激情| 在线观看AV不卡| 精品无码久久久久久久久果冻糖心| 日本一二区免费 | 精品妇女一区二区三区| 日韩精品-原创伙伴| 天美国产三级传媒| 国产精品久久久久无码Av网曝门| 伊人国产av| 一本精品日本在线视频精品| 综合一区二区影视| 国产黄色 A 片免费看| 日韩AV噜噜噜一区二区三区四区 | 偷拍 亚洲 欧美| 色一射色一射| 草莓精品视频在线免费观看| 色五月激情AV在线| 美女被艹尤物视频| 97爱免费插| 中文字幕精品探花视频| 97色论| 亚洲欧美中文一区二区三| 日本久久久精品电影| 四色永久成人网站| 天天干18禁| 日本丝袜美腿人妻九九| 综合久久久久久久综合网| 在线中文AV| 五月香婷婷| 九九九九精品九九九九| 麻豆精品A片免费观看| 97人人夜夜精品视频| 综合性视频99| 色色国产| 豆花视频操逼网址 | 国产欧美在线观看免费观看| 欧美91网站| 色色五月丁香| 极品销魂美女一区二区| 色麻豆AV| 99在线免费视频| 亚洲日韩精品久久久久一区壹牛| 欧美第二页午夜| 成人网址在线观看| 欧美翘臀视频网站一区二区三区| 久久99手机免费视频| 日韩欧美国产高清视频| 欧美综合1性辶| 日本精品国产视频| 免费一级视频特黄色大片| 亚欧无码线免费观看视频| 亚州大图综合色图| 蜜色网色哟哟| 久久久久国产精品喷潮免费观看臀| 天天欧美色| 中文字幕一区电影在线观看| 国产精品久久泡妞网站| 亚洲国内精品成人不卡| 日本三级韩三级99久久| 成人精品一区二区91毛片不卡| 三四中文字幕| 极品久久久久久久久久久久久久| 综合五月天| 欧美特大AA级黄片| 亚洲色婷婷综合久久久久中文| 六月丁操逼| 激情六月婷婷| 国产精品国产自产高清AV| 欧美春色| 无码男人天堂| 激情四射婷婷四五月天| 亚洲成熟国产精品美女| 黑人综合网| 九九人妻| 97视频7| 丁香五月成人| 成年人三级黄色片视频| 久艹日日日| 中文字幕精品亚洲熟女| 欧美综合站| 九月丁香综合网| 国产精品成久久久久午夜午夜| 中文字幕av一区二区三区人妻少妇| 欧美日韩人人精品| 亚洲成人在线播放| 国产精品无码av在线 | 大肥女高潮bbwbbwhd视频| 91激情国产| 美女毛片999| 九色 人妻 大香蕉| 欧美综合区| 日韩美女啪啪一区| 久热最新在线杭州| 久久是精品| 国产中文福利| 伊人五月天| 久久久不卡| 欧美的精品的视频| 色老牛| 伊人色综合超碰| 蜜桃久久一区二区三区| 日韩一级免费性爱| 91亚洲色人| 亚洲不卡三级手机播放| 97se亚洲综合自| 亚av顶级裸体一区二区三区四区五区 | 欧美亚洲丝袜美女电影| 色色操| 亚洲女毛多水多21P| 久久精品日韩| 日本精品中文字幕视频| 色噜噜狠狠色综无码久久合欧美| 97干综合网| 97精品97| 亚洲视频一二区| 91色五月俺来也| 人妻天天爽夜夜爽精品2| 麻豆亚洲Av成人无码一区精品| 激情小说五月天| 中文字幕在线观看视频www| 立川理惠无码一区二区| 亚洲精品国产精品乱码不99| 亚洲成A∨人影院在线欢看| 国产Aα| 又大又长又粗又爽又黄| 国产最火爆久久国产网站网站| 91精品国产91久久青草| 中文久久久| 97天天操| 东京热综合久久一区二区| 精品人妻一区二区三区不卡断 | 久久综合18p| 67914亚洲精品| 99热精品在线| 欧苏综合色综合| 啊啊啊不要好疼视频| 激情综合网激情五月天| 久热99| 99热这里只有精| 久久久无码国精品无码三区三区| www99热| 婷婷亚洲天堂| 国产67194| 丁香五月色情| 七久久久| 另类图片五月| 久久天天性久久伊人| 超碰公开久久网| 亚洲熟妇丝袜在线观看| 青青国产精品在线| 91人妻视频在线| 国产农村妇女精品一二区| 中文字幕片| 青娱乐大香蕉| 欧美91网站| 后入福利视频| 久99在线免费观看视频| 男人天堂最新手机版在线青青草| 亚洲在线观看| 91狠狠综合久久| 久久国产精品一区二区| 在线中文字幕视频| 精品免费视频国产一区| 国产精品无码成人精品| 特级特黄一级毛片免费| 国产91乱伦| 人妻精品视频一区二区| 97人人射| 夜夜夜久久| 熟女欧美日韩综合婷婷| 国产第二页| 国产精品夜夜夜| 美女性91| jizz啪啪| 手机在线中文字幕国产| 在线观看日韩av不卡| 99热这里只有精| 精品免费1| 九九九影院| 啊啊啊男女| 久久精品国产97欧美精品亚洲 | 无色无码| 婷婷精品| 91伊人大香蕉| 影音资源男人日韩| 色噜噜狠狠色综无码久久合欧美| a片偷拍视频| 亚洲一卡2卡3卡4卡乱码网站| 激情婷婷| 日本大香蕉| 97亚洲综合在线| 日韩偷拍一区二区三区 | 久久av无码| a级理论午夜日本| 欧美嗯啊……在线观看视频免费| 日韩精品作爱导航| 9久久久久久| 亚洲欧美精品国产一区二区| 亚洲精品成人激情在线| 99热精品青草在线| 91熟女视频网| 18禁在线视频| 国产精品一区二区黄片| 久久婷婷在线观看视频| 综合色久欲| 国产91福利小视频在线观看| 亚洲乱码尤物193YW| 91在线免费观看处女| 青久久| 精品无码欧美三级| 亚洲中文字母在线播放| 人人操天天爽| 欧美丝袜亚洲| 91在线超高颜值国产| 五月丁香啪啪啪| 91精品久久久久久久久久| 欧美天天综合| 国产女人91精品嗷嗷嗷嗷| 欧美性区| 老熟女阿 国产91| 女人被男人桶爽视频网站| 很很干很很操| 日本黄色天堂| 成人av性爱电影在线观看| 狠狠综合网| 天天综合网~91综合网| 蜜臀一区二区三区在线| 欧美 亚洲 偷拍自拍| 91处女视频在线观看| 999精品久久久久久久| 免费av大片| 蜜臀99999| 欧美999| 97人人操人人干| 熟女高潮合集-永久久久-成人AV | 91色射| 人妻中文字幕精品无码| 91亚洲青青草原精品1区| 强乱老妇中文字幕| 亚洲成人福利电影免费| 超碰97网址| 91亚洲色图| 99啪啪| 女人18精品一区二区三区| 欧美精品日韩久久久九| 熟女一区二区| 91精品国产综合久久久蜜臀酒店| 偷看洗澡一二三区美女| 日日做夜狠狠爱欧美黑人| 日本潮催一卡操| 殴美性色a级欧美| 粉嫩AV一区二区夜夜| 92午夜免费福利视频| 另类 综合 日韩 欧美 亚洲| 欧美精品宗合| 长长久久曰曰夜夜成人网| 欧美丰满少妇交换91欧美精品| 噜噜噜在线视频| 国产精品网站www| 一级性爱视频免费观看 | 国产精品福利视频| 婷婷中文字幕| 伊人宅男大香蕉| 操逼逼无码| 日韩人妻精品| 成人三一级一片aaa| 农村妇女精品一区二区| 欧美精品23| 日本97久久久精品| 无码高清操逼| 天天操天天射青青草| 精品久| 亚洲美乱| 久久精品一区二区| 水野优香在线观看| 天天综合色图| 婷婷五月天小说| 欧色网址| 熟女精品一区二区三区| 97在线视频免费看| 国产亚洲色婷婷久久99精品91| 舔人妻中文免费视频| 另类一区| 国产中文字幕在线| 抽插无码高清一区| 日韩射图| www色色色com| 老司机香蕉久久久久| 久青草影院| 亚州男人天堂| 中文字暮97| 亚洲欧美另类激情小说| 日本不卡卡一区| 操国产逼| 99青青草国产视频| 99久久久无码精品国产人| 亚洲和欧美裸体美女双飞视频| 草草影院日本第一页| 色眯眯av| 成人三级片无码| 91M一社| 97色色色| 精品视频在线观看| 亚洲精品蜜桃久久久一区二区三区| 人妻一区二区三区四区视频| 欧美色图中文字幕| 日韩精品在线视频在线观看| 好屌色综合| 91操人| 国产91美女视频| 欧美成人9797| 日韩免费在线观看不卡| 美女主播色欲91抠b在线播放| 国产精品麻豆视频网站| julia ann久久| 91精品91久久久中77777| 色香AV| 久久亚洲天天做| 免费一级特黄特色大片在线观看看| 国产精品久久久久久9999| 99久久婷婷国产综合| 亚洲久久久久| 欧美大香蕉97| 日韩精品黄片免费观看| 中国韩国明星一极片一区乱码毛片人妻熟女一区二区三区 | 九九九九九九九九九九九免费国产| 中日韓欧美高清| 爱干爱射网啊啊啊| 操逼啊啊啊91| 97中文热色| 96精品久久久久中文字幕| 久久91精品国产9丨久久分亭| 9久9久9久9久视频网站| 极品色社| 国产精品麻豆免费视频| 欧美在线第五页| 又黑又大又粗 | 亚洲国产精品无石码久久| 日本97久久久精品| 日韩不卡毛片Av免费高清| 天天拍夜夜| 97色色国产视频| 国内毛片免费h片在线| 天天躁日日躁狠狠躁| 亚洲淫色网中文| 亚洲国产精品V?在线播放| 欧美与日韩97| 99热这里| 亚洲图片婷婷五月天| 日韩天天综合| 亚洲一区二区三区麻豆传媒| 首页中文字幕中文字幕免费| 天天综合中文字幕 91| 国产精品熟女九九九| 欧美日韩第一页| 国产精品国产亚洲区艳妇糸列| 狠狠躁日日躁夜夜躁A| 丁香五月成人| 秋霞成人一级在线观看| 欧美日韩一二三| 日本A级视频| 337p大胆噜噜噜噜噜91Av| 日韩熟女操逼| 啊啊啊水好多| 青青草啪啪网| 99热这里是精品| 免费少妇一区二区| 男女啊啊啊| 国产亚洲色婷婷99精品91| 丁香五月天激情综合| 亚洲综合另类小说色区亚洲成av人片在www | 女同性恋久久| 欧美人黑A片无码免视费| 大屁股熟女一区二区三区| 日本天天人人狠狠在线日美女 | 无码久久亚洲高清,|