日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

本地模型實(shí)現(xiàn)信息抽?。簭倪x型到工程落地全指南

本地模型實(shí)現(xiàn)信息抽?。簭倪x型到工程落地全指南 過(guò)去兩年只要提到“信息抽取”絕大多數(shù)團(tuán)隊(duì)的第一反應(yīng)都是把文本丟給云端大模型 API等著拿回 JSON。這個(gè)流程確實(shí)好用但它默認(rèn)了一個(gè)前提——你的數(shù)據(jù)允許上傳到第三方服務(wù)器。一旦數(shù)據(jù)涉及內(nèi)部業(yè)務(wù)、客戶(hù)隱私、審計(jì)留痕或者干脆要部署在無(wú)外網(wǎng)的機(jī)房這條路就斷了。于是“本地模型能不能做抽取”成了越來(lái)越多團(tuán)隊(duì)必須回答的問(wèn)題。這篇文章想給一個(gè)明確的判斷本地模型做抽取任務(wù)已經(jīng)不是“能不能用”的問(wèn)題而是“怎么選、怎么調(diào)、怎么兜底”的問(wèn)題。它在隱私、成本、可定制性上有不可替代的優(yōu)勢(shì)但它的坑也很真實(shí)——Prompt 稍微寫(xiě)含糊輸出就不穩(wěn)定模型選小了準(zhǔn)確率直接崩選大了顯存又扛不住。本文會(huì)從抽取任務(wù)的基礎(chǔ)認(rèn)知、本地模型選型、部署環(huán)境、Prompt 設(shè)計(jì)與代碼實(shí)現(xiàn)、結(jié)果驗(yàn)證和工程落地方案完整展開(kāi)幫你把這條鏈路走通。如果你正在做文檔信息抽取、結(jié)構(gòu)化數(shù)據(jù)構(gòu)建、建筑與地理信息相關(guān)的屬性抽取或者只是好奇本地模型和云端 API 到底該怎么選這篇文章值得讀完。1. 這篇文章真正要解決的問(wèn)題很多人對(duì)“本地模型做抽取”有一個(gè)誤解以為把云端 API 換成開(kāi)源的模型權(quán)重改一下base_url剩下的事就水到渠成。真正動(dòng)手后才發(fā)現(xiàn)問(wèn)題不是“模型能不能跑”而是同一個(gè) Prompt 在云端 API 上穩(wěn)定輸出 JSON換成本地小模型就頻繁漏字段、套殼輸出、甚至直接說(shuō)“我不會(huì)”模型量化版本選錯(cuò)了回答質(zhì)量下降明顯但顯存占用少得有限本地模型沒(méi)有云端 API 那么好用的函數(shù)調(diào)用和結(jié)構(gòu)化輸出能力必須自己設(shè)計(jì) JSON Schema、做后處理抽取結(jié)果沒(méi)有置信度錯(cuò)誤數(shù)據(jù)直接進(jìn)數(shù)據(jù)庫(kù)后續(xù)校驗(yàn)成本反而更高。這篇文章要解決的就是這些具體問(wèn)題。我從結(jié)論說(shuō)起本地模型做抽取真正的價(jià)值不在于“模型本身多聰明”而在于它讓抽取這條流水線變得可落地、可審計(jì)、可離線、可長(zhǎng)期用。它的核心壁壘不是算法而是工程——包括 Prompt 設(shè)計(jì)、輸出約束、結(jié)果校驗(yàn)和失敗重試機(jī)制。什么類(lèi)型的讀者最應(yīng)該看做 RPA、文檔數(shù)字化、知識(shí)圖譜構(gòu)建的開(kāi)發(fā)者需要批量從非結(jié)構(gòu)化文本里抽實(shí)體和關(guān)系在地理信息、遙感、建筑行業(yè)做數(shù)據(jù)處理的工程師需要從規(guī)劃文檔、勘察報(bào)告、GIS 元數(shù)據(jù)里抽取建筑屬性信息做內(nèi)部數(shù)據(jù)平臺(tái)數(shù)據(jù)不允許出內(nèi)網(wǎng)但希望用上大模型能力的團(tuán)隊(duì)。如果你是這幾類(lèi)人這篇文章會(huì)給你一條完整的落地路徑。2. 信息抽取任務(wù)與本地模型的基礎(chǔ)認(rèn)知2.1 信息抽取到底在抽什么信息抽取Information ExtractionIE是把非結(jié)構(gòu)化或半結(jié)構(gòu)化文本轉(zhuǎn)換為結(jié)構(gòu)化數(shù)據(jù)的任務(wù)。最常見(jiàn)的子任務(wù)包括子任務(wù)英文說(shuō)明命名實(shí)體識(shí)別NER從文本中識(shí)別出人名、地名、機(jī)構(gòu)名、時(shí)間、金額等實(shí)體關(guān)系抽取RE判斷兩個(gè)實(shí)體之間的關(guān)系例如“張偉是項(xiàng)目負(fù)責(zé)人”事件抽取EE抽取事件觸發(fā)詞、事件類(lèi)型、參與者和時(shí)間地點(diǎn)屬性抽取Attribute Extraction抽取實(shí)體的屬性例如建筑的面積、層數(shù)、建造年份一項(xiàng)現(xiàn)實(shí)的抽取任務(wù)往往是這些子任務(wù)的組合。例如從一份建筑勘察報(bào)告里抽取“項(xiàng)目位置、建筑面積、建筑類(lèi)型、當(dāng)前狀態(tài)”本質(zhì)上是先做實(shí)體識(shí)別再做屬性填充最后輸出成 JSON。傳統(tǒng)做法是訓(xùn)練專(zhuān)門(mén)的 NER 模型加規(guī)則模板成本高且維護(hù)周期長(zhǎng)。云端大模型改變了這個(gè)局面但引入了數(shù)據(jù)出域問(wèn)題。本地模型則是對(duì)這兩條路線的一個(gè)折中既能靠自然語(yǔ)言 Prompt 快速適配新任務(wù)又能把數(shù)據(jù)留在自己的機(jī)器上。2.2 building footprint extraction 到底是什么任務(wù)這里要澄清一個(gè)常見(jiàn)混淆。網(wǎng)絡(luò)上經(jīng)常會(huì)看到 building footprint extraction建筑足跡提取這個(gè)熱詞它指的是從遙感影像中提取建筑輪廓屬于計(jì)算機(jī)視覺(jué)里的語(yǔ)義分割或?qū)嵗指钊蝿?wù)直接產(chǎn)出的是矢量多邊形或掩膜而不是文字。它和信息抽取是兩個(gè)方向但都屬于“從原始數(shù)據(jù)里提取結(jié)構(gòu)化信息”的范疇。在 GeoAI 落地項(xiàng)目里常見(jiàn)的工作流是先用視覺(jué)模型從影像中提取建筑輪廓再用 NLP 模型從規(guī)劃文本、權(quán)屬材料里抽取建筑的屬性信息最終把幾何信息和屬性信息合并成完整的建筑數(shù)據(jù)庫(kù)。所以當(dāng)你搜索 Local models extraction 相關(guān)技術(shù)方案時(shí)需要先確認(rèn)自己要做的是圖像輪廓提取還是文本屬性抽取。本文后續(xù)內(nèi)容主要聚焦文本信息抽取方向但在工程架構(gòu)上這兩條鏈路都適合接入本地模型。2.3 本地模型與云端 API 的對(duì)比對(duì)比維度云端大模型 API本地開(kāi)源模型數(shù)據(jù)安全數(shù)據(jù)需發(fā)送到第三方服務(wù)器數(shù)據(jù)不出本機(jī)或內(nèi)網(wǎng)初始成本按 Token 付費(fèi)長(zhǎng)期累計(jì)成本高需要 GPU 硬件投入部署復(fù)雜度低幾行代碼接入較高需環(huán)境配置和模型管理可定制性依賴(lài)平臺(tái)功能可微調(diào)、可量化、可換模型穩(wěn)定性平臺(tái)維護(hù)穩(wěn)定性較好依賴(lài)自身運(yùn)維能力離線可用不支持支持延遲受網(wǎng)絡(luò)和平臺(tái)負(fù)載影響本地推理延遲可控這個(gè)對(duì)比想說(shuō)明一個(gè)點(diǎn)本地模型不是全面替代云端 API而是在“數(shù)據(jù)敏感、成本敏感、需要離線”的場(chǎng)景里成為更優(yōu)解。很多團(tuán)隊(duì)的做法是云端模型做冷啟動(dòng)驗(yàn)證本地模型做生產(chǎn)環(huán)境服務(wù)兩者通過(guò)統(tǒng)一的接口抽象切換。2.4 為什么抽取任務(wù)適合本地模型抽取任務(wù)有一個(gè)特點(diǎn)實(shí)體類(lèi)型和輸出格式高度固定。某個(gè)項(xiàng)目里可能只需要抽取“地點(diǎn)、建筑面積、建筑類(lèi)型、用途狀態(tài)”這幾個(gè)字段。這類(lèi)任務(wù)對(duì)模型的“常識(shí)廣度”要求不高但對(duì)“指令跟隨能力”和“格式穩(wěn)定性”要求很高。這正好落在開(kāi)源本地模型的能力射程內(nèi)。一個(gè) 7B 到 14B 參數(shù)量的開(kāi)源模型經(jīng)過(guò)合適的 Prompt 約束和 JSON Schema 引導(dǎo)完全可以在限定領(lǐng)域的抽取任務(wù)上達(dá)到可用水平。這也解釋了為什么當(dāng)前本地模型最活躍的應(yīng)用方向之一就是結(jié)構(gòu)化抽取——它是“模型能力有限但任務(wù)邊界清晰”的最佳組合。3. 本地模型選型從哪個(gè)模型開(kāi)始3.1 開(kāi)源本地模型的常見(jiàn)選擇目前主流的開(kāi)源本地模型系列主要有幾個(gè)方向我這里不做跑分排名只給選型思路Q(chēng)wen 系列通義千問(wèn)開(kāi)源版中文抽取能力表現(xiàn)出色對(duì)中文長(zhǎng)文本和結(jié)構(gòu)化輸出支持較好是目前國(guó)內(nèi)團(tuán)隊(duì)最常用的本地模型之一。Llama 系列Meta 開(kāi)源社區(qū)生態(tài)最豐富幾乎支持所有推理框架適合作為底座做微調(diào)但中文能力通常需要補(bǔ)充訓(xùn)練。Mistral 系列歐洲團(tuán)隊(duì)開(kāi)源英文能力強(qiáng)上下文窗口和指令跟隨能力優(yōu)秀但在中文場(chǎng)景下應(yīng)用不如 Qwen 方便。如果你處理的是中文文本從 Qwen 系列開(kāi)始是更穩(wěn)妥的選擇如果業(yè)務(wù)面向英文且需要更強(qiáng)的推理能力Llama 和 Mistral 也值得測(cè)試。3.2 參數(shù)量怎么選這可能是選型中最重要的一個(gè)決策。參數(shù)量級(jí)建議顯存適用場(chǎng)景3B4B4GB8GB簡(jiǎn)單實(shí)體抽取、格式固定、對(duì)準(zhǔn)確率要求不極高7B8B8GB16GB大多數(shù)信息抽取任務(wù)平衡準(zhǔn)確率和資源消耗14B16GB32GB復(fù)雜關(guān)系抽取、長(zhǎng)文檔、需要更強(qiáng)指令跟隨32B 以上32GB 以上或需量化高難度抽取、多語(yǔ)言、需要接近云端 API 效果真實(shí)項(xiàng)目中我推薦先按“任務(wù)復(fù)雜度 顯存上限”確定參數(shù)量而不是先追求大模型。原因很直接抽取任務(wù)通常可以拆成多個(gè)小任務(wù)拆完之后7B 模型往往就夠用了。如果一開(kāi)始就上 32B 模型部署成本高不說(shuō)推理延遲也會(huì)制約批處理效率。3.3 量化版本要不要用量化Quantization是把模型參數(shù)從 16 位浮點(diǎn)數(shù)壓縮到 8 位或更低以減少顯存占用、提高推理速度但會(huì)帶來(lái)少量精度損失。對(duì)抽取任務(wù)我的建議是先用原版精度跑通基準(zhǔn)測(cè)試確認(rèn)準(zhǔn)確率達(dá)標(biāo)再?lài)L試 Q4 或 Q5 量化對(duì)比輸出質(zhì)量。如果量化后的結(jié)果沒(méi)有明顯變差就可以用量化版本部署因?yàn)樗娘@存占用和推理成本會(huì)低很多。這里有一個(gè)值得注意的坑量化版本在大部分簡(jiǎn)單抽取任務(wù)上沒(méi)有差異但在長(zhǎng)文本、復(fù)雜指令或多語(yǔ)言混合的場(chǎng)景下可能出現(xiàn)“字段輸出不完整”“格式偶爾跑偏”等問(wèn)題。因此量化后的效果驗(yàn)證絕對(duì)不能省。4. 本地部署環(huán)境準(zhǔn)備4.1 推理框架選哪個(gè)當(dāng)前部署本地模型常用的推理方案有三個(gè)按易用性排序Ollama安裝簡(jiǎn)單模型管理方便自帶 OpenAI 兼容 API適合個(gè)人和中小團(tuán)隊(duì)快速驗(yàn)證。llama.cpp底層的 C/C 推理框架適合嵌入式環(huán)境和極致性能調(diào)優(yōu)。vLLM吞吐高適合生產(chǎn)環(huán)境大規(guī)模并發(fā)推理但部署復(fù)雜度更高。本文以 Ollama 為主線因?yàn)樗茏羁炫芡ㄍ暾溌芬沧罘稀皬牧愕揭弧毖菔拘枨?。生產(chǎn)環(huán)境需要高并發(fā)時(shí)可以遷移到 vLLM——代碼改動(dòng)幅度很有限。4.2 安裝 OllamaOllama 支持 Windows、Linux 和 macOS。Linux 和 macOS 可以執(zhí)行官方安裝腳本curl -fsSL https://ollama.com/install.sh | shWindows 用戶(hù)下載安裝包安裝即可。安裝完成后檢查版本ollama --version啟動(dòng)服務(wù)ollama serve在 Linux 上Ollama 安裝后通常會(huì)注冊(cè)為 systemd 服務(wù)可以通過(guò)ollama serve手動(dòng)啟動(dòng)方便觀察日志。4.3 下載并運(yùn)行模型以 Qwen 系列 7B 模型為例在終端執(zhí)行ollama run qwen2.5:7b首次運(yùn)行會(huì)先下載模型權(quán)重完成后進(jìn)入交互式對(duì)話界面可以直接輸入文本測(cè)試。到這里本地模型已經(jīng)跑起來(lái)了。這一步的關(guān)鍵是確認(rèn)模型標(biāo)簽在本機(jī)真實(shí)存在??梢杂靡韵旅畈榭匆严螺d的模型ollama list如果你不確定某個(gè)標(biāo)簽是否存在可以在模型庫(kù)頁(yè)面確認(rèn)名稱(chēng)或直接使用ollama pull qwen2.5:7b拉取。5. 核心流程用本地模型做抽取任務(wù)5.1 先設(shè)計(jì)任務(wù)再寫(xiě) Prompt很多人做抽取任務(wù)一上來(lái)就寫(xiě) Prompt這是一個(gè)誤區(qū)。先要明確“輸出 Schema”也就是你希望模型輸出什么結(jié)構(gòu)的數(shù)據(jù)。例如要從建筑勘察文本中抽取屬性最簡(jiǎn)單的 Schema 是{ location: 項(xiàng)目地點(diǎn), building_type: 建筑類(lèi)型, area: 建筑面積, status: 當(dāng)前狀態(tài) }Schema 決定了 Prompt 里的“輸出要求”部分。Schema 設(shè)計(jì)得越清晰后續(xù)解析和校驗(yàn)越簡(jiǎn)單。5.2 本地抽取的 Prompt 設(shè)計(jì)原則針對(duì)本地模型Prompt 設(shè)計(jì)有四個(gè)原則第一身份與任務(wù)要具體。不要寫(xiě)“你是一個(gè)助手”要寫(xiě)“你是建筑信息抽取助手負(fù)責(zé)從文本中抽取指定字段”。第二輸出格式要顯式。直接給出 JSON 示例比單純說(shuō)“輸出 JSON”有效得多。本地模型對(duì)示例的模仿能力很強(qiáng)寧可多花幾行 token也要在 Prompt 里放一個(gè)完整的輸出示例。第三指定缺失處理。告訴模型“如果某個(gè)字段沒(méi)有找到輸出空字符串或 null”避免模型自己編造內(nèi)容。這一步是抽取任務(wù)里最容易出問(wèn)題的地方。第四保持溫度低。抽取是確定性任務(wù)temperature 建議設(shè)置為 0抑制隨機(jī)性。5.3 Prompt 模板示例下面是一個(gè)適合本地模型的抽取 Prompt 模板你是建筑信息抽取助手。請(qǐng)從用戶(hù)提供的文本中抽取以下字段 - location項(xiàng)目地點(diǎn) - building_type建筑類(lèi)型 - area建筑面積保留數(shù)字 - status當(dāng)前狀態(tài)如已建成、在建、規(guī)劃中 要求 1. 只輸出 JSON 對(duì)象不要輸出任何解釋文字。 2. 字段未找到時(shí)輸出 null不要編造。 3. 面積統(tǒng)一使用單位“平方米”。 示例輸出 {location: 上海市浦東新區(qū), building_type: 研發(fā)大樓, area: 12000, status: 在建}這個(gè)模板的關(guān)鍵在于“只輸出 JSON”和“未找到時(shí)輸出 null”它們能顯著提高后續(xù)解析的成功率。5.4 輸出后處理與校驗(yàn)即便 Prompt 寫(xiě)得再好本地模型仍然可能輸出 Markdown 代碼塊、多余解釋、或者字段名跑偏。因此后處理是必須的不能跳過(guò)。后處理通常包括三步去掉 Markdown 代碼塊標(biāo)記用json.loads解析失敗時(shí)進(jìn)入重試用 JSON Schema 校驗(yàn)字段是否齊全缺失的字段標(biāo)記為 null。這套后處理邏輯雖然簡(jiǎn)單但它決定了整個(gè)抽取流水線的穩(wěn)定性。生產(chǎn)環(huán)境下建議把“解析失敗”和“字段缺失”統(tǒng)計(jì)成指標(biāo)用于衡量模型的實(shí)際效果。6. 完整示例代碼實(shí)現(xiàn)6.1 安裝依賴(lài)需要安裝 Ollama 的 Python 庫(kù)以及用于測(cè)試的 OpenAI SDK。pip install ollama openai如果后續(xù)要切換到 vLLM 或其他 OpenAI 兼容服務(wù)openai這個(gè)依賴(lài)會(huì)非常有用。6.2 示例一使用 Ollama Python 庫(kù)做實(shí)體抽取新建文件extract_entities.py代碼如下# 文件路徑extract_entities.py import ollama response ollama.chat( modelqwen2.5:7b, messages[ { role: system, content: ( 你是信息抽取助手。請(qǐng)從用戶(hù)輸入文本中抽取實(shí)體 并輸出 JSON 對(duì)象字段包括person、organization、 location、date。沒(méi)有找到的字段輸出空列表。 ), }, { role: user, content: ( 2024年6月綠城建筑公司在杭州完成了智慧園區(qū)項(xiàng)目的驗(yàn)收 項(xiàng)目負(fù)責(zé)人是張偉驗(yàn)收日期是6月28日。 ), }, ], formatjson, ) print(response[message][content])運(yùn)行驗(yàn)證python extract_entities.py預(yù)期輸出是一個(gè) JSON 對(duì)象例如{ person: [張偉], organization: [綠城建筑公司], location: [杭州], date: [2024年6月, 6月28日] }這里formatjson參數(shù)會(huì)讓 Ollama 盡量以 JSON 格式輸出能大幅度降低解析難度。6.3 示例二使用 OpenAI 兼容接口抽取建筑屬性O(shè)llama 啟動(dòng)后默認(rèn)在11434端口提供 OpenAI 兼容 API可以用標(biāo)準(zhǔn) OpenAI SDK 調(diào)用方便以后切換后端。新建文件extract_building.py# 文件路徑extract_building.py from openai import OpenAI client OpenAI( base_urlhttp://localhost:11434/v1, api_keyollama, # 本地服務(wù)不校驗(yàn)真實(shí) key但字段不能為空 ) resp client.chat.completions.create( modelqwen2.5:7b, temperature0, response_format{type: json_object}, messages[ { role: system, content: ( 你是建筑信息抽取助手。請(qǐng)從文本中抽取字段location、 building_type、area、status。只輸出 JSON不要輸出解釋。 ), }, { role: user, content: ( 上海市浦東新區(qū)張江科技園的研發(fā)大樓建筑面積約12000平方米 目前正在建設(shè)中。 ), }, ], ) print(resp.choices[0].message.content)運(yùn)行驗(yàn)證python extract_building.py預(yù)期輸出{ location: 上海市浦東新區(qū)張江科技園, building_type: 研發(fā)大樓, area: 12000, status: 在建 }這個(gè)示例的關(guān)鍵點(diǎn)是base_url只要指向http://localhost:11434/v1本地模型和云端 API 的切換就只剩配置差異業(yè)務(wù)代碼基本不用改。6.4 示例三批量抽取與 JSON 解析后處理真實(shí)項(xiàng)目中抽取往往面向批量文本。我們把后處理邏輯封裝成一個(gè)函數(shù)并在循環(huán)中批量執(zhí)行。新建文件batch_extract.py# 文件路徑batch_extract.py import json import ollama def parse_json_response(content: str) - dict: 清理模型輸出并解析 JSON解析失敗時(shí)拋出異常。 content content.strip() # 去掉常見(jiàn)的 markdown 代碼塊標(biāo)記 if content.startswith(): lines content.splitlines() if lines and lines[0].startswith(): lines lines[1:] if lines and lines[-1].strip() : lines lines[:-1] content \n.join(lines) return json.loads(content) def extract_fields(text: str, model: str qwen2.5:7b) - dict: 抽取文本中的建筑字段。 resp ollama.chat( modelmodel, messages[ { role: system, content: ( 抽取以下字段location、building_type、area、status。 只輸出 JSON沒(méi)有的信息輸出 null不要編造。 ), }, {role: user, content: text}, ], formatjson, ) return parse_json_response(resp[message][content]) texts [ 北京朝陽(yáng)區(qū)望京 SOHO 塔一寫(xiě)字樓2014年投入使用。, 成都高新區(qū)天府軟件園辦公園區(qū)園區(qū)面積約100萬(wàn)平方米。, 武漢東湖新技術(shù)開(kāi)發(fā)區(qū)的地下綜合管廊項(xiàng)目仍在規(guī)劃中。, ] for text in texts: try: result extract_fields(text) print(json.dumps(result, ensure_asciiFalse)) except json.JSONDecodeError as e: print(解析失敗原始輸出, e)運(yùn)行驗(yàn)證python batch_extract.py如果某條數(shù)據(jù)解析失敗程序不會(huì)整體中斷而是打印錯(cuò)誤信息方便后續(xù)定位 Prompt 或模型問(wèn)題。7. 運(yùn)行結(jié)果與效果驗(yàn)證7.1 驗(yàn)證步驟本地模型做抽取驗(yàn)證不能只看一兩條結(jié)果要做三件事第一準(zhǔn)備一個(gè)測(cè)試集。至少 20 到 50 條真實(shí)業(yè)務(wù)文本覆蓋正常情況、缺失字段情況、長(zhǎng)文本情況。第二統(tǒng)計(jì)指標(biāo)。抽取任務(wù)的常用指標(biāo)是字段級(jí)準(zhǔn)確率和字段級(jí)召回率。字段級(jí)準(zhǔn)確率衡量“抽出來(lái)的字段是否正確”字段級(jí)召回率衡量“應(yīng)該抽到的字段是否被漏掉”。第三檢查失敗案例。對(duì)每一條解析失敗或字段錯(cuò)誤的數(shù)據(jù)記錄原因是 Prompt 不清晰還是模型能力不足還是后處理有 bug。7.2 簡(jiǎn)單評(píng)估腳本這里給一個(gè)最小評(píng)估思路# 文件路徑evaluate.py import json from batch_extract import extract_fields test_cases [ { text: 上海市浦東新區(qū)張江科技園研發(fā)大樓12000平方米在建。, expected: { location: 上海市浦東新區(qū)張江科技園, building_type: 研發(fā)大樓, area: 12000, status: 在建, }, }, ] total len(test_cases) correct 0 for case in test_cases: result extract_fields(case[text]) if result case[expected]: correct 1 else: print(期望, case[expected]) print(實(shí)際, result) print(f準(zhǔn)確率{correct}/{total})這個(gè)腳本只做說(shuō)明實(shí)際項(xiàng)目里還需要處理字段級(jí)部分匹配和未知字段等問(wèn)題但思路是一致的。7.3 失敗時(shí)先看哪里如果結(jié)果不理想按以下順序排查先看原始輸出。用ollama run或腳本直接打印模型輸出確認(rèn)是“格式不對(duì)”還是“內(nèi)容不對(duì)”。格式不對(duì)優(yōu)先修 Prompt 和后處理內(nèi)容不對(duì)優(yōu)先換模型和調(diào) Prompt。確認(rèn)是否使用了低溫度。抽取場(chǎng)景 temperature 必須低否則同樣的輸入可能輸出不同結(jié)果。8. 常見(jiàn)問(wèn)題與排查思路本地模型做抽取的坑不少這里把高頻問(wèn)題整理成表格。問(wèn)題現(xiàn)象可能原因排查方式解決方案模型輸出不是 JSON而是解釋文字Prompt 約束不夠強(qiáng)查看原始輸出內(nèi)容在 Prompt 中強(qiáng)調(diào)“只輸出 JSON”并加示例開(kāi)啟 formatjson字段總是丟特別是面積、日期模型參數(shù)量小長(zhǎng)文本注意力不足檢查缺失字段是否在輸入中出現(xiàn)拆分長(zhǎng)文本降低單次抽取字段數(shù)或換更大模型同一個(gè)樣本多次運(yùn)行結(jié)果不同temperature 設(shè)置過(guò)高檢查推理參數(shù)將 temperature 設(shè)置為 0啟動(dòng)時(shí)顯存不足模型量化等級(jí)低或并發(fā)過(guò)高觀察啟動(dòng)日志和顯存占用換更小參數(shù)量模型或啟用 Q4/Q5 量化首次運(yùn)行很慢卡在下載模型權(quán)重未下載完成查看ollama list和網(wǎng)絡(luò)狀態(tài)確認(rèn)已執(zhí)行ollama pull磁盤(pán)空間充足批量處理時(shí)單條失敗導(dǎo)致整體中斷后處理沒(méi)有做異常捕獲查看錯(cuò)誤堆棧對(duì)每條數(shù)據(jù)捕獲json.JSONDecodeError失敗時(shí)記錄日志并繼續(xù)本地模型準(zhǔn)確率低于云端 API模型能力或 Prompt 設(shè)計(jì)問(wèn)題做小規(guī)模對(duì)比測(cè)試先優(yōu)化 Prompt 和輸出約束仍不達(dá)標(biāo)再換更大模型換模型后行為差異大不同模型對(duì) Prompt 的敏感度不同對(duì)比兩個(gè)模型的原始輸出針對(duì)模型調(diào)整 Prompt不要期望一套 Prompt 通吃這組問(wèn)題里最高頻的還是“輸出不穩(wěn)定”和“字段缺失”。它們通常不是獨(dú)立問(wèn)題而是 Prompt、模型參數(shù)量、任務(wù)拆分三者共同作用的結(jié)果。建議一次只改一個(gè)變量不要同時(shí)換模型、改 Prompt、改后處理否則很難定位瓶頸。9. 最佳實(shí)踐與工程建議9.1 把抽取任務(wù)拆小不要追求一次搞定本地模型的能力上限決定了一個(gè) Prompt 里塞太多字段抽取質(zhì)量會(huì)明顯下降。更穩(wěn)妥的做法是先抽實(shí)體再做關(guān)系或?qū)傩云ヅ渥詈笃唇映山Y(jié)構(gòu)化結(jié)果??此贫嗯芰藥状文P偷看稳蝿?wù)邊界清晰準(zhǔn)確率反而更高。9.2 輸出 Schema 先行Prompt 與后處理共用一份定義把字段定義、JSON Schema、Prompt 模板放在一個(gè)配置文件里維護(hù)避免 Prompt 和后處理各寫(xiě)一份。這樣字段變更時(shí)只改一處不會(huì)出現(xiàn) Prompt 里寫(xiě)了area后處理卻在找building_area的尷尬。# 文件路徑schema.py EXTRACTION_SCHEMA { location: 項(xiàng)目地點(diǎn), building_type: 建筑類(lèi)型, area: 建筑面積, status: 當(dāng)前狀態(tài), }9.3 建立失敗樣本回收機(jī)制生產(chǎn)環(huán)境中建議把解析失敗、字段缺失、置信度不高的樣本統(tǒng)一存儲(chǔ)定期人工復(fù)核再把這些樣本加入測(cè)試集或微調(diào)數(shù)據(jù)。這是本地模型抽取效果持續(xù)提升的最可靠路徑。很多團(tuán)隊(duì)用久了效果變差就是因?yàn)闆](méi)有做失敗樣本回收模型和 Prompt 都停在原地。9.4 用緩存提升批量抽取效率同一段文本被重復(fù)抽取的情況很常見(jiàn)。可以按文本內(nèi)容哈希做結(jié)果緩存重復(fù)任務(wù)直接讀取歷史結(jié)果減少 GPU 占用和耗時(shí)。對(duì)于大體量歷史數(shù)據(jù)處理這一步能省下大量推理成本。9.5 安全與合規(guī)提醒如果處理的數(shù)據(jù)涉及個(gè)人或敏感業(yè)務(wù)信息請(qǐng)確保部署環(huán)境、模型下載渠道和輸出存儲(chǔ)都符合公司內(nèi)部的安全規(guī)范。本地模型雖然解決了“數(shù)據(jù)不出域”的問(wèn)題但模型權(quán)重本身、Prompt 內(nèi)容、抽取結(jié)果日志都屬于需要管理的數(shù)據(jù)資產(chǎn)建議做好訪問(wèn)控制和審計(jì)。9.6 從 Ollama 遷移到 vLLM 的時(shí)機(jī)當(dāng)單機(jī)并發(fā)要求提高比如需要同時(shí)處理幾十個(gè)在線抽取請(qǐng)求時(shí)Ollama 的并發(fā)能力會(huì)逐漸成為瓶頸。此時(shí)可以遷移到 vLLM。因?yàn)榇a層使用的是 OpenAI 兼容接口遷移時(shí)只需要把base_url指向 vLLM 服務(wù)地址業(yè)務(wù)代碼基本不用動(dòng)。這個(gè)架構(gòu)設(shè)計(jì)建議在項(xiàng)目一開(kāi)始就預(yù)留。10. 總結(jié)與后續(xù)學(xué)習(xí)方向本文圍繞“本地模型做 extraction”這條主線講清楚了幾個(gè)關(guān)鍵點(diǎn)本地模型適合固定邊界的信息抽取任務(wù)選型上按任務(wù)復(fù)雜度和顯存上限決定參數(shù)量Prompt 設(shè)計(jì)和 JSON 后處理是決定效果的核心工程環(huán)節(jié)模型能力不夠時(shí)靠拆分任務(wù)和失敗樣本回收比盲目換大模型更有效。下一步建議你按這個(gè)順序?qū)嵺`先找一個(gè)真實(shí)業(yè)務(wù)字段設(shè)計(jì) Schema用本地 7B 模型跑通 20 條測(cè)試樣本統(tǒng)計(jì)準(zhǔn)確率針對(duì)失敗樣本迭代 Prompt穩(wěn)定后接入批量處理腳本并發(fā)需求出現(xiàn)時(shí)再遷移到 vLLM。如果你想繼續(xù)深入有三個(gè)方向值得關(guān)注一是結(jié)構(gòu)化輸出約束許多推理框架已經(jīng)支持 JSON Schema 級(jí)別的強(qiáng)約束輸出這是提升穩(wěn)定性的關(guān)鍵二是針對(duì)領(lǐng)域數(shù)據(jù)的輕量微調(diào)用幾百條標(biāo)注樣本微調(diào)底座模型往往比反復(fù)調(diào) Prompt 更可靠三是多模態(tài)本地模型在 building footprint extraction 這類(lèi)視覺(jué)任務(wù)上的應(yīng)用那是另一條同樣值得投入的技術(shù)路線。信息抽取這個(gè)領(lǐng)域最終拼的不是單次召回率有多高而是整條流水線在真實(shí)數(shù)據(jù)和長(zhǎng)期運(yùn)維中能有多穩(wěn)。本地模型把主動(dòng)權(quán)交還給了工程師剩下的就看工程做得夠不夠細(xì)了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
91狠狠色丁香婷婷综合久久精品| 国产夫妻性生活视频| 色呦呦国产精品免费看| 久啪| 大香蕉伊在线久草麻豆天堂故事| JULIA一区二区三区在线播放| 成人区人妻精品一| 欧美少妇性乱| 久久久久久亚洲精品不卡人乳 | 日韩色香| 午夜后入| 久久超碰亚洲人| 欧美极度丰满熟妇hd| 中国人高清www色视频免费| 伊人伊人LD| 麻豆国产尤物AV| 国产日韩在线播放av| 日韩本不卡视频在线观看| 久久久工口| 色综合av综合久久| 亚洲国产97| 亚洲精品黑丝| 精品无码久久久久| 九九九九九九成人| 久久夜嗨| 嗯嗯啊啊好疼| 欧美日韩理论一区| 日本有码久久| 日本污ww视频网站| 亚洲精品国产专区在线观看| 91丝袜| 色九九九综合| 吉川爱美98堂在线| 动漫片子网站3黄| 伊人五月天| 亚洲精品天堂久久A∨51成人漫| 97国产人人| 伊人网在线观看| 日韩在线视频1234| 久久久久久久久久久六六| 亚洲AV永久无码一区仙野| 国产曰批免费观看久久久| 亚洲中字幕日本一区二区三区| 国产家庭乱伦表演| 中国农村熟妇毛片视频| 国产极品粉嫩馒头一线天av| 97色伦97色伦国产欧美| 尤物视频一区| 另类小说综合网| 少妇熟女1区2区3区| 亚洲无 码A片在线观看麻豆| 91久久久亚洲| 999久久久免费精品国产牛牛| 精品女同一区| 色九九九九九九| 久草毛片| 欧美成人精品欧美一级乱黄一区二… | 再深点灬舒服灬太大了好硬好爽| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 蜜臀久久久99久久久久| 国产精品成人无码av| 天天操天天射天天日| 乱欲视频| 日本操逼二区| 色五月综合网| 欧美乱妇狂野欧美在线视频| 青青草原av| 欧美精品系列| 超碰日韩人妻| 2020国产精品| 日日狠狠久久偷偷色综合免费| 丁香五月激情综合国产| 丁香五月AV| 美女人妻色网站| 色眯眯射| 加勒比东京热五月天天堂网| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 日韩熟女精品无码专区一区二区| 人夜夜精品网站香蕉嫩草| 97二区四区| 日韩资源网| 91精品久久久久久77777| 亚洲精品97久久中文字幕| 久草老司机| 97精品在线视频| 日本黄色精品专区网站| 亚洲欧洲日本精品中文a∨| 91视频综合网| 亚洲精品一区二区三区在线播放| 日本熟女免费視颖| 91亚洲黑人| 青青草啪啪网| 一卡二卡三卡| 中文字幕丝袜国产第一页不卡| 色爱国产| 日本一区99| 91精品91久久久久77777| 欧美日韩人妻精品一区二区三区| 国产成人欧美一区二区三区的国产| 日韩在线观看字幕精品| 久久久久七视频| 在线洲亚线| 精品无码久久久久久久久果冻糖心| 尤物一级在线免费观看| 一及黄久一点| 亚洲天堂男人天堂网| 操逼www.| 久久久久久九九九九-美女久久久久久久-成人AV| 日韩色图 一区二区| 蜜臀网 一区| 亚洲国产成人福利在线观看| 吉田爱美AV在线| 乱色老一区二区三区的观看方式| 操逼操2| 黄aaaaaaaaaaaaaaaaaa色网站| 亚洲国产综合久久天堂| 97天天| 国产精选三级在线观看| 欧美视频一区二区三区| 97人人草| 呦呦一区| 久久嫩草国产成人一区| 国产后入| 九九综合| 火箭成精品视频884必出精品| 欧美日韩操操操| 神马久久久久久久久久| 日韩一级性爱无码| 欧美图片色综合| 中国人高清www色视频免费| 成人免费在线网站| 国产999精品久久久久久| 欧美91久久久久| 国产高清免费不卡av| 亚洲日本成人动漫| 欧美狠狠| 国产有码一区| 国产最火爆久久国产网站网站| 欧美色偷拍| 久久久精品网| 欧美色66| 国产精品毛片?v一区二区三区 | 欧美91网站| A级国产欧美激情在线| 五月丁香婷婷综合网| 色男人色天堂东京热| 日本熟女中文字幕一区| 亚洲在线观看| 人人操人人摸人 | 成人羞羞视频国产| 诱惑人妻欧美一区在线播放| 一本一道vs波多野结衣| 9997se| 日韩AV熟女乱伦| 哈哈操 大香蕉| 婷婷五月天成人| 亚洲欲色| 久草视频制服诱惑| 亚洲高清国产理伦片| 涩涩久久精品| 丁香五月天视频| 在线观看中文字幕| 欧亚日韩三区| 九九99精品视频在线观看| 蜜桃AV天堂| 偷拍 亚洲| 国产女同视频在线播放| 人人操人人操人妻人| 色狠狠色| 影音先锋乱伦资源| 精品欧美乱码久| 人妻一区二区三区| 日韩高清黄片| 国产成人五月天丁香花| 91欧美成人色站| 久久人人爽人人爽人人片Ⅴ| www国产无码| 日本有码久久| 国语对白露脸XXXXXX| 欧美日韩97在线| 精品少妇后入一区二区三区四区人妻巨乳 | 思思99热| 日婷婷| 日韩综合第八区国产精品| 色噜噜人妻av 中文字幕| 97在线免费看视频| 国产极品999| 自拍偷拍第26| 99色网| 日本道日本道中文字幕日本道最新日本道在线观看 | 日韩欧美aⅴ综合网站发布| 99热这里只有精品1| 天天干2019| 日韩黄色一区二区三区| 欧美大香蕉专区网| 国产精品福利资源在线尤物| 伊人网高清| 操死我了啊啊啊| 超碰成人免费| 日韩乱插| 亚洲91在线播放影院| 欧美黄页| 亚洲激情片| 青女偷拍网| 伊人久久亚洲色欲综合网站 | 艳美熟妇先锋一二三区| 大香蕉伊人色偷偷在线| 日本精品一区二区三| 亚洲精品aa久久伊人| 闷骚老熟女15P| 国产美女自拍AV| 精品视频久久久久九九九九9999| 国产性爱在线视频一区二区| 亚乱色| 老熟女乱伦一区| 欧美牲| 欧美高清色| 精品9区| 欧美熟妇视频| 人妻丝袜日本| 欧美日韩国产一区二区小黄片大全| 九九色图| 密乳视频在线| 日韩激情无码影院| 一区二区三区高清| 天天夜夜久久| 67914在线兔费成人视频| 男女性扦B| 大香蕉日韩欧美| 欧美日韩一二三| 久热伊人| 日韩欧美福利视频看看| 操逼日批| 激情综合色| 国产福利夜| 亚洲综合九| 天天干夜夜操一区二区| 麻豆精品.欧美精品.日韩精品.| 亚洲欧美综合网| 五月综合久久| 久久久工口| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 熟女精品日韩一区二区三区| 97超碰色五月| 黄片视频观看| 欧美色五月| 日韩资源网| 中文一区二区| 久久久久久99AV无码免费网站| 97一区二区蜜臀| 亚洲四虎熟女精品| 欧美人妻色| 美國A片| 婷婷亚洲综合| 校园春色综合香蕉| 好属操| 午夜.DJ高清在线观看免费7| 激情第四色| 91久久18禁| 97操97色| 亚洲国产欧美中文永久| 2020中文字幕在线观看| 91美乳| 91丝袜美女视频| 亚洲另类久操网| 麻豆亚洲AV成人无码久久精品| 乱欲一区二区| 国产aⅴ无码片毛片一级网站| 免费的很黄很污的全部视频| 男人的天堂久久狠| 人人妻人人色| 手机看片1025| 青青草视频这里只有精品| 99热这里只有精品地址 | 91网站18在线| 天天综合网日韩7799| 麻豆av一区二区| 亚洲本色精品一区二区久久| 久操频道免费在线呗看| 家庭乱伦性爱av| 久久这里都是精品| 欧美资源| 日韩高潮一区| 91爱| 日本123区操B视频| 极品少妇久久久久| 婷婷五月天社区| 91亚.色| 欧美少妇性爱网站| 夜夜操中文字幕| 九久久九精品视频| 欧美精品三区| 99热亚洲天堂| 啪啪啪精品| 情色五月天久久久| 国产精品视频自拍在线| 99re8免费高清在线| 国产在线综合网| 人妻精品综合中文字幕在线| 91香蕉国产尤物视频| 久久黄黄| 26uuu久久| 伊人大香蕉在线| 日韩性爱一级片| 久久超碰、| 蜜乳视频网站| 色眯眯av| 久久综合激情| 蜜臀久久99精品久久久久久婷婷 | 日韩婷婷| 欧美色图电影| 爆乳免费黄网站| 人人干人人操人人爱| 另类av天堂| 日韩无码三级影院| 欧美,日韩,亚洲视频| 日本激情免费大片| 九九九999久久久网站| 最新精品久久蜜桃| 成人一二三区| 国产婷婷综合在线观看| 日韩精品碰碰| 98一区二区精品| 欧美综合在线91| 色就色综合| 国产精品久久久久中文字幕| 日韩中文字幕av在线播放| 中文字幕乱在线伦视频中文字幕乱码在线 | 伊人影院中文字幕| 国产精品乱码久久| 中国农村熟妇毛片视频| 超碰在线观看av不卡| 60秒免费小视频| 成人久久精品| 国产伦乱91| 蜜臀久久久99久久久久 | 九九国产| 日韩精品99999| 人妻一区二区三区视频 | 人人操人人插人人摸人人干| 国产97亚洲| 日欧美色| 国产精品69久久久久孕妇欧美| 日本久久精品| 欧美日本中字另类在线| 国产精品懂色tv影视免费观看 | 性爱动态120秒| 亚洲男人天堂视频| 国产av美女被艹的乱叫| 97视频在线观看高清资源| 欧美综合自拍| 欧美成人9797| ..日韩av毛片精品久久久| 男人亚洲91首页在线| 国产精品毛片?v一区二区三区| 91天美免费| 婷婷五月天无码 | 亚洲综合中文字幕有码| 久久久9视频| 亚洲影视综合| 久久久久国产亚洲一区欧美色图日韩 | 神马午夜久久| 免费av在线播放二区| 亚洲男人的天堂AV| 日韩人妻一二三区视频| 亚洲操逼无码| 久久精品国产亚洲AV清纯| 午夜福利区| 91亚洲黑人| 手机午夜电影神马久久| 无码人妻一区二区三区四区老鸭窝| 91美女色视频亚洲| 久久久久9999妇女| 性感女人网页在线观看视频| 色性综合| 中文字幕乱码人妻一区二区三区,99精品 | 97人人操人人摸人人爱| 国产乱色国产精品免费视| 男女无套 免费网站| 男女啊啊啊| 激情情色五月天| 伊人色综合欧美| 欧美白嫩在线放| 美日韩一卡二卡三卡免费人妻精品| www久久久| 成年女人18级毛片毛片免费观看| 色五月网址| 5278欧美一区二区三区| 亚洲综合一区二区| 天天插天天操| 欧美极品女人的天堂| 五月综合色| 美女超碰978| 激情文学网伊人| 亚州精品一区二区三区香中文字幕在线| 99操视频| 91精品国产综合久久久蜜臀| 国产精品久久发布| 躁躁日曰躁2020| 亚洲色图欧美另类在线| 亚洲图片欧美另类综合免费视频大大香| 欧美一区二区三区成人性生活| 1024午夜激情男人的天堂| 九九九九九九九| 欧美人妻熟女在线| 欧美一区二区三区不卡高清视频| 国产亚洲欧美每日在线| 91精品大奶人妻| 99久久综合| 婷婷五月天久久精品视频一区二区三区 | 欧洲免费一区二| 97亚洲资源| 久久久久921| 91久久婷婷| 欧美激情视频在线一区| 欧美日韩操逼动图| 大香交伊人网| 久久精品夜色国产亚洲AV| 久久视频,这里只有精品| 乱人乱色一区二区三区免费| 欧美夜夜草视频| 狠狠色狠狠色狠狠五月| 日本精品一区三区| 日韩美女,国产传媒,视频一区| 玖玖资源视频一区二区三区| 国产在线观看一区二区三区| 影音先锋中文字幕日本好一区二区| 色情成人五月天| 久久综合精品一区二区三区| 久久三区四区| 欧美另类综合久久| 国产夜夜艹| 久9爱经典视频| 韩国一级做a久久久久| 国产宅男宅女在线观看| 91女人的网站| 中文字幕成人乱码熟女精品国50| 不卡av在线中文字幕| 五月丁香婷婷色| 日本东京热大香蕉a片| 人妻少妇精品久久久久久| 国产精品久久久久久久电影渣男| 免费观看欧美日韩操逼视频| 久久偷偷色综合蜜桃| 91精品无码久久久久久久| 蜜乳AV色欲AVAV无码| 91嫩草欧美| 蜜臀久久久99久久久久| 色乱二区| 亚洲综合贴图91| 中文?日韩?免费?精品| 婷婷视频网| 久久高清无码夜夜操| 午夜人人操| 920日本午夜免费| 亚洲精品熟妇1区2区3区。| 强奸乱伦AV网址| 超碰久久性爱| 久久久久亚洲Av无码专区老牛影视 | 欧美最婬乱婬爆婬性视频 | 久操大香蕉手机视频在线看 | 国产一区二区三区影片| 婷婷久草| 草草网站影院白丝内射| 欧美情色贴图| 在线无码视频| 我中文字幕6区| 91亚洲色人| 国产农村妇女精品一二区| 另类图片综合| 欧美爆操91| 欧美激情性久久久久久| 三级网站超变态精品| 三级精品三级在线观看| 精爱久久| 影音先锋少妇| 国产精品久久久久久9999| 日韩A优精品在线观看| 亚洲揄拍网| 隔壁邻居波多野结衣中文字幕 | 国产精品扒开腿做爽爽爽视频| 97精品综合| 欧美美女视频| 性色高清在线| 逼操网站| 暴力av在线| 国产精品交换一区二区| 在线视频免费观看午夜| 神马久久久久久久久久久久| 色综合久久88色综合久久天天| 亚拍在线| 玖玖在线视频| 精品久久久av无码免费| 美性中文综合网| 无码人妻丰满热妇又大又粗| 大香蕉人妻久久| 嗯嗯嗯好爽| 91色人妻| 婷婷丁香人妻| 国产传媒美日韩av| 国产超碰人人爽人人做| 欧美熟妇精品黑人巨大91| 日韩国语字幕| 日本熟女中文字幕一区| 亚洲色交| 丝袜翘臀后入欧美校园亚洲自拍另类小说一区中文字幕少妇诱惑 | 欧美色图欧美| 天天看人人操屄犊摸阴| 色狠狠综合| 日韩免费在线观看不卡| 超碰97在线色男人??| 五月婷视频| 久久欲| 丝袜美腿操av| 亚州综合色图| 亚洲午夜免费狠狠干| 少妇啪啪自拍| 国产精品片| 麻豆天美在线喷水AV| www五月| 国产精品亚洲一级av第二区| 粉嫩AV一区二区夜夜| 久久视网78| 中文字幕在线日亚州9| 日韩激情电影中文字幕| 亚洲男人天堂2017| 人妻素股| 亚洲永久永久永久永久一级一级一级精品 | 人妻出轨一区二区三区| 人妻中文在线| 殴美在线AⅤ| 天天上日日上日韩精品| 91国产丝袜白虎| 97超碰免费生活| 99啪啪视频| 久久久婷婷| 日韩人成网站在线播放| 久久中文字幕一区不卡| 99国产精品| 久操电影网| 青青草久草AV| 亚洲欧美一区二区不卡视频播放 | 78久久| 超碰久草| 日日干夜夜欢| 大乔未久88一区| 黑人天8A∨高清网站| 超碰亚洲97| 色婷婷五月综合| 激情五月天丁香社区| 在线一道啪| AV天堂国产| AV乱伦国产| 啪啪视频免费在线观看| 国产精品片| 99精品人妻| 亚洲男人天堂2017| 日韩国产中文字幕| 美女一区二区国产精品| 欧美,日韩综合久久| 少妇厨房愉情理伦片bd在线观看 | 欧美白嫩女HD| 色九九九综合| 国产精品不卡一区二区三区| 天天干人人乐| 老妇女91| 偷窥自拍亚洲天堂网爆| 色色色色日本| 日韩无码第3页| 黄片com.| 色牛牛AV| 五月色综合| 丁香激情网| 97精品国产97久久久久久| 精品视频久久久久九九九九9999| 亚洲第一综合| 蜜桃久久久久久久| 国产乱码精品久久久久久| 精品二999| 久久久久久裸体| 欧美激情亚洲| 国产成人久久精品蜜臀| 91在线精品一区二区三区| 草草影院最新网址| 亚洲第一在线视频| 97中文天堂| 超碰人妻久久人妻中文97| 和协影院中文字幕三区| 国产超碰97| 精品福利| 午夜啪啪片| www色色色com| 久久久av爱| 欧美综合传媒| 中文字幕欧美丝袜07资源| 国产精品4p在线观看| 郑州宾馆老熟女露脸啪啪| 99热综合| 久日91在线| 欧洲一区二区| 国产丝袜欧美在线视频| 亚洲免费人妻在| 精品国产网站| 91男女| 91老女人| 久久久亚洲欧美综合| 香蕉在线一区二区三区| 蜜臀va69| 91久久午夜无码鲁丝片久久人妻| 99成人| 激情抓乳插进去啪啪啪日韩| 亚洲有码视频二区| 狠狠色综合网| 日本男人天堂| 视频在线观看免费一区二区三区| www.激情| 91路www| 七月婷婷综合| 黄色片大香蕉| 国产丰满熟夫69mpp| 殴美性天天| yellow网站免费观看日韩高清无码| 综合色99| 美骚妇av高清在线| 96精品久久久久久久久| 午夜欧美女人操逼| 亚州中文字幕超碰97| 久久久一区二区三区麻豆| 一级片在线观看高清无码| 大香樵伊人网| 夫妻AV网站| 午夜超爽| 欧美综合天天| 激情综合五月丁香| x97av| 乱伦a片视频| 亚洲色堂免费视频| 天堂亚洲欧美| 睡产熟女乱伦| 男人的天堂日韩| 国产亚洲性生活视频播放| 国产成人亚洲精品自产在线 | 视频一区二区免费在线| 日本欧美国内在线| 少妇色综合| 日本十八禁免费看污网站| 大奶啊啊好爽| 91综合熟女| 久久女婷| 国产成人五月天丁香花| 白嫩国模丰满一二三区| 国产免费一区| 欧洲成人性爱视频| 有码人妻系列| 国内亚洲高清无码| 天天肏美女| 男人午夜天堂| 天天日B狠狠操| 亚洲色图久久精品蜜| 青青青草原| 亚洲色综合| 久久久久久久久久久精| 中文字幕亚韩| 91久久国产精品| 久久久com| 不卡在线观看视频| 日夜啪电影| 日本视频在线中文字幕| 在线观看十八禁| 9国产超碰| 密臀AV在线| 国产精品女久久久久av爽| 久久综合av| 国产一区二区精品久久99| 在线五区| 免费精品99| 欧美片第一页| 精品无码久久久久| 97人人模人人爽人人| 97ai亚洲| 亚洲丝袜天堂| 欧美日产国产在线成人第一区| 欧美人人天天网| 日韩丝袜二区| 精品一区99999| 亚洲一区中文字幕| www.色五月| 夜夜草天天| 91精品国久久久久久无码| 中文字幕精品资源在线| 日韩有码中文字幕女同性恋| 亚洲av热热色| 大香蕉免费乱伦视频| 久久综合97| 日少妇亚洲版| 久久久亚洲高清不打码| 国产精品对白自产拍| 热久久这里只有精品| 亚洲国产av中文字幕久久| 色踪合AV| 尤物av网站| 一区三区啪啪| 极品欧美一区二区三区| 国产精品高朝久久久久久久| 东京热激情视频一二三区| 综合伊人激情| 60秒不遮不挡| 综合视频91| 亚洲精品久| 国产精品呦一区二区三区| 我要色综合网站| 东京太热久久久| 久久人妇| 天天综合精品| 亚洲午夜福利在线影院| 可免费观看的av毛片中日美韩| 天堂精品一区| 欧美色图私拍91| 国产成人亚洲精品自产在线 | 中文有码第五页| 亚洲精品日日夜夜52| 日韩综合成人免费视频| 欧洲人妻视频| 久热这里| 色悠久久久av| 超碰综合色| 欧美日韩丝袜| 九九久久一区二区伦理| 思思视频免费看网站| 日日不卡av| 日本久久久久久久久久| 好看的久久不射无码影视影院| 亚洲s在线观看| 五月丁香六月激情| 伊人99热| 中文字幕av乱伦| 凸凹视频在线观看| 手机在线播放国产福利| 色天使大香蕉| 99色热| 精品少妇一区二区三区在线视频| 免费公开人人操| 岛国激情视频在线观看| 91综合色噜噜| 色网站导航大全| 91网站18| 亚洲中文字幕在线视频一区二区| 干B网| 色综合天天爱去电影网| 久久久啊啊啊| 色五月av| 欧美极品| 激情小说图片亚洲首页| 久操91视频| 十八禁视频一区二区| 国产亚洲色停停久久99精品91| 97在线观看| 国产性爱强奸乱伦大全| 国产精品又黄又猛又粗| 高清无码久操视频| 日韩精品一区二区日韩| 手机在线中文字幕国产| 亚洲美女自拍偷拍视频| 美国日韩黄色片| 综合久| 美女91网| 色欧美综合| 成年人黄色视频免费| 秋霞一级A片黄色视频| 高潮毛片无遮挡高清免费| 人人操人人插人www| 日韩色欲久久一二三四区| av天堂5| 九九av| 亚洲瓯美色图| 狠狠爱AV| 国产深喉视频一区二区| 四虎午夜影院| 日韩乱伦视频| 美中韩AV综合网| 97公开久久| 日韩射图| 国产成人拍国产亚洲精品| 国产精品无码久久久久2025| 亚洲一区日韩| 欧美不卡在线美女| 秋霞鲁丝午夜无码一区二区三| 青青久久久| 日本在线观看网址| 亚洲成人久久一区二区| 欧美另类色图片| 大香蕉一人在线| 欧美激情高清性猛交| 精品国产av一区二区三区四区入口| 久久亚码| 91亚洲影视| 人妻 中文 日韩| av天天在线观看| 1204金沙人妻懂旧版免费| 日韩三级av片| 国产精品久久久久久久久久梁医生| 中文字幕av乱伦| AV色天香在线| 亚洲色图8| 草莓精品视频在线免费观看| 99久久99九九99九九九| 另类图片亚洲加勒比另类图片亚洲加勒比另类图片亚洲加勒比 | 可免费观看的av毛片中日美韩| 91成人久久| 久草精品热视| 99re黄| 欧美强奸乱能| 91麻豆天美传媒HD| 精品传媒在线一区| 欧美一级A片在线看视频性色| 4141514逼喷水三级片| 中文字幕乱妇免费视频| 日韩欧美国产一区二区三区四区| 亚洲18禁| 婷婷六月色开| 一区二区三区四区在线不卡| 精品日韩人妻精品一二三区| 天堂蜜桃无码视频一区二区| 色97综合中文字幕| 无码精品久久久天天影视| 日韩精品中文字幕二区| 天天日美女的B| av在线观看不卡网站| 99热这里只有精| 91人人操| 任你艹| 色九九九九九九| av天堂精品久久| 91色五月俺来也| 狠狠操,使劲操| 丁香九月激情| 亚洲天堂另类| www.五月天| 78m啪啪啪| 五月色综合| 精产品久久| 丁香激情五月天| 十八禁黄色| 成人夜夜爽| 丰满人妻-区二区三区| 91粉芽高清在线一区二区| 亚春色色| 99热这里| 91在线视频国产网站| 婷婷日韩一区二区三区中文字幕在线| 欧美性生活综合| 天堂资源站| 熟妇操花| av天堂加勒比| 狠狠干综合| 97超碰色色| 玖玖综合色| 日B操| 97精品久久久久中文字幕| 欧美性爱1080p| 91网站视频在线观看| 国产家庭乱伦性爱视频| 人妻素股| 熟女六十路| 992视频一区| 丝袜六区| 亚洲图片婷婷五月天| 亚州国产成人精品女人久久 | 欧美丰满少妇交换91欧美精品| 亚洲国产麻豆一区二区三区| 亚州黄站| 欧插网站| 免费作爱一级视频| www欧美91| 毛片17S| 欧美另类综合久久| 午夜视频久久久| 熟妇人妻一区二区三区| 国产操逼视频在线观看| 欧美成人精品一区二区男人蜜臀 | 超碰视97中文| 久久有码视频| 91逼逼女人91| 色久桃花影院在线观看| 欧美高清91| 欧美熟妇乱码在线一区| 高清无码一区二区三区| yazhouzaixian| 91啪9色| 亚洲 欧美 日韩 国产一区二区 | 中文字幕欧美丝袜07资源| 亚洲精品欧美专业| 日韩中文字幕在线视频观看| 1区2区3区视频| 中文幕97| 一级啊性爱在线视频| 干少妇视频| 成人在线午夜视频一区| 内射白嫩美女| 国产兽交视频在线播放| 亚洲色欧| 国产视频第2页| 97九色人妻| 操逼操操操91| 激情熟女12P| 天天综合色图| 午夜福利区| 大胆91| 国产成人精品日本亚洲语言| a片久久久久久久久久久久| 97伦综合| 情侣操 逼视频99| 色噜噜人妻av 中文字幕| 色色色色网站| 色天堂综合| 精品少妇后入一区二区三区四区人妻巨乳 | 久99| 探花一区在线| 亚洲免费在线探花| 激情五月综合开心五月| 欧美日韩狠狠爱| 国产又长又大又粗的视频| 97爱亚洲综合色| 欧美在线官网| 色色色网站| 综合啪啪| 新版天堂中文资源8在线| 亚洲色图尤物视频| 国产丝袜欧美在线视频| 97超碰9| 无码粉嫩白虎一线天b区| 人妻天天爽夜夜爽2| 青青国产在线拍揄自揄拍| 亚洲综合码| 欧美乱色| 俺去久久| 强奸乱伦av电影| 秋霞影音一区二区三区| 伊人久久综合精品欧美| 最近2018中文字幕在线高清第一页| 国产精品久久久久久久久久久久| 伊人国产AV| 亚洲狠狠入| 九九热精品视频六| 五月天精品| 欧美韩日精品99综合| 玖玖大干人妻| 超碰在线日韩一区| 免费视频观看60秒| 亚洲精品第一| 中文字幕免费看大片| 多乙久久久久久| 日韩性爱视频免费在线| 欧美亚洲中文字幕| 美女被艹尤物视频| 99热66| 偷拍伦理视频| 久艹伊人精品综合在线| 午夜天天碰综合视频| 色综合一区二区三巨| 在线啊啊啊啊| 香港成人一级视频在线青青草| 久久蜜色情在线视频xxx免费观看| 精品一久久久| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 91网站18| 亚洲国产欧美一区二区潘金莲| 久久直播国产| 一区在线国产播放| 蜜桃色色网站视频三区| 久久久工口| 91 综合 色| 精品人妻一区二区三区不卡断| 午夜男人的天堂| 国产精品久久妻无码网站| 18禁精品网站在线看| 亚洲第一在线视频| 人妻天天爽夜夜爽爽| 日韩三级在线观看mp4| AV男人天堂网| 97欧美精品| 国产亚洲精品美女久久久| 亚洲精品无码少妇久久| 日日干夜夜干| 金典av| 欧美翘臀视频网站一区二区三区| aaa亚无码专区| 小情侣高清国产在线视频| 防屏蔽在线视频| 欧美91网站| 97超碰中文在线| 最新中文字幕在线亚洲| 日韩一级二级| 精品一区二区三区蜜桃臀www| 9久9久9久9久视频网站| a片在线播放| 久久这里只精品99re66图| 人妻日日夜夜精品 | 婷婷五月丁香五月| 丝袜视频一区二区在线播放国产中文| 欧美少妇高潮视频| 视频一区二区免费在线| 中文字幕精品亚洲熟女| 中文?日韩?免费?精品| 国产精品久久久久久片| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 手机看片1025| 97 国产一区| 91熟女丨老女人| 少妇一区二区三区高速| 校园春色综合| 免费视频观看60秒| 性爱视频无打码在线观看| 亚洲一区深夜| 久偷拍欧美日韩三区| 绯色一区二区三区不卡少妇| 色情五月丁香| 青木玲在线不卡| 9国产超碰| 无码人妻一区二区一牛影视| 加勒比久久av| 无码操逼网| 天美一二三在线观看Av| 夜夜夜夜久久久久| 一级久久性爱视频| 久久久久久中文版| 亚欧高清| 亚洲国产综合久久天堂| 色综合大香蕉| 曰韩无码777| 精久久久| 丰满人妻无码一区二区三区| 夜夜狠狠躁日日躁色视频| 久久久久亚洲Av无码专区老牛影视| 99re在线视频| 先锋激情∨在线视频播放| 9久超碰| 亚洲 欧美综合| 日韩久久三区| 亚洲激情在线| 色色99| 欧美96精品在线| 婷婷五月天激情小说| 综合少妇网| 国产 码在线成人网站| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 天美传媒精品久久视频| 中文字幕一区电影在线观看| 亚州人妻| 能在线播放的国产三级| 色偷综合| 操逼操逼逼操操逼91 | 欧美韩日精品资源| 人干人人人操人人摸| 福利天堂| 免费黄色A片| 欧美午夜熟妇黑人精品91| 欧美婷婷五月天| 无套后入双马尾| 神马精品视频| 大香蕉97久久| av网站国产主播在线| 夜夜騷av、一區二區| 人妻干天天| 91操人| 激情婷婷五月天| 久久这里只有精品9| 宅男91视频在线播放| 激情抓乳插进去啪啪啪日韩| 91熟女综合| 精品亚洲国产成人AV制服丝袜| 综合色欧美| 黄色大片一区二区密桃丝袜| 日韩操逼性鲍| 嗯~啊~轻一点 视频| 色婷婷香蕉| 91av熟女人妻| 久久人妻无码毛片A片麻豆| 最新日韩黄片| 久久加勒比| 麻豆人妻少妇在线免费观看| 人人操人人摸人人看人人插| 99精品高潮| 综合久久欧美| av网站在线看| 99re在线视频国产| 99热最新网址| 日韩无码三级影院| 亚洲图片 欧美电影| 骚乳在线| 日韩一级片在线看| 日韩性爱一级片| 亚洲九九视频在线观看| 天天欧美色| 夜嗨影院| 大香蕉中文| 欧美最大综合网| 色穴精品| 久久久亚洲高清不打码| 欧洲亚洲少妇| 天天情欲宗合网| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 99re这里只有精品2| 久久久久久性爱视频| 国内自拍 日韩激情 99| 五月亭亭六月丁香| 90后后入| 97这里只精品| 嗯啊不要在线| 无码乱人伦中文视频| A级片日韩欧美国产欧美视频精选观看 | 我中文字幕6区 | 玖色av| 亚码人妻| 欧美日韩情色一区二区| 一个人免费HD91视频| A一区片| 成人情色综合网| 久久久久久9999| 国产白领连续中出在线观看| 91一起操| 欧美经典一区二区三区 | www.色婷婷| 国产区性爱在线视频秋霞豆| 国产一区二区成人av在线播放| 欲色综合| 亚洲丝袜制服国产91_国语字幕免费观看完整版下载第5集_ | 久久久精品91八戒| 99re免费| 91制服丝袜中文字幕| 9 9无尺码天堂网| 欧美在线l亚洲| 午夜天堂网| 亚洲男人bt天堂| 午夜丁香婷婷| 狠狠综合网| 亚洲国产成人精品无码专区| 综合久久少妇中文字幕| 麻豆亚洲AV成人无码久久精品| 人人澡人人干| 99操碰| 成人三级片无码| 99久久婷婷丁香| 亚洲囯产精品女人久久久| 日韩黄片影院| 放黄片放3级黄片没穿衣服| 综合久久99| 国产熟妇 码视频户外直播| 亚洲日韩精品一区二区| 欧美同性恋 的搜索结果 - 91n| 99这里都是精品| 欧美在线干| 亚洲麻豆18发?| 少妇人妻在线| av天堂加勒比| 91 天天综合| 啊啊啊啊好疼| 男人天堂网址| se吧提供91精品国产91久久久久久| 中文字幕一区二区视频在线观看 |