日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

多粒度評(píng)估長(zhǎng)視頻段落描述:CLIP-CC-Bench如何破解視頻理解難題

多粒度評(píng)估長(zhǎng)視頻段落描述:CLIP-CC-Bench如何破解視頻理解難題 你拿一段5分鐘的視頻丟給主流多模態(tài)大模型讓它把內(nèi)容完整描述出來(lái)。輸出可能是一段流暢的段落讀起來(lái)幾乎沒(méi)有破綻但你越對(duì)照視頻越覺(jué)得不對(duì)勁某個(gè)關(guān)鍵行為被一筆帶過(guò)某個(gè)時(shí)間點(diǎn)上的因果順序被寫反。這種體驗(yàn)很常見也是CLIP-CC-Bench這類新基準(zhǔn)想解決的問(wèn)題——長(zhǎng)視頻段落描述的評(píng)估到底應(yīng)該怎么設(shè)計(jì)模型并不是簡(jiǎn)單地“沒(méi)看懂”而是評(píng)估粒度從一開始可能就不太對(duì)。最近看到一個(gè)新的基準(zhǔn)名字進(jìn)入視野CLIP-CC-Bench。從名字看它沿用了CLIP的語(yǔ)義對(duì)齊思路目標(biāo)落在長(zhǎng)視頻段落描述評(píng)估上并且明確把“多粒度”作為核心屬性。這類工作真正想解決的不是“模型能不能描述視頻”而是“我們能不能在正確的粒度上評(píng)價(jià)模型”。下面把這個(gè)問(wèn)題拆開講。1. 長(zhǎng)視頻段落描述評(píng)估難在哪里1.1 不是“能不能理解”的問(wèn)題而是“從哪個(gè)尺度理解”的問(wèn)題我們經(jīng)常把視頻語(yǔ)言模型評(píng)測(cè)想象成一道有點(diǎn)像“看圖說(shuō)話”的題目給模型看一段視頻讓它輸出一段文字然后拿這段文字和人工寫的參考描述比一下相似度。但長(zhǎng)視頻場(chǎng)景下這個(gè)思路會(huì)很快失效。原因在于一段5分鐘的視頻不是一個(gè)均勻的輸入。它里面可能有場(chǎng)景切換、鏡頭運(yùn)動(dòng)、人物進(jìn)出、事件因果、轉(zhuǎn)場(chǎng)與停頓。模型不是只看一幀也不是只看一個(gè)鏡頭而是需要把時(shí)間軸上的視覺(jué)信息整合成一段描述。這時(shí)候“理解”這個(gè)概念被分成了好幾層它能不能判斷視頻里發(fā)生了什么能不能判斷這些事發(fā)生在哪個(gè)時(shí)間段能不能把這件事與該事件前后的狀態(tài)聯(lián)系起來(lái)能不能用自然語(yǔ)言把這種關(guān)系表達(dá)出來(lái)?;\統(tǒng)問(wèn)一句“描述得怎么樣”回答不了這些問(wèn)題。所以更準(zhǔn)確的說(shuō)法是長(zhǎng)視頻段落描述評(píng)估難在“尺度錯(cuò)配”。模型輸出的是整段視頻的一段話但人類在評(píng)價(jià)時(shí)會(huì)自動(dòng)關(guān)注具體段落和具體事件。比如你看完某段描述發(fā)現(xiàn)“把前半段的物體安到了后半段的場(chǎng)景里”你其實(shí)是在用“時(shí)間區(qū)間”去對(duì)照模型輸出。但傳統(tǒng)評(píng)估指標(biāo)通常沒(méi)有時(shí)間區(qū)間這個(gè)概念它只會(huì)告訴你“這兩個(gè)句子語(yǔ)義上有多少重合”。這就會(huì)帶來(lái)很奇怪的現(xiàn)場(chǎng)模型漏掉一段關(guān)鍵內(nèi)容但因?yàn)樗哑渌糠终f(shuō)得很好最終分?jǐn)?shù)仍然不低。1.2 整段式評(píng)估為什么容易掩蓋關(guān)鍵錯(cuò)誤把“一個(gè)視頻”作為最小評(píng)估單元是很多評(píng)測(cè)的默認(rèn)做法。這樣做的好處是簡(jiǎn)單、成本低、統(tǒng)計(jì)方便。但壞處也很明顯信息被大量平均化。舉個(gè)例子一段視頻里有三個(gè)主要事件先是運(yùn)動(dòng)員做準(zhǔn)備活動(dòng)然后進(jìn)行比賽最后頒獎(jiǎng)。如果模型只描述了準(zhǔn)備活動(dòng)和頒獎(jiǎng)漏掉了比賽本身整段描述讀起來(lái)依然通順句子層面的相似度也可能不錯(cuò)。但你從真實(shí)使用角度去看這個(gè)輸出是失敗的因?yàn)橛脩糇钕肟吹降氖潜荣愡^(guò)程中的關(guān)鍵事件。整段評(píng)估無(wú)法暴露這種失敗因?yàn)樗鼪](méi)有要求模型在正確的位置輸出正確的描述。更麻煩的是不同的模型可能在“漏”的地方不一樣。有的模型擅長(zhǎng)捕捉動(dòng)作類事件卻忽略物體類細(xì)節(jié)有的模型能給出準(zhǔn)確的時(shí)間順序但對(duì)視覺(jué)外觀描述很泛。如果你只用一個(gè)總分去比較兩個(gè)模型你看到的可能是“差不多”但實(shí)際它們的錯(cuò)誤模式差異很大。而只有建立以“段落”“事件”為單位的評(píng)估才能把這些差異暴露出來(lái)。這也是為什么CLIP-CC-Bench這類工作要把“多粒度”放在臺(tái)面上。2. 多粒度基準(zhǔn)設(shè)計(jì)的基礎(chǔ)先把“粒度”拆清楚2.1 視頻級(jí)、段落級(jí)、事件級(jí)三種粒度的差異“多粒度”聽起來(lái)是一個(gè)很高級(jí)的詞但本質(zhì)上并不復(fù)雜它指的不是讓模型輸出任意長(zhǎng)度的描述而是在評(píng)估時(shí)把視頻內(nèi)容劃分成不同尺度的單元再讓模型輸出對(duì)應(yīng)尺度的描述。常見的有三種視頻級(jí)整段視頻對(duì)應(yīng)一段完整描述。適合回答“這個(gè)視頻大概講了什么”用于推薦、檢索、摘要等場(chǎng)景。段落級(jí)按鏡頭、場(chǎng)景或時(shí)間軸切成若干段落每段對(duì)應(yīng)一段描述。適合回答“每個(gè)階段分別發(fā)生了什么”用于視頻剪輯、內(nèi)容歸檔、分鏡理解。事件級(jí)以某個(gè)語(yǔ)義完整的事件為單元比如“一個(gè)人走進(jìn)房間”“兩個(gè)人開始交談”“屏幕上出現(xiàn)了一串?dāng)?shù)字”。適合回答“具體事件的時(shí)間、位置、參與者”用于視頻問(wèn)答、目標(biāo)跟蹤、內(nèi)容審核等??梢赃@樣理解視頻級(jí)是粗顆粒段落級(jí)是中顆粒事件級(jí)是細(xì)顆粒。三者的評(píng)估重點(diǎn)不同。視頻級(jí)關(guān)注整體語(yǔ)義覆蓋段落級(jí)關(guān)注時(shí)間邊界和內(nèi)容連續(xù)性事件級(jí)關(guān)注事件元素是否齊全、時(shí)序是否準(zhǔn)確。2.2 為什么標(biāo)題偏偏強(qiáng)調(diào)“多粒度”而不是“多任務(wù)”有些評(píng)測(cè)同時(shí)包含很多個(gè)任務(wù)比如視頻問(wèn)答、視頻摘要、視頻分類、視頻檢索它們也叫“多任務(wù)基準(zhǔn)”。但CLIP-CC-Bench強(qiáng)調(diào)的“多粒度”不是任務(wù)種類的增加而是評(píng)估容器的變化。關(guān)鍵差別在于多任務(wù)評(píng)估問(wèn)的是“模型能不能做不同的事情”多粒度評(píng)估問(wèn)的是“模型對(duì)同一段內(nèi)容能不能在不同尺度上都具備穩(wěn)定的理解”。后者的難度更高因?yàn)槟P涂赡茉谀骋粋€(gè)粒度上表現(xiàn)很好在另一個(gè)粒度上卻崩潰。比如一個(gè)模型可以輕松回答“這個(gè)視頻里的人在做什么運(yùn)動(dòng)”但你讓它按時(shí)間順序描述“第40秒到第70秒發(fā)生了什么”它可能就會(huì)卡殼因?yàn)橹虚g有場(chǎng)景切換模型未必能把視覺(jué)信息和對(duì)應(yīng)時(shí)間區(qū)間對(duì)齊。所以設(shè)計(jì)一個(gè)多粒度基準(zhǔn)本質(zhì)上是把“視頻理解能力”切成可分別觀測(cè)的軸時(shí)間定位能力、段落切分能力、事件抽取能力、文本生成能力。它不是在給模型出一道更難的題而是在給模型做一次“能力體檢”。這也是為什么這類基準(zhǔn)的價(jià)值不能只用榜單分?jǐn)?shù)來(lái)衡量而是要看它能不能幫助研究者找到模型的薄弱層。3. CLIP-CC-Bench的出現(xiàn)它試圖解決什么3.1 CLIP語(yǔ)義空間與長(zhǎng)視頻評(píng)估的結(jié)合點(diǎn)CLIP這類模型的核心能力是把圖像和文本映射到同一個(gè)向量空間。這個(gè)東西在圖像分類、圖文檢索里已經(jīng)用得很多了很多人也很熟悉一段文本和一張圖在語(yǔ)義相近時(shí)向量距離會(huì)拉近。但要把它用到長(zhǎng)視頻段落描述評(píng)估上不能只是把視頻抽幾幀、算個(gè)相似度就結(jié)束。因?yàn)橐曨l有長(zhǎng)度、有時(shí)間軸、有段落邊界一個(gè)段落描述對(duì)應(yīng)的是某一段時(shí)間窗口內(nèi)的視覺(jué)信息而不是整個(gè)視頻的平均語(yǔ)義。CLIP-CC-Bench如果把CLIP語(yǔ)義空間引入評(píng)估大概率是把它當(dāng)作“匹配工具”把模型生成的段落描述與某個(gè)視頻區(qū)間的參考描述做語(yǔ)義匹配同時(shí)判斷這個(gè)區(qū)間定位準(zhǔn)不準(zhǔn)。這個(gè)設(shè)計(jì)思路的進(jìn)步在于評(píng)估不再只是“文本和文本比”而是“文本和視頻時(shí)間段比”。它把大模型輸出的描述放回視頻時(shí)間軸里做對(duì)齊而不是懸浮在句子上空。這樣能回答比“像不像”更關(guān)鍵的問(wèn)題“說(shuō)得對(duì)但是不是對(duì)的這一段時(shí)間”這個(gè)問(wèn)題在長(zhǎng)視頻場(chǎng)景中非常重要。比如一個(gè)模型把“打完球之后喝水”寫成了“開始打球時(shí)喝水”句子語(yǔ)義上可能仍然高度相關(guān)但時(shí)間定位錯(cuò)了這在實(shí)際應(yīng)用里屬于事實(shí)性錯(cuò)誤。3.2 段落描述評(píng)估的關(guān)鍵閉環(huán)生成、定位、匹配、打分圍繞CLIP-CC-Bench這樣的基準(zhǔn)一個(gè)完整的評(píng)估流程大致應(yīng)該是一個(gè)閉環(huán)而不是簡(jiǎn)單的“輸入視頻—輸出分?jǐn)?shù)”兩條線。我一般會(huì)把閉環(huán)拆成四步生成段落描述模型輸出一段或若干段自然語(yǔ)言描述。定位時(shí)間區(qū)間判斷這段描述對(duì)應(yīng)視頻中的哪個(gè)段落通常由標(biāo)注數(shù)據(jù)或模型預(yù)測(cè)提供時(shí)間邊界。與參考描述匹配把模型輸出與人工參考描述做語(yǔ)義匹配例如在CLIP語(yǔ)義空間中計(jì)算相似度也可以用文本匹配模型輔助。給出多粒度得分分別計(jì)算視頻級(jí)、段落級(jí)、事件級(jí)的表現(xiàn)并輸出錯(cuò)誤類型。第2步往往最容易被忽略。很多評(píng)測(cè)默認(rèn)模型輸出的描述是對(duì)應(yīng)整段視頻的但長(zhǎng)視頻里模型輸出的每句話未必覆蓋整段視頻可能只覆蓋某一段。如果不做時(shí)間定位后面所有打分都會(huì)失真。CLIP-CC-Bench把“段落”寫進(jìn)名稱里也是在提示這個(gè)關(guān)鍵評(píng)估模型輸出時(shí)要明確這句話到底寫的是哪個(gè)時(shí)間段的內(nèi)容。3.3 注意不要把一個(gè)新基準(zhǔn)神化每當(dāng)一個(gè)“新基準(zhǔn)”出現(xiàn)社區(qū)里很容易出現(xiàn)兩種傾向一種是“太好了以后就用它了”另一種是“又一個(gè)刷榜玩具”。這兩種都過(guò)于極端。首先CLIP-CC-Bench能提供一個(gè)相對(duì)標(biāo)準(zhǔn)化的評(píng)估框架這當(dāng)然是好事。但一個(gè)新基準(zhǔn)能不能在社區(qū)中真正普及還取決于很多因素?cái)?shù)據(jù)規(guī)模、標(biāo)注質(zhì)量、語(yǔ)言覆蓋面、公開接口、評(píng)測(cè)成本以及它能不能經(jīng)受住跨模型跨場(chǎng)景的穩(wěn)定性檢驗(yàn)。這些信息要看論文和開源倉(cāng)庫(kù)的具體說(shuō)明不能只看標(biāo)題就下結(jié)論。其次即使一個(gè)模型在某個(gè)多粒度基準(zhǔn)上拿了高分也不代表它在所有長(zhǎng)視頻場(chǎng)景里都好用?;鶞?zhǔn)數(shù)據(jù)通常來(lái)自特定視頻分布可能是開放域視頻也可能是某個(gè)垂直領(lǐng)域標(biāo)注者對(duì)“事件邊界”的理解也可能有差異。所以真正理性的用法是把這類基準(zhǔn)當(dāng)作“參考系之一”和具體業(yè)務(wù)數(shù)據(jù)結(jié)合著看。別急著把宣傳語(yǔ)當(dāng)成能力保證。4. 從評(píng)測(cè)視角看多粒度基準(zhǔn)應(yīng)該怎么用4.1 先跑通一條小樣本評(píng)估流程不管CLIP-CC-Bench未來(lái)提供的是離線工具包還是在線評(píng)測(cè)接口使用方式都應(yīng)該遵循同一個(gè)原則先跑小樣本再?zèng)Q定要不要擴(kuò)量。直接在全量數(shù)據(jù)集上跑容易遇到數(shù)據(jù)格式不兼容、接口調(diào)用失敗、輸出粒度不符合要求、參考標(biāo)注不能完全對(duì)齊等問(wèn)題。尤其當(dāng)模型輸出是自由文本時(shí)清洗和歸一化的成本會(huì)比想象中高。如果是自建評(píng)測(cè)流程我建議先準(zhǔn)備10到20個(gè)代表性視頻。不需要追求數(shù)量但要覆蓋不同類型的長(zhǎng)視頻有人物對(duì)話、有場(chǎng)景切換、有長(zhǎng)時(shí)間無(wú)動(dòng)作畫面、有多個(gè)并行事件。然后讓模型分別生成視頻級(jí)描述和段落級(jí)描述再與標(biāo)注好的參考段落對(duì)比。這一步的目的不是測(cè)出精確數(shù)值而是驗(yàn)證評(píng)估鏈路是否通暢。你以為的“參考描述”可能和模型輸出結(jié)構(gòu)差別很大比如參考描述按時(shí)間順序逐條列出模型輸出卻是連貫敘述這就需要在匹配前做句子切分或時(shí)間戳映射。流程跑順之后再擴(kuò)大樣本否則遇到大量邊界情況時(shí)你很難分清是模型能力問(wèn)題還是評(píng)估工具問(wèn)題。4.2 評(píng)估結(jié)果要拆著看不是只有一個(gè)總分多粒度基準(zhǔn)最大的一個(gè)好處是可以把“一個(gè)總分”拆成“一組分?jǐn)?shù)”。使用者在看結(jié)果時(shí)也要習(xí)慣按維度去看。評(píng)估維度典型問(wèn)題推薦指標(biāo)視頻級(jí)描述整體語(yǔ)義是否覆蓋核心內(nèi)容文本相似度、關(guān)鍵詞覆蓋率段落級(jí)描述每個(gè)段落是否有對(duì)應(yīng)描述、描述是否準(zhǔn)確平均段落相似度、段落邊界一致性事件級(jí)描述具體事件是否被提到、事件元素是否齊全事件召回率、元素準(zhǔn)確率時(shí)間定位描述對(duì)應(yīng)的時(shí)間區(qū)間是否與標(biāo)注一致時(shí)間重疊率、邊界誤差生成質(zhì)量句子是否通順、是否存在冗余和幻覺(jué)語(yǔ)言流暢度、人工可讀性評(píng)分如果你只告訴我“CLIP-CC-Bench得分是0.7”我沒(méi)有辦法判斷模型到底強(qiáng)在哪里。但如果告訴我“這個(gè)模型在視頻級(jí)描述上得分很高但事件級(jí)召回率非常低”我立刻知道它擅長(zhǎng)宏觀概括卻缺乏對(duì)具體事件的捕捉能力。這種能力畫像才是評(píng)估的最終價(jià)值。4.3 單次對(duì)齊檢查理解時(shí)間邊界、內(nèi)容邊界和輸出邊界使用多粒度評(píng)估時(shí)最容易忽略的一項(xiàng)是“對(duì)齊檢查”。簡(jiǎn)單來(lái)說(shuō)就是隨機(jī)抽取若干條模型輸出人工判斷它到底有沒(méi)有在正確的時(shí)間邊界內(nèi)描述正確的內(nèi)容。這一步聽起來(lái)很原始但非常有效。具體做法是取一個(gè)模型輸出句子記錄它是從哪一段視頻中生成的然后播放那一段視頻人工判斷這句話是否準(zhǔn)確、是否完整。如果這句話看起來(lái)像是一段通用描述放進(jìn)任何視頻段落都能成立那就需要注意了——模型可能是在“打太極”并沒(méi)有真正理解具體內(nèi)容。這種案例的出現(xiàn)頻率比分?jǐn)?shù)更能說(shuō)明問(wèn)題。多粒度基準(zhǔn)強(qiáng)調(diào)“段落”本質(zhì)上就是想通過(guò)更細(xì)的評(píng)估單元把這類“正確廢話”趕出高分區(qū)間。5. 在多模態(tài)模型上做段落評(píng)估的落地建議5.1 構(gòu)建自己的評(píng)估集時(shí)先解決三類標(biāo)注不一致如果你不打算直接使用現(xiàn)成基準(zhǔn)而是想為自己的項(xiàng)目做一套長(zhǎng)視頻段落評(píng)估集最先要面對(duì)的問(wèn)題不是模型而是標(biāo)注。標(biāo)注不一致會(huì)直接影響評(píng)估結(jié)果而且這種問(wèn)題在小樣本階段不太明顯一旦擴(kuò)量就會(huì)變成災(zāi)難。第一類是段落邊界不一致。兩個(gè)標(biāo)注者對(duì)“從第幾分幾秒開始算一個(gè)新段落”往往會(huì)有不同意見。有人按鏡頭切換有人按語(yǔ)義結(jié)束有人按說(shuō)話人變化。如果標(biāo)注規(guī)范不明確模型輸出的段落就很難和參考對(duì)齊。建議在標(biāo)注前約定好切分規(guī)則優(yōu)先按鏡頭切換其次按語(yǔ)義場(chǎng)景再按事件完整性。第二類是描述詳略不一致。同樣一個(gè)事件有人寫成“一個(gè)人走進(jìn)房間”有人寫成“一個(gè)穿藍(lán)色衣服的男人推開門走進(jìn)左邊的房間”。兩種描述都對(duì)但信息量差距很大。如果不控制描述層級(jí)相似度計(jì)算會(huì)很不穩(wěn)定。建議為每個(gè)段落規(guī)定參考描述的粒度上限比如事件級(jí)描述不超過(guò)兩個(gè)短句段落級(jí)描述不超過(guò)三個(gè)短句。第三類是時(shí)間戳與內(nèi)容不一致。標(biāo)注者可能把描述內(nèi)容對(duì)應(yīng)到了錯(cuò)誤的時(shí)間區(qū)間。時(shí)間戳一旦錯(cuò)誤后續(xù)所有“時(shí)間對(duì)齊”指標(biāo)都會(huì)失真。建議在標(biāo)注完成后增加一輪“時(shí)間戳抽檢”隨機(jī)抽取10%的數(shù)據(jù)由第二人校核。多粒度評(píng)估能力越細(xì)對(duì)標(biāo)注一致性的要求就越高這一點(diǎn)繞不過(guò)去。5.2 一個(gè)可復(fù)用的多粒度評(píng)估流程基于前面那些討論可以沉淀出一個(gè)相對(duì)通用的流程適用于大多數(shù)長(zhǎng)視頻段落描述評(píng)估任務(wù)定義評(píng)估目標(biāo)先明確你是要評(píng)估視頻級(jí)摘要、事件定位還是段落描述。不同目標(biāo)決定了你要用什么粒度。準(zhǔn)備參考標(biāo)注至少包含兩樣?xùn)|西文本描述和時(shí)間區(qū)間。做不到雙人標(biāo)注時(shí)也要用程序做一次邊界一致性校驗(yàn)。統(tǒng)一模型輸入輸出格式明確模型輸入是不是完整視頻、有沒(méi)有額外的時(shí)間提示模型輸出是自由文本還是結(jié)構(gòu)化JSON。這會(huì)影響后續(xù)解析。做語(yǔ)義匹配用CLIP或類似模型計(jì)算候選描述與參考描述的相似度。如果候選輸出包含多個(gè)句子可以先按句切分再與參考段落做最大化匹配。計(jì)算時(shí)間對(duì)齊指標(biāo)給每個(gè)匹配上的段落計(jì)算時(shí)間重疊率判斷模型是否把描述放到了正確的時(shí)間段。人工抽檢錯(cuò)例隨機(jī)抽取高分和低分樣本各若干條人工分析錯(cuò)誤是發(fā)生在“沒(méi)看到”“沒(méi)定位”“沒(méi)表達(dá)”中的哪一層。如果CLIP-CC-Bench后續(xù)提供了評(píng)測(cè)接口這個(gè)流程大部分可以自動(dòng)化但第1步和第6步最好不要省。很多團(tuán)隊(duì)拿到一個(gè)現(xiàn)成基準(zhǔn)就直接開跑最后只得到一個(gè)分?jǐn)?shù)完全不知道分?jǐn)?shù)背后的含義。這個(gè)習(xí)慣不太好。5.3 指標(biāo)之外還要看錯(cuò)例類型評(píng)估結(jié)果出來(lái)之后會(huì)出現(xiàn)幾種常見的錯(cuò)例類型。第一種是“位置正確但表述模糊”模型看到了那個(gè)事件但描述得泛泛而談。第二種是“表述流暢但位置錯(cuò)誤”模型寫了一段很像回事的話但它對(duì)應(yīng)的時(shí)間區(qū)間完全不對(duì)。第三種是“事實(shí)混雜”把不同段落的事件拼在一起單獨(dú)看每個(gè)句子都說(shuō)得通放到時(shí)間軸上就漏洞百出。前兩種還比較好發(fā)現(xiàn)第三種最隱蔽。因?yàn)槿绻豢磫尉淠憧赡苡X(jué)得模型理解得不錯(cuò)只有把它放回時(shí)間軸上做段落級(jí)對(duì)比才會(huì)發(fā)現(xiàn)事件歸屬混亂。這也是多粒度評(píng)估相對(duì)單粒度評(píng)估的一個(gè)核心優(yōu)勢(shì)它逼著模型和評(píng)測(cè)者都必須面對(duì)“時(shí)間位置”這件事。如果你在自己的評(píng)測(cè)里發(fā)現(xiàn)大量第三種錯(cuò)例那說(shuō)明模型的長(zhǎng)視頻上下文建模還是有明顯短板不要再被整段描述的流暢度迷惑。6. 回到主判斷多粒度基準(zhǔn)改變的不是測(cè)評(píng)方法而是對(duì)長(zhǎng)視頻模型的認(rèn)知方式6.1 從“模型能描述視頻”走向“模型能不能在正確的時(shí)間粒度上描述”CLIP-CC-Bench這個(gè)名字本身不是最重要的。重要的是它背后代表的一類趨勢(shì)長(zhǎng)視頻模型評(píng)測(cè)開始從“整體語(yǔ)義是否接近”走向“分段、定位、匹配、驗(yàn)證”的精細(xì)路徑。這意味著我們對(duì)一個(gè)視頻語(yǔ)言模型的認(rèn)知方式會(huì)發(fā)生改變。以前我們習(xí)慣問(wèn)“這個(gè)模型看得懂視頻嗎”現(xiàn)在更準(zhǔn)確的問(wèn)題是“它在事件級(jí)、段落級(jí)、視頻級(jí)上分別表現(xiàn)如何”。一個(gè)模型可能在宏觀摘要上很優(yōu)秀卻在時(shí)間定位上一塌糊涂另一個(gè)模型可能事件抽取能力很強(qiáng)但生成摘要時(shí)組織混亂。沒(méi)有多粒度評(píng)估這兩種模型會(huì)在同一個(gè)總分上打平。有了多粒度評(píng)估它們的差異會(huì)立刻浮現(xiàn)。這種變化不僅影響研究者也會(huì)影響普通使用者的選型判斷。當(dāng)你要給一個(gè)長(zhǎng)視頻處理系統(tǒng)接入模型時(shí)你不能只看演示視頻里的驚艷效果而要看它在你關(guān)心的那個(gè)粒度上是否穩(wěn)定。如果你需要按鏡頭生成描述那么段落級(jí)和時(shí)間對(duì)齊指標(biāo)就比總分更重要如果你只是需要視頻標(biāo)題視頻級(jí)指標(biāo)就足夠。多粒度基準(zhǔn)提供的就是這種“按需查看能力”的便利。6.2 下一步最該做的事情如果你對(duì)CLIP-CC-Bench感興趣下一步不是急著去跑榜而是先回到自己的實(shí)際場(chǎng)景里想一想你最需要評(píng)估的長(zhǎng)視頻能力是哪一個(gè)粒度是整段視頻的摘要還是某個(gè)時(shí)間區(qū)間內(nèi)的動(dòng)作描述你現(xiàn)有的評(píng)估流程能不能回答“模型是在正確的時(shí)間段里描述了正確的內(nèi)容”這個(gè)問(wèn)題如果答案還不清晰建議先用手里的幾段視頻和現(xiàn)成多模態(tài)模型跑一次小規(guī)模人工對(duì)照。不需要復(fù)雜的基準(zhǔn)工具只需要一個(gè)人、幾段帶時(shí)間戳的視頻、一份簡(jiǎn)單標(biāo)注模板就能看出很多問(wèn)題。等你想明白了粒度、時(shí)間邊界、參考描述格式這些基礎(chǔ)問(wèn)題再去接觸CLIP-CC-Bench這樣的多粒度基準(zhǔn)收獲會(huì)完全不同。工具會(huì)更新基準(zhǔn)會(huì)迭代但“先定義清楚你在評(píng)價(jià)什么能力再選擇評(píng)價(jià)尺度”的思路不會(huì)過(guò)時(shí)。長(zhǎng)視頻段落描述評(píng)估這件事表面上是在考模型實(shí)際上也是在考評(píng)測(cè)設(shè)計(jì)者對(duì)人機(jī)交互邊界的理解。把粒度想清楚比多刷幾個(gè)高分榜單更重要。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
又黄又爽在线观看视频 | 乱欲视频| 国产精品ww久久| 丰满人妻-区二区三区免费看 | 动漫区日韩区欧美区| 日本999精品视频| 亚洲人在线| 九九九久久久久| av72网| 夜夜嗨一区二区三区三州加勒比| 蜜桃久久一区二区| 26uuu性| 国产超碰| baisiav| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 99激情视频| 伊人色综合超碰| 久久97超碰香蕉| 熟妇无码视频三区| 91久久久久久久久18| 无码国产Av| 欧美在线视频99| 91欧美偷拍| 日韩精品第3页| 午夜福利合集| 97资源视频| 大屁股xxxxx| 色婷婷丁香五月| 青青操在线亚洲视频观看欧美在线 | 天天射夜夜| 少妇蹲下露出大唇5| 琪琪精品免费一区二区三区 | 久久99精品九九久久久婷婷| 亚洲熟妇图片| 久久精品国产97欧美精品亚洲 | 国产粉嫩出水在线播放| www.色综合| 99成人| 亚洲精品 超碰| 亚洲系列欧美| 亚洲天堂一区二区久久| 天天操av懂色| 蜜臀一区二区三区亚洲最新章节在线观看 - 高清蜜臀一区二区三区亚洲全集播放 | 一级乱伦网站| 九久9精品| sss视频华人在线| 另类欧美| 暖暖精品二区三区观看| 嫩草伊人久久精品| 黑丝制服中文字幕 | 十八禁视频一区二区| 五月天婷婷小说| 狠狠色一区二区中文字幕| 亚洲精品97p| 国产亚洲深夜激情| 久久久久久大| 色欲av国内精品久久久久久| 欧美精品999| 情色av电影| 葡萄牙性视频一二区| 日本高清视频xxxx| 国产精品乱人伊人网| 久热精品在线| 日韩无码专区| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 2019亚洲男人天堂| 久久成人国产精品| 美女久久久久久久| 极品另类| 九九热精品在线| 激情四射婷婷六月天| 51久久夜色精品国产麻豆| 久久久草成人网站久久久草成人久久久草久久久| 青草园大香蕉| 97在线播放 | 夜夜夜久久| 九九热re99re6在线精品| 黄色片大香蕉| 搡老熟女国产1000部| 一级成人性爱| 都市激情人妻一区二区青青操视频| 操国产高清| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 天天日天天操天天射河南省| 精品免费一区二区三区在线亚洲人成| 亚洲资源站| 国产一区二区啪啪视频| 91精品操美女| 97久久久| 60秒不遮不挡| 99热这里只有精| 91操熟女| 91在线限制级| 久久久久亚洲三级电影| 欧美日韩大陆黑人少妇99| 精品人妻视频入口| 麻豆婷婷成人一二三| 国产综合久久久麻桃个| 97精品一二区| 波多野结衣之双飞调教在线播放| wwe 天天干.com| 韩国免费播放一级毛片| 北京美女一区二区| 天天上日日上日韩精品| 尤物av网站| 日韩欧美亚欧在线视频| 国产第11页| www.99中文字幕| 天天操天天日天天干| 大香蕉专区| 99re在线视频这里只有精品| 无码日韩网站| 啪啪视频免费在线观看| 亚洲精品欧洲精品| 国产精品视频一区二区三区八戒| 男人天堂最新手机版在线青青草| 久久香蕉影院| 欧美双插| 91强在线播放| 天天日天天色| 亚洲日本激情| 91操熟女视频| 欧美日韩国产中文精品字幕自在自线, | 中精品一区二区三区| 婷婷综合网站| 国产精品白领在线观看| 欧美日韩青操| 日本三级中国三级99人妇网站| 2024黄色视频| 久久久91福利姬| 91丨九色丨国产打屁股| 久久97| 久久精品天美| 国产成人自拍视频在线| 久96热在线观看视频| 久久99精品国产| 国产免费一区在线观看| 久久性爱视频免费看| 性欧美精| 粉嫩国产精品久久粉嫩| 18禁精品网站在线看| 啊啊啊啊嗯嗯在线久久久| 刺激性视频黄页| 伊人久操| 中文字幕天堂在线| 人妻激情视频| 午夜精品久久久久久久99热影院| 日本黄 R色 成 人网站| 国产精品人妻熟女aⅴ| 免费亚洲国产精品久久一区| 冬京热男人的天堂| 国产成人精品亚洲日本| 欧美强奸乱能| 99精品国产户外露出| 老司机福利社视频在线观看| 欧美成不卡网| 婷婷色网| 少妇高潮对白在线观看| 91精品人妻偷情| 一区二区三区男人的天堂| 九九久久久九九| 男人的天堂一区三区| 视频一区二区免费在线| 91欧| www.男人天堂| 一区二区三区国产精产| 91碰碰| 夜间福利片1000无码| av亚欧| 成人资源中文字幕在线观看| 亚洲青色欧美| 91亚洲不卡一区| 丁香五月电影| 国产一区二区三区导航| 精品视频免费在线一区| 搡老女人老熟女91| 亚州欧美另类| nuu12国产麻豆精品| 操b网站亚洲无码| 久久久久成人蜜桃精品| 欧美美女自慰一区二区三区| 久久亚洲婷婷| 大伊香蕉在线视频免费| 国产黄片精品在线| 亚洲av综合伊人久久| 欧美人妻制服| 欧美第五页| 97超碰免费生活| 干b在线性社区| 人妻久热在线| 天天添天天干电影| 色五月婷婷五月天| 玖玖97综合 | 91久久伊人婷婷青青草| 国产青一二三| 天天插天天舔舔天天干| 久久超碰久| 日韩中文欧美| 超碰日本97美女人妻人人玩人人爱| 中文字幕在线高清男人的天堂| 尤物一级在线免费观看| 思思热在线视频在线| 久久东京热久久| 天天影视综合色| 欧美日韩97在线| 99黄页网站| 九九亚洲精品| 夜夜人妻爽| 国产免费久久精品99re韩国| 国产亚热在线久久| 中文字幕日韩情色| 诱惑网综合| 久久二| 久久东京热成人| 99re99在线视频| 久久久999国产精品| 久久精品中文字幕观看| 亚州男人天堂| 国产精品久久久啊| 1000部熟女视频在线观看| 国产内射爽爽大片| 黄色片一区二区三区四区五区| 人人贴人人摸| 思思热在线cao| 一本一道vs波多野结衣| 丁香五月综合| 天天影视网综合少妇| 欧美九九爱| 日欧美色| 国产第二页| 日韩大香蕉精品在线视频| 我想要啊 啊 啊| 久久色AV线| 激情婷婷丁香网| 狠狠入| 一区二区三区视频| 黄色激情电影在线观看| 日韩人成网站在线播放| 亚洲阿v天堂在线| 女人与公拘交酡2020视频| AV和黑人在线播放| 国产无马av| 日韩av女优在线免费一区| 婷婷国产精品九区| 国产少妇高潮| 男人的天堂VA| 五月丁香黄色网| 国产一区二区a毛片| 日本肏逼视频在线观看| 91丨九色丨东北熟女| 丁香五月天堂网| 成人AV素股で擦久久| 中文字幕久久精视频久久大全| 久久99深爱久久99精品| 日韩欧美性吧婷婷乱伦大香蕉| 看大黄色大片原件| 欧日韩不卡视.频| 免费福利视频中文字幕| 丁香五月色| 97国伦国色| 久久精品男人的天堂| 日韩有码专区| 男人天堂黄片| 人人操av| 91路www| 婷婷10月天青娱乐| 自拍内地三级在线观看| 日韩欧美亚洲一区二区三区影院| 国产精品女同| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 久久只有精品一区二区三区| 啊啊啊啊啊啊啊在线| 96麻豆精品一区二区三区| 在线观看无码三级少妇| 欧美夜夜狠| #NAME?| 97AV在线观看| 亚洲成人久久一区二区| 看黑丝美女操逼青青网站| 国产久9| 婷婷在线视频在线观看| 天天爽爽爽爽| 欧美手机在线综合| 岛国激情视频在线观看| 国产农村妇女一区二区| 五十路熟女在线不卡观看一区二区| 精品人妻一区二区三区日产| 国产精品视频白浆免费| 啊啊好多水| 九九九精品美女| 国产白嫩漂亮KTV在线| 国产高清1234区| 精品综合久久久久久97| 久久久一区二区三区三州| 99激情| 中文字幕色AV| 一线黄色免费性爱片| 精品99999久久久久久| 亚洲双插| 成人性爱美曰韩| 欧美性暴力猛交XXXX| 国产精品久久久久久久久久久久久久吹 | 熟女突然公开看18禁影片| 久久久国产精品人妻丝袜| 亚州性色| 玖玖色综合| 亚州大图综合色图| 精品国产无码中文| 亚洲精品一二三四区| 99热这里都是精品| 熟女人妻一区二区三区| 久久精品视频一区三区小泽玛利亚| 亚洲日韩国产精品| 少妇高潮99p| 青青草原伊人网| 五月综合婷婷久久网站| 9999九九九久久久| 色色色色日本| 欧美日韩操逼动图| 家庭乱伦性爱av| 不卡超碰护士AV在线免费播放| 96一区二区三区| 精品黑人一区二区| 人妻大香蕉| 人人妻人射| 91美女在线视频| 成人av福利在线观看| 五月天春色激情网| 91夜色| 婷婷五月天激情小说| 97国产中文| 激情久久久| 亚洲脚交| 熟女被操视频网址| 欧洲综合色| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 后入福利视频| 午夜偷拍久久熟女| 日韩特一级久久| 中文人妻av高清一区| a人欧美综合天堂麻豆| 成人午夜高潮av猛片| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 涩爱AV在线| AA级电影三区| 亚洲第一黄色av网站 | 欧美色图亚洲激情| 欧美精品另类人妖xxxx| 亚洲精品一区二区精华| 二级久久网| 免费1级a做爰片观看| 97日视频| 操高情无码| AV在线播放网址| 热九九精品| 一区二区视频在看| 91啪9色| 亚洲一曲日韩精品| 人妻精品一区一区三区蜜桃91| 99热只有这里有精品| 日本大香蕉综合网红本杳社区| 小泽玛利亚一二三| 无码人妻一区二区三区色欲aⅴ| av麻豆啪啪| 91操人| 久久婷婷成人综合色怡春院| 夜夜夜久久| www.yeyecao| 精品无码一区二区人妻久久蜜桃| 色婷婷五月天| 丁香六月激情| 美女黄页| 日韩一性一交一A片俄罗斯 | av天堂精品久久| 不卡六六在线91| 啊啊啊好爽快点啊啊啊嗯嗯| 久久久亚洲高清不打码| 热久久无毒不卡| 欧美78P| 精品性爱一二三区| 亚洲成人ab| 顶级少妇BT天堂| 爱妃国产亚洲视频中文字幕| 伊人少妇久久久| 五月婷婷六月色| 黄片视频观看| 无码精品啪啪啪一区二区三区三州| 天天干美少妇一区| 最新岛国大片| 九九九九九精品视频| 少妇与黑人高潮在线| 日韩成人大片在线观看| 伊人网免费视频| 日韩无码服务区| 久久伊人在线五区| 超碰99在线观看| 国产精品嫩草影院午夜两性| 国产精品久久久午夜夜伦鲁鲁| 伊人网免费视频| 欧美高潮| 激情图片亚洲色图| 天天综合精品| 欧美成人A天堂片在线观看| 一二三区精品视频| 欧美第一页| 精品久久久中文字幕不| 六月激情婷婷| 亚洲第一精品在线视频| 中文字幕在线观| 色97综合中文字幕| 久久久久久久久久久久黄色| 亚洲男人天堂2019| 日韩亚洲中文有码视频| 中文字幕蜜乳av| 欧美 日韩第一性色| 99热精品国产| 97超碰jingpin| 欧美日韩国内不卡| 成人a大片在线观看| 久久夜夜| 阿姨一区二区免费视频-高清正片西瓜视频下载app-T450AV | 亚洲成人精品久久久| 蜜臀99久久精品久久久久| 久久久男人的天堂| 日韩午夜国产| 日韩97视频!在线| www黄片免费看com| 中文字幕一二区二三区人妻专区| 亚洲影院成人| 啊啊啊免费视频| 亚洲丝袜二区在线| 夜夜高潮夜夜爽国产伦精品| 欧美在线 亚洲| 久久久久久久78| 精品四五区| 人人爱操| 黄片色区软件| 国产乱色国产精品免费视| 超碰97人妻| 97亚洲中文| 欧美草草高清日韩视频| 超碰在线成人电影| av九九| 天天视频综合在线观看视频| 天天躁日日躁xxxxx| 国产精品免费1区2区视频| 翔田千里AV无码秘 三区| 91美女小视频| 91色狼| 日韩啪啪视频| 9久久久久| 96久久久久| 91观看 国产白丝| 欲香欲色综合天天伊人| 国产激情在线| 熟妇人妻丰满久久久久久久无码| 99热精品在线观看| 东京热综合久久一区二区| 日本久久久久久久久久| 亚洲精品蜜桃久久久| 在线电影亚洲色图| 久久激情四射婷婷丁香五月天| 青青草色情网站视频| 乱伦a片视频| 精品日韩中文在线| 天天操夜夜操狠很操| 在线综合 亚洲 欧美中文字幕| 影音先锋日本乱伦| 精品日韩中文在线| 欧美日韩国产高清在线一二三区| 国产精品久久久无码AV网站| 嫖老熟女A片一二三区| 天天躁日日躁XXXXYY| 亚洲乱码尤物193YW| 成人福利视频网| 亚卅熟女乱色| 欧美一级三级| 黑丝91视频| 97干天天| 91亚.色| 成人青青草原伊人| 欧美性xxxxx狂欢| 思思热在线视频在线| 欧美性生活男人的天堂| 欧美久久人体| 亚洲天天操| a男人的天堂久久一级A毛片| 国产一在线观看| 无码免费精品高清| 亚洲综合色网| 麻豆AV短剧| 色香综合天天影视综合 | 国产又粗又又黄又猛| 国产av白丝| 色超碰综合| 国产精品久久久午夜夜伦鲁鲁| 色欲久久99国产精品久久久久久| 人妻天天爽天天爽三区| 26uuu性物| 97碰在线视频| 天天日天天射天天干| 欧美日本不卡| 欧美96精品在线| 伊人丁香五月婷婷| 成片免费观看视频大全| 日韩性爱人人爱人人操| 亚洲福利中文字幕在线| 精品国产自在在线99| 天美传媒AV国产在线| 色色97爱| 黄色视频60分钟| 日韩中文字幕二区| 亚洲天天艹| 亚洲老司机123专区| 99999亚洲| 呦呦影院| 婷婷综合五月| 久久久久亚洲精品| 九九九九AV| 日本国产亚洲一区在线观看| 99ri在线视频| 99只有精品| 一本久道久久综合狠狠爱一密臀精| 国产精品白丝在线播放| www99热| 精品一久久久| 久久无码精品| 国产精品人人爽人人做可爱福利| 狠狠爱大香蕉| 日本三级一区二区 在线| 99精品久久| 欧美97视频| 天堂无码| 色婷婷五月综合激情中文字幕| 天天弄欧美| 男人的天堂Va| 秋霞蝌科网日本一区| 97超碰无码网| 日韩情色一区二区| 在线v中文字幕一区二区三区| 日韩精彩免费| 欧美se综合| 婷婷丁香九月| 久久久不能久久久久| 日韩91网| 熟女人妇一区二区三区| 亚州色站 日韩电影| 日韩99999| 久久亚洲AV成人精品无码| 人人摸人人干| av大香蕉网站| 亚洲风情在线观看| 欧美精品日韩一区二区| 亚洲日韩乱码中文无码蜜桃臀网站| 爱爱动态60秒| 色婷婷五月综合| 91熟女.com| 日本操逼视频在线| 天天爽爽爽爽| 亚洲丝袜少妇在线| 五月婷婷激情网| 久久一区二区加油站| 国产乱伦视频污| 中文字幕二区日韩天堂| 蜜臀网址在线| 蜜桃无码AV一区二区| 欧洲亚洲人人爽爽视频| 亚洲综合另类小说色区亚洲成av人片在www | 久久精品国产亚洲AV片多多| 麻豆一区在线| 午夜a成v人电影| 成人免费毛片| 看黑丝美女操逼青青网站| 久久人| 这里只有精品久久| 极品少妇久久久| 精品人人插人人操| 欧美色91| 五月丁香啪啪啪| 欧美狠狠狠| 亚洲AV免费在线| 亚洲精品黄码久久久久| 91九色精品熟女内射| 色哟哟av网址| 一区二区三区视频在线观看免费| 亚洲系列欧美| 国产成人精品日本视频| 日韩毛片9| 亚洲福利中文字幕在线| 青女偷拍网| 三级三级三级日本99| 97超碰9| 亚洲色图激情小说| 成人免费性爱视视| 很黄很色的视频在线观看| 亚洲AV不卡在线观看尤物| 中国少妇XXXX做受| 人人摸人人舔一区二区| 97啪啪| 天天日天天干少妇日| 欧美黑人猛交春色影视大全| 国产高清成人免费视频| 日韩中文字幕av在线播放| 波多野结衣被操50分钟免费视频| 曰韩少妇无码| 韩国黄色片精品久久久 | 99热| 久久精9| 日本视频一区二区三区| 亚州黄站| 亚洲综合春色| 欧美自拍偷拍综合图片| www.av不卡中文字幕| 思思热国产在线视频| 天天性射网| 色欧美天天| 一级做a爰片性色毛片久久| xxx0国产在线播放| 亚洲深夜福利| 亭亭丁香激情| 亚洲精品性爱片| 熟妇一区,二区,三区。| 精品久久視頻在线| 热久久国产| 日本ZZ高免费A级视频| 日韩pv中文| 久久成人国产精品| 久久亚洲日韩国产欧| 五月婷婷六月色| 人人看人人插| 91蜜桃传媒精品久久久一区二区| 情色日播放AV| 乱伦av国产| 国产日本顶级一区二区三区| 欧美亚综合色图| 操逼天美3区| 国产精品一区在线播放| 91色综合激情| 大香蕉一线视频| 欧美色九九| 免费久久9999| 日本一二区不卡| 无码男人天堂| 欧美|91色综合| 亚洲一区日韩精品| 欧美九九九| 欧美精品91| 色情五月丁香| 国产一级特黄大片处女| 欧美姓爱综合网| 日韩资源网| 亚洲日韩AV视色| 色综合av男人天堂| 青娱乐淫乱1314| 色天天野狼综合社区| 夜夜狼人妻| 婷婷久久大香蕉| 无码人妻精品一区二区中文| 超碰色美女| 久草新免费| 色五月婷婷麻豆在| 玖玖玖玖精品国产剧情| 亚洲欧美一区二区网址| 亚洲情色 自拍| 福利在线视频一区二区| 日韩免费一级性爱视频| 97超碰精品图片| 性交一区二区在线播放| 91暧暧| 久操操| 婷婷五月天激情网| 国产强奸乱伦xd| 大香蕉欧美| 国产精品久久久久久久免牛肉蒲团| 亚洲精品久| 久久久18| 91人妻尻屄视频| 小日子操bb在线看| 免费人成毛片乱码| 青青久久艹| 黑人精品欧美一区二区蜜桃| 日本新免费二区三区| 超碰97资源大奶| 国产又粗又又黄又猛| 2020国产精品| 伊人五月天婷婷| 中文字幕后石码四区五区| 啊啊啊骚| 嗯~啊~轻一点 视频| 亚洲日韩欧美一区二区| 淫骚熟女一区二区三区| 精品国产一区二区三区四区在线看| 白丝一区| 日日超碰亚洲| 美女诱惑久久| 91精品国产91熟女| 少妇的嫩逼图片| 大香交| 二级毛片| 2019午夜福利视频| 在线观看视频91| 精品久久久久久久久久久久| 大香蕉欧美伊| 国产传媒日本欧美专区| 后入内射蜜桃臀| 91老熟女逼| 怡红院视频在线| 素人播放一区| 天美av在线观看| 激情五月天综合网| wwwss在线观看| 99综合网| 久久精品欧美一区蜜桃| 五月天丁香欧洲日韩| 中文字幕在线高清男人的天堂| 睡产熟女乱伦| 日本中文字幕在线视频| 日夜伊人网| 亚洲激情视频| 在线午夜成人无码视频| 欧美亚洲激情| 国产黄色剧情影片麻豆免费播放| 夜夜夜爽www精品视频| 玖玖大干人妻| 亚洲天在线| 国产精选视频| 火箭成精品视频884必出精品| 欧美综合色图片| 国产欧美另类久久久精品课程| 大香蕉淫人| 搡老女人老熟女91| 国产精品午夜福利亚洲综合网| AV在线性爱| 一区操逼日比视频| 5278欧美一区二区三区| 九九伊人网| 国模限制级电影| 一道本东京热加勒比一区二区三区| 第二页中文字幕| 久久伊人青青草| 操老熟女AV| 2020天天色综合| …亚洲黄色厕厕女女在线播…| 久久91| 天天做天天爱夜夜爽毛片试看| 探花一区二区三| 亚洲欧洲日韩中文字幕一区| 天天噜| 欧美亚州综合网图片| 久久 精品| 白丝被操91| 国产 亚洲 丝袜 制服| 激情综合婷婷| 九九久久久九九| 欧天美中出| 亚洲区小说| 超碰97色| 青青伊人这里只有精品| 色婷婷99| 奸色色 男人天堂 天天射| 熟女欧美日韩综合婷婷| www.av不卡中文字幕| 超碰人妻久久| 国产乱伦亚洲| 这里都是精品在线观看| 亚洲人精品久久久喷水| 蜜臀亚洲综合一二三四区| 欧美精品系列| 欧美v亚洲v综合v国产v妖精| 深夜激情无码| 一道本久久棕合爱| 中文字幕久久亚州无码| 久久久偷拍| 国产精品午夜福利视频| 日韩欧美中文字幕搭讪巨乳美人妻视频| a'v在线资源| 51一区二区三区| 91粉嫩萝控精品福利网站_精品影音先锋国 | 成人a大片在线观看| 丁香六月啪啪| 久久久不卡区一区二区三区久久久| 九九九偷拍| 操操逼视频| 色综合五月天| 日韩三级在线观看mp4| 青女偷拍网| 免费无码国产精品v片在线观看| 久久婷婷视频| 日本一天色道久久久精品视频| 国产亚热在线久久| 色屁屁影院www国产| 97啪啪| 淫乱图区 | 亚洲成人在线高清| 日本三级中国三级99人妇网站| 黄网站黄视频网站进入口| 99丝袜福利在线播放| 精品亚州18| 97天堂| 你懂得91| 久草草一二三四区久久| 思思热国产高清| 网页导航五月天免费一二三区 | 日本欧美不卡| 黄片aaaaa一区| 性色高清在线| 日韩猛交| 91操人| 中文字幕久久精视频久久大全| 三四中文字幕| 亚洲Av无码成人精品国产| 欧美视频第二页| 国产强奸乱伦第1页| 四色永久成人网站| 国产丸一视频| 岛国色情视频在线观看| 98色网| 亚洲色性| 日逼逼免费看| 亚洲伊人久久精品狠狠在线| 亚洲精品国产拍免费91在线| 国产日韩欧美亚洲精品95| 日韩在线一区高清在线| 欧美黑人猛交春色影视大全| 久久风骚城市| 26uuu国产日韩综合在线观看| 超碰97男人| 综合网亚洲| 欧美麻豆成人同性GⅤ在线| 伊人 俄罗斯 a v| www.99色| 99爱久久视频频| 偷偷人人精品女女久久| 久草福利在线资源站| 天天操人人操骚逼网站| WWW啪啪的com| 日韩二三区| 国产黄色剧情影片麻豆免费播放| 婷婷香蕉欧美在线一区二区三区 | 欧美乱欲| 91日本在线观看| 天天综合网亚洲综合网| 人人爱人人操人人性| 色亚州人久干视频在线观看免费版| 久久亚州精品成人Av无| 麻豆精品A片免费观看| 日本熟女不卡视频| 加勒比综合九九99视频在线播放| 夜夜黄| 香蕉综合网| 国产一级αv免费看片| 91日日夜夜| 自拍偷拍第26| 最新中文字幕av| 中文字幕一二区二三区人妻专区| 91草草草| 日韩黄片影院| 九九九九九用不成了| 免费超碰97在线观看| 综合视频91| 中国一级操逼视频| 香蕉免费一区二区三区不读 | 黄色AV影视| 欧美日韩中文字幕不卡| 日本福利社| 97久久久| 久久精品老司| 1级黄色夫妻对换性交免费看| 日韩午夜国产| 亚洲97久久精品亚洲| 亚洲熟妇综合久久久久久| 日本精品不卡一二三区| 中日韩久久久免费看| 亚洲激情综合| 乱伦强奸区日韩| 东北女人被操| 免费日韩黄片| 国产精品3| 欧美乱欲| 丝袜性亚洲| 涩涩这里只有精品视频| 久操在97| 国产成人自拍视频在线| 中日韓欧美高清| 欧美色棕合| 色欲av一区二区三区蜜芽| 97欧美色综合| 青青草中文-久久青草精品一区二区三 | 超碰97最新人妻| 欧美成人一区二区三区在线播放| 天天欧美| 久久的网站啊啊啊啊啊| 色综合国产在线观看| 美日韩一二三区| 中文字幕在线日亚州9| 国产白丝AV| 日欧美色| 人人操,操人人| 啊啊啊爽爽| 性性欧美| 亚洲天堂久久| 免费看黄片现成| 国产不卡的视频| 99热97| 国产精品视频麻豆入口| 久久99精品视频| 一本色道无码DVD中文字幕| 天天日美女的B| 9 9精品一区二区三区| 超碰在线欧美性爱激情| 老熟妇一区二区三区| 日韩偷拍色图| 日韩乱中文| 青青草福利视频| 欧美情色男人的天堂| 色综合久久888| 国产女同视频在线播放| 亚洲天堂另类| 亚洲成人一二三区| 亚洲无线码一区国产欧美国| 蜜桃香蕉久草精品在线| 91在线限制级| 香蕉综合网| 亚洲小电影免费涩涩成人在线高清| 亚洲欧美综合网| 中文字幕97色| 综合色图亚洲欧美| 日韩欧美亚洲一区二区三区影院| 在线视频亚洲无码| 久久激情视频| 69AV女优男人的天堂| 午夜国产成人福利视频| 九九视频黄色片| 人妻丰满熟妇av无码区蜜桃| 亚洲欧美爆| 99欧美| 美女91网址 | 国产又粗又长又大的视频| 老熟女91av| 99久re热视频精品98| 国产女同视频在线播放| 久久久久夜夜夜夜| 久久r精品| 青青草原综合久久大伊人精品| 婷婷久久五月| 国模艳艳啪啪一区| 欧美18老人禁| 欧美日韩人妻精品系列一区二区三区| 欧美91在线+|+欧美| 91婷婷伊人狠人| 国产麻豆一级精品视频| 麻豆国产视频精品观看| 久久男人天堂| 天天摸天天操视频| 劲爆欧美人妖三区91| 白嫩嫩一区| 99热自拍| 亚洲中文字母在线播放| 囯戸精品高潮呻吟旡码| 久久天堂| 99在线精品视频| 欧美日韩亚洲少妇寂寞影院正在播放 | 骚妻少妇精品性色无码四色A V| 久九九九九九九热| 嗯嗯啊中文字幕| 亚洲综合九九| 深夜激情无码| 3P乱轮视频| 国产精品久久泡妞网站| 青青久久久| 老女人91| 日韩人妻精品| 日韩操呦呦影院在线观看| 夜草欧美| 爱爱久久| 成人一区二区三区四区| 亚州色图欧美| 日逼五月天| 欧美亚洲AN| 日韩中文字幕av在线播放| 欧美日韩国第一区| 亚洲男人天堂2012| 啊啊啊不要好疼视频| 黑操B| 国产超碰国产97| 亚洲欧美校园另类春色| 亚洲天堂色图| 九九九九九九九九九九九免费国产| 在线女人91| 97爱爱爱综合| 久久25| a人欧美综合天堂麻豆| 99xav| 欧洲自拍色图gif在线| 在线情色电影 91大 | 曰本熟女视频| 欧美亚洲se91| 黄色一区三区| 欧美人妻一区二区| 亚洲三级。日韩三级| 欧洲亚洲少妇| 美女裸体无遮挡永久免费观看网站| 2023天天操夜夜操| 亚洲国产精品成人综合| 乱伦1色页| 永久免费发布性爱网| 色婷婷五月综合激情中文字幕| 国产免费一区在线观看| 91麻豆天美国产欧美日| 日韩AV一区二区三区三州三州| 中文字幕少妇色| 国产二区三区粉嫩在线| 丝袜色综合| 久久久9 9 9精品| 98久久超碰| 超碰精品日韩欧美国产| 亚洲精品三区在线观看| 日韩AV熟女乱伦| 亚洲久热| 欧美永久激情一区二区| 亚洲九九爱| 日天天九九天堂666| 国产无码成人无码| 亚洲图片日本AⅤ欧美在线| 夜色AV无码手机在线影院| 开心激情婷婷| 超碰在线974| 91熟女.com| 人妻天堂三区| 欧美日韩国产另类综合| 99热这里只有精品地址| 一区二区三区精品黑丝白丝酒店对鸡| 图色综合网| 91欧美丝袜| 亚洲色欧美| 探花在线免费观看视频国产一区| 久久婷婷五月综合| 欧美高潮在线| 熟妇高潮二区三区| 久久精品一区二区三区四区五区| 国产性爱在线视频一区二区| 黄片在线免费在线观看| 嗯嗯啊啊啊好舒服| 久久九操在线观看| 超碰95| 欧美性爱视频免费一区一A| 男人的天堂2010| 欧美天堂第二区| 日韩情色一区二区| 插穴性爱视频在线观看| 资源在线观一 二| 久久精品老司| 亚洲综合网91| 操淫穴亚洲五月丁香 | 岛国A V在线免费看| 激情五月天社区| 人妻精品4K4K4K4K4| 麻豆色99999| 日韩视频精品在线观看| 99热超碰在线| 九九九九九用不成了| 九九热精品视频六| 欧美αv.com| 国产天美欧美| 女上位精品在线| 免费看黄片现成| 91日韩在线| 极品色电影院| 97精品一区二区视频| 曰韩av中文字幕专区| 欧美日韩亚洲高清不卡一区二区三区| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师 | 91欧美综合在线| 女性喷水高潮在线观看| 欧亚免费视频| 天天色怡春院| 亚洲影院无码在线| 99天堂网| 好爽要喷了| 国产成人无码啪| 久久久99久9| 91亚洲影视| 日韩性爱再线视频| 亚洲色丰满少妇高潮| 东北少妇高潮zzzz| 色婷婷小说| 超碰欧美97资源| 狠狠中文字幕| 久视频在线观看| 97免费在线观看| 久色网| 欧美人妻另类在线| 久久精品久久九九精品| 大鸡巴久久久| 熟女人妻一区二区三区| 色五月丁香五月| 夜夜青青无码影院| 亚洲囯产精品女人久久久| 禁十八久久| 亚洲一区二区在线观看91| 精品人妻伦一二三区久久| 偷拍亚洲视频一区二区三区四区| 日韩欧美成人性爱在线| 成人天天看站长推荐| 97天堂| 少妇二级| 欧美色乱| 国产成人+综合亚洲+天堂| 九九成人| 天天躁日日躁狠狠狠躁| 强奸乱伦αv片| 日本免费一区二区不卡| 综合 欧美 亚洲 日本| 欧美久久婷婷| 一区二区免费电影久久| 天天综合网在线| 久久精品国产亚洲5555| 久草精品热视| 欧美精品庄| 丁香五月天啪啪| 国产一二三福利视频网| 国产精品久久久久久久黄无码| 中文字幕人乱码中文字的预防方法| 26UUU欧美激情一区二区| 欧美在线啊啊啊| 国产一区自拍欧美日韩 | 久久人妻一区二区三区高清| 综合久久六月久久婷婷| 亚洲日本天堂| 欧亚乱色熟女一区二区| 日韩中文字幕精品一二三事国产精品| 欧美东京热精品A∨| 91无摭挡| 亚洲国产成人高清在线| 男人下部插入女人下部| 中文字幕在线2| 美国精品国产精品| 夜夜 中文视频rt| 2019精品国产无码成人| 国产传媒日本欧美专区| 无码高清操逼网址| 婷婷情色五月天| 日韩在线一区二区| 搡老女人老91妇女熟女| 国产偷拍自拍在线视频| 天天综合,91入口| 深爱激情五月天| 麻豆成人影音在线| 国内黄色精品| 中文字幕日韩人妻视频| 日日噜噜夜夜久久亚洲一区二区| 丝袜美腿制服人妻二区中文字幕| 九九九偷拍| 免费毛片在线播放| 精品对白久久不卡| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 日本成人A片网站| 天天内射| 亚洲图片偷拍视频区|