日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

單核處理器開(kāi)發(fā)板線程沖突排查實(shí)戰(zhàn):從原理到修復(fù)

單核處理器開(kāi)發(fā)板線程沖突排查實(shí)戰(zhàn):從原理到修復(fù) 先亮個(gè)觀點(diǎn)單核處理器開(kāi)發(fā)板上的線程沖突往往比多核系統(tǒng)更難排查。原因在于大多數(shù)人從潛意識(shí)里就認(rèn)定“單核同一個(gè)瞬間只執(zhí)行一條指令哪來(lái)的同時(shí)訪問(wèn)”我一開(kāi)始也這么想直到在STM32F407上調(diào)一個(gè)看似不可能出錯(cuò)的標(biāo)志位判斷眼睜睜看著程序在開(kāi)了O2優(yōu)化后把已經(jīng)置位的if條件當(dāng)成恒假才意識(shí)到這個(gè)問(wèn)題遠(yuǎn)比想象中復(fù)雜。后來(lái)在ESP32、T113、STM32MP157這些板子上折騰RTOS和裸機(jī)程序一次又一次踩進(jìn)同一個(gè)坑里才慢慢把單核線程沖突這件事想明白。這篇文章我會(huì)從原理講到實(shí)操把“單核上并發(fā)到底怎么發(fā)生”“開(kāi)發(fā)板上最容易出問(wèn)題的三類沖突現(xiàn)場(chǎng)”“為什么volatile救不了你”“用什么手段定位和修復(fù)”這幾塊講透最后附上一段真實(shí)排查復(fù)盤。無(wú)論你是在裸機(jī)環(huán)境里被中斷搞到頭大還是在FreeRTOS里被任務(wù)切換折磨到懷疑人生這篇內(nèi)容應(yīng)該都能幫你少走幾個(gè)月的彎路。1. “單核同一時(shí)間只能執(zhí)行一條指令”那沖突從哪來(lái)1.1 單核也能并發(fā)執(zhí)行流之間的交錯(cuò)切換先糾正一個(gè)最常見(jiàn)的誤解并發(fā)concurrent不等于并行parallel。并行是同一時(shí)刻真的有多個(gè)執(zhí)行單元在同時(shí)跑這確實(shí)需要多核。但并發(fā)只需要“任務(wù)交替執(zhí)行”哪怕CPU每一瞬間只干一件事只要它在多個(gè)執(zhí)行流之間來(lái)回切換這些任務(wù)就是并發(fā)的。單核處理器開(kāi)發(fā)板上有兩類執(zhí)行流天然并存。第一類是裸機(jī)環(huán)境下的主循環(huán)加中斷服務(wù)程序ISR主循環(huán)是一個(gè)執(zhí)行流每個(gè)中斷源是另一條執(zhí)行流中斷可以隨時(shí)打斷主循環(huán)。第二類是RTOS環(huán)境下的多個(gè)任務(wù)task由調(diào)度器決定誰(shuí)占用CPU常見(jiàn)的機(jī)制有時(shí)間片輪轉(zhuǎn)、優(yōu)先級(jí)搶占、以及任務(wù)主動(dòng)延時(shí)或阻塞讓出CPU。一個(gè)RTOS系統(tǒng)里哪怕優(yōu)先級(jí)是1的任務(wù)和優(yōu)先級(jí)是10的任務(wù)跑在同一顆單核上從宏觀時(shí)間尺度看它們確實(shí)都在推進(jìn)。但從指令級(jí)微觀尺度看CPU永遠(yuǎn)是串行地執(zhí)行某一條指令。沖突并不是“兩個(gè)線程真的同時(shí)改了一個(gè)變量”而是“兩個(gè)執(zhí)行流的指令交錯(cuò)在一起把一個(gè)需要不被打斷的操作拆成了兩半”。打個(gè)比方你排隊(duì)在ATM機(jī)上存錢流程是先插卡、再輸密碼、再存錢、再退卡。這時(shí)候一個(gè)保安走過(guò)來(lái)在你輸完密碼還沒(méi)存錢的時(shí)候把你拉到旁邊讓你填表。等你回來(lái)繼續(xù)操作你或者保安都會(huì)一臉蒙這筆業(yè)務(wù)到底進(jìn)行到哪一步了單核處理器上的線程沖突就是這么發(fā)生的——不是兩個(gè)人同時(shí)按按鈕而是操作步驟被“插隊(duì)”的人從中間截?cái)嗔恕?.2 非原子操作一句a背后其實(shí)是三條指令C語(yǔ)言里一行counter看起來(lái)是一個(gè)不可分割的動(dòng)作。但編譯成ARM或RISC-V指令后它至少包含三條機(jī)器指令從內(nèi)存把counter讀取到寄存器對(duì)寄存器執(zhí)行加1把寄存器寫回內(nèi)存在單核處理器上中斷和任務(wù)切換可以發(fā)生在任意一條指令之后。如果兩個(gè)任務(wù)都在執(zhí)行counter最壞的交錯(cuò)情況是這樣發(fā)生的任務(wù)A先執(zhí)行完load拿到了counter0這個(gè)舊值。此時(shí)調(diào)度器切換任務(wù)B開(kāi)始跑它完整執(zhí)行了load、add、store把counter從0寫成了1。接著任務(wù)A恢復(fù)執(zhí)行它寄存器里存的還是0執(zhí)行add后變成1再store回內(nèi)存counter從1被覆蓋回1。兩個(gè)任務(wù)各自執(zhí)行了一次自增預(yù)期結(jié)果應(yīng)該是2實(shí)際卻是1。這類問(wèn)題在單核嵌入式開(kāi)發(fā)里幾乎無(wú)處不在。它不要求“兩個(gè)執(zhí)行流同時(shí)運(yùn)行”只要它們交錯(cuò)的時(shí)機(jī)恰好在“讀”和“寫”之間沖突就成立。這個(gè)概率通常不是很大但一旦某個(gè)中斷的觸發(fā)頻率高、某個(gè)任務(wù)運(yùn)行頻繁錯(cuò)誤就會(huì)以“偶發(fā)”“看運(yùn)氣”“跑幾小時(shí)崩一次”的形式出現(xiàn)。1.3 切換時(shí)刻不可預(yù)測(cè)中斷和調(diào)度器才是“真正的導(dǎo)演”很多新手寫裸機(jī)程序時(shí)默認(rèn)程序會(huì)“老實(shí)地按順序跑完每一段代碼”。這句話只在沒(méi)有中斷、沒(méi)有任務(wù)切換的NOP循環(huán)里成立。只要打開(kāi)任何一個(gè)外設(shè)中斷或者跑起RTOS執(zhí)行流的劇本就再也不由主函數(shù)控制了。中斷可以在任意指令邊界被觸發(fā)。ADC轉(zhuǎn)換完成、定時(shí)器溢出、UART收到一個(gè)字節(jié)、按鍵電平跳變……每一個(gè)事件都可能在不合時(shí)宜的時(shí)刻打斷當(dāng)前執(zhí)行流。RTOS的任務(wù)切換通常來(lái)自SysTick定時(shí)器它有自己的節(jié)拍但任務(wù)之間搶占式調(diào)度意味著低優(yōu)先級(jí)任務(wù)運(yùn)行到一半高優(yōu)先級(jí)任務(wù)就緒后當(dāng)前任務(wù)立刻被掛起。這里有一個(gè)新手特別容易忽略的細(xì)節(jié)任務(wù)切換不只發(fā)生在你主動(dòng)調(diào)用vTaskDelay或等待信號(hào)量的時(shí)候。只要使用了搶占式調(diào)度高優(yōu)先級(jí)任務(wù)一就緒低優(yōu)先級(jí)任務(wù)隨時(shí)隨地會(huì)被切換出去。所以“我這段代碼沒(méi)有調(diào)用任何可能阻塞的函數(shù)它一定會(huì)一口氣執(zhí)行完”這個(gè)假設(shè)在搶占式RTOS里是站不住腳的。而中斷搶占RTOS任務(wù)的時(shí)機(jī)更不可控——它只取決于外設(shè)事件何時(shí)發(fā)生跟你代碼執(zhí)行到哪里毫無(wú)關(guān)系。線程沖突的“隨機(jī)性”就來(lái)自這里代碼路徑不同、外設(shè)觸發(fā)時(shí)刻不同、編譯器生成的指令序列不同都會(huì)讓沖突概率呈現(xiàn)完全不同的分布。2. 在開(kāi)發(fā)板上最容易踩的三類線程沖突現(xiàn)場(chǎng)2.1 中斷置位的主循環(huán)標(biāo)志位為什么被編譯器“吃掉”了裸機(jī)開(kāi)發(fā)里最經(jīng)典的一幕串口接收中斷里收到一個(gè)字節(jié)把它放進(jìn)全局?jǐn)?shù)組然后置位data_ready標(biāo)志位。主循環(huán)里不斷檢查data_ready為真就處理數(shù)據(jù)、清標(biāo)志。代碼邏輯看起來(lái)無(wú)懈可擊但有兩個(gè)坑在等著你。第一個(gè)坑是編譯器優(yōu)化。如果你沒(méi)有把data_ready聲明成volatile在O2優(yōu)化級(jí)別下編譯器可能把主循環(huán)里的while(!data_ready);優(yōu)化成只從內(nèi)存讀取一次data_ready之后每次都直接重用寄存器里的舊值。中斷確實(shí)更新了內(nèi)存里的變量但主循環(huán)還在反復(fù)檢查一個(gè)“過(guò)期的緩存”。這是C語(yǔ)言標(biāo)準(zhǔn)里非常明確的未定義行為——在中斷和主循環(huán)之間共享變量卻不加volatile——硬件上電后能不能跑對(duì)全看編譯器心情。第二個(gè)坑更隱蔽就算加了volatile并且單片機(jī)是32位、標(biāo)志位也是32位的單個(gè)標(biāo)志位的讀取和寫入看似“原子”但如果你在主循環(huán)里做的事是“先判斷標(biāo)志再讀數(shù)組里的一批數(shù)據(jù)”中斷又恰好在你讀完第一個(gè)數(shù)據(jù)、還沒(méi)讀完后面幾個(gè)時(shí)再次觸發(fā)并寫入了新數(shù)據(jù)那主循環(huán)拿到手里的數(shù)組就是新舊混合的半成品。標(biāo)志位本身沒(méi)壞但標(biāo)志位背后保護(hù)的那塊數(shù)據(jù)壞了。在STM32系列上串口中斷配合DMA時(shí)這個(gè)問(wèn)題最常見(jiàn)。DMA接收完一幀數(shù)據(jù)后由空閑中斷置位標(biāo)志主循環(huán)檢查到標(biāo)志后去解析接收緩沖區(qū)。如果處理得慢下一幀DMA數(shù)據(jù)已經(jīng)覆蓋了緩沖區(qū)前幾百字節(jié)解析結(jié)果自然是一堆亂碼。這種“標(biāo)志位正確但數(shù)據(jù)已被二次寫入”的沖突單靠volatile是解決不了的。2.2 兩個(gè)任務(wù)搶一條I2C總線從設(shè)備直接血壓飆升用ESP32跑FreeRTOS的開(kāi)發(fā)者基本都遇到過(guò)這種鬼打墻的情形任務(wù)A周期性地讀取BME280溫度傳感器任務(wù)B負(fù)責(zé)把傳感器數(shù)據(jù)刷到OLED屏上兩個(gè)任務(wù)共用同一路I2C總線。程序?qū)懲暌慌軠囟葦?shù)據(jù)偶發(fā)變成0xFFOLED上的顯示內(nèi)容偶爾出現(xiàn)雪花點(diǎn)或錯(cuò)位字符。原因在于I2C總線的時(shí)序協(xié)議要求一次完整的傳輸過(guò)程不能被打斷。START條件之后主機(jī)要發(fā)送I2C從設(shè)備地址然后等待ACK接著按寄存器地址、數(shù)據(jù)字節(jié)的順序一條一條地收發(fā)。如果任務(wù)A發(fā)送從設(shè)備地址之后剛剛收到ACK任務(wù)B搶占了CPU開(kāi)始執(zhí)行自己的I2C協(xié)議它也在同一個(gè)SDA和SCL上發(fā)START和地址那么總線上就會(huì)出現(xiàn)兩個(gè)主機(jī)互相打架。從設(shè)備端看到的現(xiàn)象是地址對(duì)不上、ACK不回應(yīng)、數(shù)據(jù)字節(jié)位置錯(cuò)亂、甚至誤以為總線進(jìn)入了異常狀態(tài)。更麻煩的是很多I2C從設(shè)備的內(nèi)部狀態(tài)機(jī)比較脆弱一旦時(shí)序被打斷需要重新初始化或復(fù)位才能恢復(fù)通信。這種問(wèn)題在SPI外設(shè)上同樣存在表現(xiàn)形式略有不同。SPI本身沒(méi)有類似I2C的地址應(yīng)答機(jī)制主機(jī)CS拉低后連續(xù)發(fā)幾個(gè)字節(jié)如果中途被切換CS可能持續(xù)保持低電平另一個(gè)任務(wù)再操作同一個(gè)SPI外設(shè)時(shí)數(shù)據(jù)就混在一起了。芯片級(jí)的說(shuō)法是“SPI控制器狀態(tài)被兩個(gè)執(zhí)行流輪流污染”。這種沖突不是“邏輯寫錯(cuò)了”而是“共享外設(shè)沒(méi)有被互斥保護(hù)”。你在兩個(gè)任務(wù)各自寫的驅(qū)動(dòng)里單獨(dú)看每一句都正確組合在一起后時(shí)序一交錯(cuò)外設(shè)就進(jìn)了非法狀態(tài)。2.3 DMA還在搬數(shù)據(jù)主循環(huán)已經(jīng)開(kāi)始讀緩沖區(qū)ADC連續(xù)采樣結(jié)合DMA搬運(yùn)是開(kāi)發(fā)板上最常見(jiàn)的采集架構(gòu)。DMA在后臺(tái)不斷把ADC轉(zhuǎn)換結(jié)果寫入全局?jǐn)?shù)組等緩沖區(qū)存滿后觸發(fā)傳輸完成中斷置一個(gè)dma_done標(biāo)志。主循環(huán)看到標(biāo)志后去處理這一批數(shù)據(jù)。看起來(lái)設(shè)計(jì)得很合理但有一個(gè)細(xì)節(jié)經(jīng)常被忽略DMA傳輸完成中斷發(fā)出的那一瞬間CPU知道自己該處理數(shù)據(jù)了但下一次DMA傳輸很可能立刻就開(kāi)始。如果你的主循環(huán)處理緩沖區(qū)花了3毫秒而DMA每隔2毫秒就搬滿一輪那么當(dāng)你讀到緩沖區(qū)中段時(shí)新一輪數(shù)據(jù)已經(jīng)覆蓋了數(shù)組開(kāi)頭。結(jié)果是你用dma_done標(biāo)志來(lái)“確保”數(shù)據(jù)有效卻拿到的仍然是一組半新半舊的數(shù)據(jù)。這個(gè)問(wèn)題的典型特征是數(shù)組的前半部分是新數(shù)據(jù)后半部分還是上一輪的舊數(shù)據(jù)整體趨勢(shì)和真實(shí)波形對(duì)不上只有加大緩沖區(qū)或者用環(huán)形緩沖才稍微好一些。還有一種變體DMA在后臺(tái)寫入緩沖區(qū)的同一個(gè)bank而CPU同時(shí)在讀。在帶緩存的高性能MCU比如Cortex-M7內(nèi)核的STM32H7系列上還涉及D-Cache一致性問(wèn)題。CPU讀到的可能是緩存里的舊值而DMA已經(jīng)把新數(shù)據(jù)寫進(jìn)了內(nèi)存——這兩者之間如果缺少緩存清理和失效操作數(shù)據(jù)對(duì)不上是必然的。解決這類問(wèn)題的標(biāo)準(zhǔn)思路是雙緩沖DMA寫bank A時(shí)CPU讀bank B下一輪交替。兩個(gè)執(zhí)行流永遠(yuǎn)不觸碰同一塊內(nèi)存沖突自然消失。這個(gè)思路在單核上同樣適用而且實(shí)現(xiàn)成本很低。3. 單核線程沖突的三個(gè)“幫兇”硬件、編譯器和思維定式3.1 volatile不是鎖也不是“安全認(rèn)證”volatile大概是嵌入式C語(yǔ)言里被誤解最深的限定符。它的實(shí)際作用只有兩條告訴編譯器這個(gè)變量可能在當(dāng)前執(zhí)行流之外被修改因此每次訪問(wèn)都必須從內(nèi)存重新讀取并且編譯器不能對(duì)它的讀寫做重排序。很多人把它當(dāng)成“線程安全”的標(biāo)志認(rèn)為一個(gè)變量加了volatile就萬(wàn)事大吉。用一句話戳破這個(gè)幻覺(jué)volatile根本不提供原子性也不提供互斥。它阻止的是編譯器玩花樣但擋不住中斷在兩個(gè)指令之間把系統(tǒng)打斷。舉個(gè)例子。32位MCU上讀寫一個(gè)32位變量通常對(duì)應(yīng)一條LDR或STR指令這種操作本身有原子性加成日常使用問(wèn)題不大。但如果你在Cortex-M0這種只支持32位數(shù)據(jù)總線的內(nèi)核上讀寫一個(gè)64位的uint64_t變量一次賦值會(huì)編譯成兩條LDR或STR指令低32位和高32位是分兩次完成的。中斷完全可能在兩次寫入之間來(lái)臨于是線程A看到的值是“低32位新的、高32位舊的”這種縫合怪物。volatile解決不了這個(gè)問(wèn)題它只是讓每一次讀寫都老老實(shí)實(shí)走內(nèi)存但“兩次讀寫之間的窗口”依然存在。真正適合volatile的場(chǎng)景是一個(gè)變量只被單個(gè)中斷處理程序和主循環(huán)共享。比如“中斷置位了一個(gè)標(biāo)志主循環(huán)檢查這個(gè)標(biāo)志”這種單寫單讀的場(chǎng)景volatile是夠用的。一旦有兩個(gè)執(zhí)行流同時(shí)寫一個(gè)變量或者需要保護(hù)一大段數(shù)據(jù)就需要臨界區(qū)、互斥量或者關(guān)中斷來(lái)解決。3.2 中斷嵌套與優(yōu)先級(jí)反轉(zhuǎn)單核也有排隊(duì)問(wèn)題很多人以為優(yōu)先級(jí)反轉(zhuǎn)是多核系統(tǒng)或者復(fù)雜RTOS專屬的問(wèn)題其實(shí)單核開(kāi)發(fā)板上同樣存在而且表現(xiàn)形式很樸素。場(chǎng)景是這樣的低優(yōu)先級(jí)任務(wù)L持有一把互斥鎖正操作一個(gè)共享外設(shè)。高優(yōu)先級(jí)任務(wù)H需要這把鎖但它搶不到只能阻塞等待。如果在等待期間中等優(yōu)先級(jí)任務(wù)M一直就緒搶占式調(diào)度器會(huì)不斷讓M運(yùn)行L得不到CPU時(shí)間也就永遠(yuǎn)無(wú)法釋放鎖。結(jié)果高優(yōu)先級(jí)的H倒像是被中優(yōu)先級(jí)的M“壓制”住了。這就是教科書(shū)式的優(yōu)先級(jí)反轉(zhuǎn)。單核RTOS里一旦出現(xiàn)現(xiàn)象是“高優(yōu)先級(jí)任務(wù)偶爾響應(yīng)極慢”。由于它需要鎖才能繼續(xù)而鎖被低優(yōu)先級(jí)任務(wù)持有低優(yōu)先級(jí)又被中等優(yōu)先級(jí)不停搶占整個(gè)系統(tǒng)就像堵車一樣卡住。FreeRTOS的互斥量自帶優(yōu)先級(jí)繼承機(jī)制能有效緩解這個(gè)問(wèn)題。但裸機(jī)環(huán)境沒(méi)有這層保護(hù)全靠中斷優(yōu)先級(jí)設(shè)計(jì)和臨界區(qū)的使用紀(jì)律來(lái)避免。另一個(gè)常見(jiàn)做法是限制中斷嵌套的深度不合理的優(yōu)先級(jí)分組會(huì)讓低優(yōu)先級(jí)中斷難以被響應(yīng)間接造成類似反轉(zhuǎn)的調(diào)度阻塞。3.3 緩存、總線和DMA單核CPU背后的“多主系統(tǒng)”把“單核”理解成“整個(gè)芯片只有一個(gè)主設(shè)備在干活”是另一種思維定式?,F(xiàn)代MCU里的DMA控制器、以太網(wǎng)MAC、USB控制器、SDIO控制器都是可以獨(dú)立訪問(wèn)內(nèi)存和寄存器的“總線主設(shè)備”。CPU雖然是單核但芯片內(nèi)部的訪存系統(tǒng)是一個(gè)不折不扣的多主系統(tǒng)。CPU和DMA同時(shí)訪問(wèn)同一塊內(nèi)存時(shí)即便CPU是單核也存在內(nèi)存一致性問(wèn)題。在帶D-Cache的內(nèi)核上DMA從外設(shè)搬數(shù)據(jù)到內(nèi)存CPU的緩存里可能還殘留舊值。CPU讀到的永遠(yuǎn)是緩存里的舊數(shù)據(jù)哪怕DMA已經(jīng)把內(nèi)存更新了。反過(guò)來(lái)CPU寫了數(shù)據(jù)到緩存還沒(méi)flush回內(nèi)存DMA就去內(nèi)存搬運(yùn)舊數(shù)據(jù)搬出去的也是錯(cuò)的。早期STM32F4這類不帶D-Cache的芯片上這個(gè)問(wèn)題不明顯因?yàn)镃PU和數(shù)據(jù)總線之間是透?jìng)鞯?。但到了Cortex-M7、Cortex-A7這類高性能內(nèi)核緩存和一致性就成了繞不開(kāi)的話題。很多人在正點(diǎn)原子RK3588、IMX6ULL這類Linux級(jí)別的板子上調(diào)試驅(qū)動(dòng)時(shí)遇到數(shù)據(jù)錯(cuò)亂一部分原因就在這個(gè)層面。所以“單核處理器開(kāi)發(fā)板線程沖突”這個(gè)命題準(zhǔn)確地說(shuō)應(yīng)該是“單核CPU執(zhí)行流沖突與片內(nèi)多主設(shè)備爭(zhēng)用問(wèn)題的合集”。把所有沖突都?xì)w結(jié)為“線程代碼寫錯(cuò)了”會(huì)漏掉很大一片排查盲區(qū)。4. 定位沖突的實(shí)操手段先把“不可能”排除掉4.1 復(fù)現(xiàn)三件套改時(shí)序、加負(fù)載、調(diào)優(yōu)化級(jí)別線程沖突最磨人的地方在于復(fù)現(xiàn)不穩(wěn)定。很多時(shí)候你盯著代碼看不出任何問(wèn)題因?yàn)樗_實(shí)“大多數(shù)時(shí)候是好的”。為了快速讓問(wèn)題現(xiàn)形我調(diào)試時(shí)一般會(huì)依次做三件事。第一改變時(shí)序參數(shù)。把RTOS的SysTick頻率調(diào)高或者把任務(wù)優(yōu)先級(jí)之間差距拉大讓任務(wù)切換更頻繁。中斷觸發(fā)間隔縮短、DMA緩沖區(qū)調(diào)小、I2C速率調(diào)高都是行之有效的“加速器”。同一個(gè)bug在默認(rèn)參數(shù)下可能跑兩個(gè)小時(shí)才出現(xiàn)把定時(shí)器周期縮短十倍后可能兩三分鐘就暴露了。第二加大并發(fā)負(fù)載。讓容易沖突的任務(wù)在被保護(hù)區(qū)域外做更多無(wú)意義計(jì)算或者增加一個(gè)空轉(zhuǎn)的高優(yōu)先級(jí)任務(wù)專門擠壓低優(yōu)先級(jí)任務(wù)的執(zhí)行時(shí)間。這樣做的目的是增加任務(wù)切換的窗口數(shù)量提高交錯(cuò)概率。第三切換編譯器優(yōu)化級(jí)別。在O0下能跑對(duì)的程序開(kāi)到O2或O3后出現(xiàn)數(shù)據(jù)錯(cuò)亂通常是內(nèi)存可見(jiàn)性或訪問(wèn)次序被優(yōu)化掉了。反過(guò)來(lái)如果O0下都出錯(cuò)那基本可以排除編譯器搗亂問(wèn)題一定出在運(yùn)行時(shí)的交錯(cuò)邏輯上。4.2 GPIO翻轉(zhuǎn)加邏輯分析儀讓亂序現(xiàn)出原形中斷和任務(wù)切換都是微秒級(jí)別的事件靠肉眼或者printf日志根本看不到。最廉價(jià)有效的手段是在關(guān)鍵代碼段的入口和出口各翻轉(zhuǎn)一根GPIO用邏輯分析儀抓波形直接測(cè)量這段代碼實(shí)際占用多少時(shí)間、在哪個(gè)位置被切走了。比如你懷疑I2C傳輸過(guò)程中被打斷就在I2C驅(qū)動(dòng)函數(shù)的開(kāi)始和結(jié)束分別翻轉(zhuǎn)IO1和IO2。正常情況下一次完整的I2C寫操作對(duì)應(yīng)一個(gè)脈沖寬度固定的方波。當(dāng)兩個(gè)任務(wù)搶總線時(shí)你會(huì)看到脈沖被拉寬、中間出現(xiàn)一個(gè)平臺(tái)期說(shuō)明某條執(zhí)行流在這個(gè)窗口里被調(diào)度器切走了。這種方法的優(yōu)勢(shì)是零侵入、零開(kāi)銷。GPIO翻轉(zhuǎn)本身只花幾條指令對(duì)時(shí)序影響極小邏輯分析儀能記錄幾十萬(wàn)條波形足夠捕捉偶發(fā)問(wèn)題。對(duì)比預(yù)期波形和實(shí)際波形往往一眼就能定位是哪個(gè)執(zhí)行流、在哪一段代碼、被搶占了多長(zhǎng)時(shí)間。4.3 別依賴斷點(diǎn)停下來(lái)的一刻沖突就跑了嵌入式開(kāi)發(fā)的常規(guī)調(diào)試手段——斷點(diǎn)、單步、暫?!谂挪榫€程沖突時(shí)基本是失效的。原因不復(fù)雜你在斷點(diǎn)處停住CPU整個(gè)執(zhí)行流的推進(jìn)立刻凍結(jié)那個(gè)原本會(huì)被搶占的時(shí)間窗口也就不會(huì)出現(xiàn)。所以調(diào)試線程沖突時(shí)常見(jiàn)的經(jīng)歷是掛上調(diào)試器跑一整天沒(méi)事跑release版本不帶調(diào)試幾分鐘就崩了。替代方案是用無(wú)侵入日志。在關(guān)鍵位置寫入一個(gè)帶時(shí)間戳的環(huán)形緩沖區(qū)緩沖區(qū)滿了之后把內(nèi)容一次性dump出來(lái)看最后幾十條記錄。由于寫環(huán)形緩沖區(qū)本身只消耗幾微秒而且不會(huì)停止CPU它可以記錄到真正發(fā)生沖突那一刻前后發(fā)生了什么。Cortex-M系列內(nèi)核的ITMInstrumentation Trace Macrocell和SWO引腳也很好用可以直接把日志以極低的CPU開(kāi)銷輸出到PC端。配合工具抓trace你甚至能看到任務(wù)切換的完整序列、每個(gè)中斷觸發(fā)的精確時(shí)刻以及每個(gè)變量的讀寫順序。這套工具鏈比斷點(diǎn)調(diào)試更適合線程沖突場(chǎng)景。5. 修復(fù)單核線程沖突的正解從鎖到不共享5.1 臨界區(qū)要短別在中斷里干重活臨界區(qū)critical section是最直接的沖突解決方案在訪問(wèn)共享資源的代碼段前后關(guān)中斷或加鎖保證這段代碼不被切換打斷。單核處理器上最簡(jiǎn)單的實(shí)現(xiàn)就是關(guān)中斷和恢復(fù)中斷。在裸機(jī)環(huán)境中你可以用類似這種模式保護(hù)一個(gè)短臨界區(qū)uint32_t primask __get_PRIMASK(); __disable_irq(); // 這里訪問(wèn)共享變量或外設(shè)寄存器整個(gè)過(guò)程不會(huì)被中斷打斷 shared_counter; shared_buffer[index] new_data; __set_PRIMASK(primask);但這套操作有嚴(yán)格的成本約束。關(guān)中斷的時(shí)間越長(zhǎng)系統(tǒng)對(duì)外設(shè)事件的響應(yīng)能力就越差。UART輸入緩沖只有幾十字節(jié)你關(guān)中斷超過(guò)一個(gè)字節(jié)的到達(dá)間隔就可能丟數(shù)據(jù)看門狗喂狗被打斷太久也可能直接觸發(fā)復(fù)位。所以臨界區(qū)的使用鐵律是只保護(hù)真正的共享操作保護(hù)區(qū)內(nèi)不做耗時(shí)運(yùn)算、不打日志、不調(diào)用任何可能長(zhǎng)時(shí)間阻塞的函數(shù)。典型可接受的臨界區(qū)長(zhǎng)度是幾十條指令以內(nèi)。如果你的臨界區(qū)代碼很長(zhǎng)第一步不是想辦法延長(zhǎng)關(guān)中斷時(shí)間而是重新設(shè)計(jì)數(shù)據(jù)結(jié)構(gòu)讓互斥的粒度變得更小。5.2 RTOS里用對(duì)互斥量和信號(hào)量進(jìn)入RTOS之后很多人會(huì)把互斥量和信號(hào)量混為一談。兩者在FreeRTOS里本質(zhì)都是基于隊(duì)列實(shí)現(xiàn)的但語(yǔ)義和用途完全不同?;コ饬縈utex用于資源互斥保護(hù)同一時(shí)刻只允許一個(gè)任務(wù)持有它持有者才能訪問(wèn)共享資源訪問(wèn)完后必須釋放。FreeRTOS的互斥量還帶優(yōu)先級(jí)繼承低優(yōu)先級(jí)任務(wù)持有鎖時(shí)若有高優(yōu)先級(jí)任務(wù)等待同一把鎖低優(yōu)先級(jí)任務(wù)會(huì)被臨時(shí)提升優(yōu)先級(jí)避免被中等優(yōu)先級(jí)任務(wù)餓死。信號(hào)量Semaphore用于任務(wù)同步和事件通知一個(gè)任務(wù)釋放信號(hào)量另一個(gè)任務(wù)獲取信號(hào)量表示“我有一個(gè)事件要通知你”。有的人喜歡用二值信號(hào)量當(dāng)作互斥量來(lái)保護(hù)共享資源這在功能上勉強(qiáng)可行但二值信號(hào)量沒(méi)有優(yōu)先級(jí)繼承一旦發(fā)生反轉(zhuǎn)高優(yōu)先級(jí)任務(wù)會(huì)被卡更久而且信號(hào)量能被任意“不知情”的任務(wù)釋放語(yǔ)義上更不安全。在ISR里標(biāo)準(zhǔn)做法是使用xSemaphoreGiveFromISR這類帶FromISR后綴的API來(lái)釋放信號(hào)量而不是直接操作互斥量。所有中斷安全的API都要求在ISR上下文里調(diào)用因?yàn)樗鼈儍?nèi)部會(huì)正確處理中斷嵌套的臨界區(qū)。如果開(kāi)發(fā)中不小心在ISR里調(diào)用了xSemaphoreTake之類的阻塞APIFreeRTOS會(huì)立刻觸發(fā)configASSERT系統(tǒng)直接卡死在錯(cuò)誤斷言處。這個(gè)報(bào)錯(cuò)看起來(lái)嚇人其實(shí)是調(diào)度器在保護(hù)你——阻塞一個(gè)中斷上下文里的執(zhí)行流整個(gè)系統(tǒng)的中斷響應(yīng)都會(huì)癱瘓。5.3 更高級(jí)的解法數(shù)據(jù)所有權(quán)與消息隊(duì)列鎖能解決沖突但鎖本身也有開(kāi)銷和風(fēng)險(xiǎn)死鎖、優(yōu)先級(jí)反轉(zhuǎn)、加鎖粒度不合適導(dǎo)致性能下降。在單核嵌入式環(huán)境下更好的思路往往不是“加鎖”而是從設(shè)計(jì)上避免共享。這里的關(guān)鍵方法是數(shù)據(jù)所有權(quán)。約定一個(gè)數(shù)據(jù)塊在同一時(shí)刻只歸一個(gè)執(zhí)行流所有。一個(gè)任務(wù)想用另一任務(wù)的數(shù)據(jù)時(shí)不能直接去讀對(duì)方的全局?jǐn)?shù)組而是通過(guò)消息隊(duì)列把數(shù)據(jù)“遞過(guò)去”。傳遞完成后發(fā)送方不再持有該數(shù)據(jù)的所有權(quán)接收方獨(dú)占它。這樣整個(gè)系統(tǒng)里不存在“兩個(gè)執(zhí)行流同時(shí)讀寫同一塊內(nèi)存”的情況鎖也就不需要了。FreeRTOS的隊(duì)列本身就是線程安全的它是少數(shù)幾個(gè)可以被任意任務(wù)和ISR安全調(diào)用的組件。利用隊(duì)列做數(shù)據(jù)傳遞比保護(hù)一堆全局變量簡(jiǎn)單可靠得多。唯一要注意的是隊(duì)列會(huì)涉及一次內(nèi)存拷貝對(duì)于大數(shù)據(jù)塊要評(píng)估拷貝開(kāi)銷必要時(shí)用隊(duì)列傳指向內(nèi)存塊的指針配合內(nèi)存池管理所有權(quán)。在采集系統(tǒng)里雙緩沖和乒乓緩沖就是數(shù)據(jù)所有權(quán)思想的硬件體現(xiàn)。DMA寫完A區(qū)后通知CPU“數(shù)據(jù)在A區(qū)”CPU處理A區(qū)時(shí)DMA寫B(tài)區(qū)下次交替。兩個(gè)執(zhí)行流永遠(yuǎn)只碰各自的區(qū)域沖突和鎖全部消失。5.4 架構(gòu)級(jí)別的避坑習(xí)慣接觸線程沖突問(wèn)題多了之后我總結(jié)出幾條從源頭上減少?zèng)_突概率的架構(gòu)習(xí)慣。中斷服務(wù)函數(shù)里只做三件事置位標(biāo)志位、讀寫輕量級(jí)緩沖區(qū)、觸發(fā)更高優(yōu)先級(jí)的外設(shè)操作。任何需要長(zhǎng)時(shí)間處理的東西都延后到主循環(huán)或?qū)S萌蝿?wù)里做。那些“順手在中斷里printf一下”、“順手在中斷里調(diào)用delay”的習(xí)慣遲早會(huì)以更隱蔽的線程沖突方式還回來(lái)。再有就是全局變量的治理。新建一個(gè)全局變量時(shí)先問(wèn)自己誰(shuí)會(huì)寫它誰(shuí)會(huì)讀它寫和讀是否可能發(fā)生在不同的執(zhí)行流如果答案是“中斷和主循環(huán)都有訪問(wèn)”那么這個(gè)變量必須配合volatile、臨界區(qū)或原子操作一起使用。很多老代碼編譯不報(bào)錯(cuò)、運(yùn)行不崩潰但就是會(huì)“偶爾不正?!备赐驮谟谖词鼙Wo(hù)的全局共享變量太多。最后一條是刻意制造時(shí)序壓力測(cè)試。開(kāi)發(fā)完成后不要只跑正常邏輯我習(xí)慣把中斷頻率、任務(wù)負(fù)載、協(xié)議速率都往上調(diào)讓系統(tǒng)在高壓力下連續(xù)跑幾個(gè)小時(shí)或幾天。如果高壓力下不崩那正常負(fù)載下系統(tǒng)具備的容錯(cuò)余量就非??捎^了。這個(gè)方法在LTO優(yōu)化、高優(yōu)先級(jí)搶占、外設(shè)并發(fā)滿載等場(chǎng)景下特別管用。6. 一個(gè)完整復(fù)盤ESP32上溫度數(shù)據(jù)錯(cuò)亂的48小時(shí)最后分享一個(gè)我自己在ESP32開(kāi)發(fā)板上處理的真實(shí)案例完整走一遍從現(xiàn)象到定位到修復(fù)的排查鏈路。項(xiàng)目是一個(gè)環(huán)境監(jiān)測(cè)節(jié)點(diǎn)ESP32跑FreeRTOS兩個(gè)任務(wù)任務(wù)A每500ms讀取一次BME280溫濕度傳感器任務(wù)B每100ms把最新數(shù)據(jù)刷新到SSD1306 OLED屏上。兩個(gè)任務(wù)復(fù)用了同一條I2C總線驅(qū)動(dòng)是兩個(gè)不同庫(kù)各自維護(hù)自己的狀態(tài)變量。現(xiàn)象是溫度值每隔一段時(shí)間會(huì)跳變到0xFF或者一個(gè)明顯不對(duì)的數(shù)OLED屏幕上偶爾出現(xiàn)亂碼和雪花塊。嚴(yán)重的時(shí)候I2C總線像死掉一樣之后所有傳感器讀取全部失敗只有重啟才能恢復(fù)。第一個(gè)直覺(jué)是傳感器壞了。換了一顆全新BME280跑了半天問(wèn)題依舊。然后把I2C速率從400kHz降到100kHz情況只是稍微好轉(zhuǎn)沒(méi)有根除。接著用GPIO翻轉(zhuǎn)加邏輯分析儀的方法在I2C驅(qū)動(dòng)讀寫的入口和出口各抓一根IO。波形出來(lái)后問(wèn)題一目了然一次原本應(yīng)該在5ms內(nèi)完成的傳感器讀取實(shí)際占用了15ms中間出現(xiàn)了整整10ms的“空窗期”——任務(wù)在讀寫過(guò)程中被調(diào)度器切走了。被誰(shuí)切走的呢看任務(wù)優(yōu)先級(jí)發(fā)現(xiàn)任務(wù)BOLED刷新優(yōu)先級(jí)比任務(wù)A傳感器讀取高。把兩個(gè)任務(wù)的實(shí)時(shí)調(diào)度翻出來(lái)看問(wèn)題鏈條非常清晰任務(wù)A發(fā)起I2C讀操作剛剛發(fā)完從設(shè)備地址、還沒(méi)讀完數(shù)據(jù)字節(jié)時(shí)任務(wù)B就緒搶占CPU開(kāi)始執(zhí)行OLED的I2C寫操作。兩個(gè)執(zhí)行流同時(shí)操作同一套I2C控制器的寄存器數(shù)據(jù)線和時(shí)鐘線的時(shí)序被交錯(cuò)撕裂總線上出現(xiàn)了非法電平組合部分從設(shè)備直接進(jìn)入異常狀態(tài)。修復(fù)方案選了最直接的一種給I2C外設(shè)加互斥量。每個(gè)任務(wù)在發(fā)起I2C傳輸前xSemaphoreTake傳輸結(jié)束后xSemaphoreGive。兩個(gè)庫(kù)各自持有的狀態(tài)變量也被收攏到同一個(gè)模塊里確保I2C控制器的寄存器訪問(wèn)始終在鎖保護(hù)范圍內(nèi)。FT5316——不對(duì)是BME280和SSD1306——從這一刻開(kāi)始不會(huì)再被兩個(gè)執(zhí)行流并發(fā)操作了。加了互斥量之后同樣在高負(fù)載下連續(xù)跑了兩天溫度數(shù)據(jù)始終平穩(wěn)OLED顯示正常未再出現(xiàn)總線死鎖。接著我把架構(gòu)順手改成了數(shù)據(jù)所有權(quán)模式傳感器任務(wù)讀到的數(shù)據(jù)放進(jìn)隊(duì)列OLED任務(wù)只從隊(duì)列取數(shù)據(jù)兩個(gè)任務(wù)連共享全局變量都不存在了。I2C總線只在傳感器任務(wù)里被訪問(wèn)OLED任務(wù)不再碰I2C控制器連互斥量都可以去掉。這48小時(shí)的經(jīng)驗(yàn)值得總結(jié)的其實(shí)就一句話單核開(kāi)發(fā)板上的線程沖突天然比多核更隱蔽因?yàn)槟惚仨氃凇按a正確”之外還要意識(shí)到執(zhí)行流的交錯(cuò)隨時(shí)可能發(fā)生。學(xué)會(huì)用GPIO翻轉(zhuǎn)和邏輯分析儀把“看不見(jiàn)的切換”變成“看得見(jiàn)的波形”習(xí)慣用鎖保護(hù)臨界區(qū)、用隊(duì)列傳遞所有權(quán)很多讓新手抓狂的偶發(fā)bug都能以非常低的成本定位和修復(fù)。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
一摸二插三插| 亚洲精品九九九| 插插综合网天天影视网| 奇米四色网| 国产www色在线观看| 少妇二级| 超碰成人人人爽人人爽| 无码少妇精品一区二区60岁老人| 国产精品视频播放| 国产女人视频三四五区| 嗯啊不要啊在线| 中文字幕女同在线| 久久久国产av美女私房| 大香蕉色网| 国产精品农村妇女精品| 乱色视频中文字幕| www.av不卡中文字幕| 亚洲成人黄色在线观看| 97se综合网| 毛片久久| 国精综合一二三区影视| a亚洲欧美色欲| 色999人与兽| 综合网少妇| 国产一区二区三区影片| 久久精品成人| 看一级黄色视频| 国产超碰欧美| 久久久国产成人一区二区三区在线| 欧美色图成人网一区二区| 日韩一卡二卡三卡| 伊人久久婷婷| 亚洲人妻精品一区二区| 国产高清1234区| 男人天堂新在线| 国产成人无码网站在线视频| 麻豆久久一区二区三区| 日韩三四五区| 白丝被操91| 亚洲精品蜜桃久久久一区二区三区| 91 偷| 久久黄人人爽视频| 国产高清成人mv在线观看| 色97| 久久av一级av少妇av高潮| 亚洲色图a| 中文字幕日韩专区精品系列| 97久久久精品| 在线强奷到舒服的无码视频| 久久精品国产亚洲粉嫩| 色综合中文字幕不卡| 国产精品com| 一色网男人的天堂| 亚洲国产精品无码AV久久久| 东北老女人的激情视频| 色就色综合| 蜜桃精品视频一区| 国产一区二区三区影片| 国产亚洲精品A在线观看下载| 热天堂一区二区| 青青免费在线视频一区| 色哟哟AV| 啊啊啊啊嗯嗯嗯用力好爽 | 91成人久久 | 啪啪啪精品| 国产美女激情| 操屄不卡视频| 啊啊啊啊啊好多水| 99操| 亚欧日韩成人| 欧美亚洲天天| 99RE在线视频精品,这里只有精品| 岛国免费黄色网址| 无人区高清电影免费观看一区二区三 www.qmcai2.com | 91亚洲网| 97一本大道亚洲一区| 中日韩欧美精品无码AⅤ一区二区| 97中文字幕一区| 久操大香蕉手机视频在线看 | 国产精品操| 青娱乐大香蕉| 狼人综合婷婷激情四射 | 大乔未久88一区| 青青免费在线视频一区| 老熟女综合| 亲子敌伦对白在线播放| AV色五月| 蜜臀AV一区二区三区| 精品视频日日夜夜| 亚洲精品aa久久伊人| 人妻精品一区二区三区| 日韩78m视频| 91狠狠色丁香婷婷综合久久| 色在线亚洲视频www| 欧美色老汉| 夜夜高潮夜夜爽高清视频一| 欧美精品日韩一区二区| se吧提供91精品国产91久久久久久| 龙兴卡官方查询| 99热这里只有精品8| 日本性爱欧美性爱| 日韩无码极品| 国产白丝网站| 日韩丨制服丨中文|在线| 亚洲综合小说另类图欧美视频激情小说色五月天 | 最新av网站在线观看| 老色鬼成人精品视频下载大在线观看| 久久一区无码| 死我十八禁| 天天插天天插| 亚洲在线网站| 又黄又硬又粗又长国产视频| 91精品成人| 屌逼麻豆| 中文字幕亚洲热播人妻| 日韩熟女无码| 国产精品九九九| 超碰97人人乐| 伊人精品国产| 男人 天堂 日 亚洲| 一起草AV| 99ri在线视频| 久久欧美性爱视频| 无码人妻丰满热妇又大又粗| 色狠狠 - 百度| 久久久性| 干B| 五月丁香在线| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 蜜桃视频精品一区二区| 国产不卡免费在线视频| 亚洲欧洲日本精品中文a∨| 色欧美色交综合| 97超碰无码网| 亚州成人A√| 熟妇女伦乱视频| 国产精品久久久久999| 91伊人大香蕉| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 天天色黄色影院天天操| 丰满美女一级毛片在线播放| 青娱乐999| 精品久久久久久中文字幕视频免费 | 69人妻精品丰满熟女区| 婷婷精品| 精品久久久久,69国产成人精| 91性情| 亚洲91射| 九九热精品| 无马一区二区| 成人性交午夜免费片| 9美女超碰在线免费观看| 欧美精品久久| 日韩欧美偷拍美女视频| 亚洲欧美综合网站| 麻豆一区二区三区在线看| 亚热日本熟女| 亚洲天天天| 五月天欧美色图| 黑人中出21连凳花野真衣| 一级黄色性爱裸体视频| 精品亚洲| 一本一道波多野毛片中文在线| 日本一区二区三区免费观看| 国产精品亚洲一级av第二区| 性开放中文AV高清无码免费看| 99久久久无码精品国产人| 日韩极品无码B| 一区二区三区四区免费视频| 操美女高潮抽搐白浆| 性爱1区| 婷婷五月天成人网| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 热热热热日日漂亮永久永久国产日| 在线综合 亚洲 欧美中文字幕 | 欧美爱爱97| 亚洲婷婷丁香在线| 免费av在线播放二区| 中文字幕AV乱伦| 久久久久亚洲av综合波多野制衣| 欧美日韩国产三级黄色| 男女香蕉一区二区| 一级做受视频免费是看美女| 亚洲黄色视频在线观看视频| 亚洲码在线中文在线观看| 久久久久久久免费A片国产成a人亚洲精∨品无码| av激情亚洲五月天| 欧美日韩国产黄色片| 欧美日韩性爱无码| 玖玖久久久| 白丝一区| caoni国产亚洲av| 久精品无码av一区二免费国产在线观看| 色婷婷综合网站| 美女啊啊啊啊pc| 9 7超碰在线免费观看| 麻豆国产成人精品| 三四中文字幕| 另类亚洲一区二区三区| 东京热男人的天堂网| 精品久久久av| 久久久内射良家| 久久久999| 亚洲AV无码黄色强奸| 熟女人妻av在线资源,黄色的资源| 狠狠搞 亚洲91| 操逼无毒无码免费视频| 欧美91精品国产自产| 操操逼操操逼操操逼逼| 校园春色之综合网| 色噜噜人妻丝袜a∨先锋影| 久99热| 十八禁黄色成人网站观看| 人妻大香蕉| 操屄日韩| 熟妇人妻精品一区二区视频色欲| 一摸二插三插| 国产乱色国产精品免费视| 一级久久性爱视频| 天天日美女的B| 亚欧美色| 色五月av| 啊v在线观看视频| 久久毛卡| 夜草欧美| 亚洲欧洲中文日韩女优乱码| 91狠| 欧美大的香蕉有线电视视频 | 亚洲丝袜二区在线| 国产日韩色综合| 一区二区激情国产熟女| 亚洲欧洲综合视频在线| 蜜桃传媒一区二区亚洲| 人人妻人人爽| 91Chinese在线| 香蕉色网| 26uuu性物| 天综合网| 麻豆国产97在线| 午夜免费视频1000| 男人天堂新在线| 美女自卫慰黄网站免费| 久久久久久久久久久久久女过产乱-少妇高潮一区二区三区喷水-成人AV | 裸模AV女优| 免费视频一二三区| 婷婷AV一区二区三区| 日韩美一区| 中国的操老妇女| 久久这里是精品| 五月天伊人| 欧美72网页| 情色五月天就去干| 日韩亚洲欧美中文字幕| 蜜臀th| 亚欧美天堂在线| 九九五月天| 国产午夜激片Av毛片不卡| 久久精品72| 国产精品视频内谢女人| 99热99re超碰精品| 久久超碰97| 天天爱天天韩国日本牛牛牛牛| 国产精品69久久久久孕妇欧美 | 欧美性生活男人的天堂| 久久亚洲不卡| 国产久久久久久| 国产精品一二三区福利| 国产精品熟女一区二区三区| 日韩紧密久久| 亚洲视频一二区| 69XX一中文字幕人妻91| 97色诱| 人人做天天爱| 色香阁在线| 呦呦一区| 18禁久极品美女久久哦哟呀!| 日韩三A大片在线观看| 九一精品牛牛一区二区| 久久91精品国产9丨久久分亭| 青青青艹在线视频| 日本性爱欧美性爱| 亚洲做性| 亚洲不卡不卡中文字幕不卡| 男人的天堂午夜av| 国产丝袜一区二区三区| 亚洲天堂区| 精品78| 91被操| 久草色悠悠在线视频| 精品国产一区二区三区四区在线看| 亚州中文字幕超碰97| 国产精品久久成人免费| 青草地一本线一区二区三区| 中文字幕在线观看第二页| 看全色黄大色大片免费视频| 欧洲精品人妻| 久久激情综合| 久久超碰国产一区二区三区| 大香蕉日亚洲日本亚大| 殴美,日韩国产伦精品| 黑人精品XXX一区一二区| 亚州中文字幕超碰97| 99精品成人免费看| 久久久久久无码人妻中文字幕| 日韩av乱伦| 亚洲 无码 偷拍| 日本一二三高清| 久久精品国产亚洲AV无码电影| 欧色网址| 国产福利在线视频网站| 青青草五月份天| 日本天天吊| .精品人妻一区二区三| 97超碰总站| 伊人成人中文字幕久久网| 国产黄色小视频网站| av影院十区| 超碰综合色| 五月婷婷综合在线| 天天干天天狼在线视频| 中文字幕一区二区三区四区在线视频| 加勒比色99999| 欧美大香蕉97| 日韩AC| heyZO天然素人无码AⅤ专区| 日本久久久久久久久久| 91爱看| 欧美18禁91| 久草大| 国内精品a| 99热| 91性感在线| 亚洲欧美综合网站| 日韩不卡网操逼中文字幕日韩| 人妻天天操天天爽视频免费| 激情综合五月丁香| 人摸人人操人| 黄色区免费观看中文字幕| 另类图片综合| 超碰99re| 精品久久97| 亚洲综合伊人| 欧美亚洲国产日本在线,久久精品国产| 97国产色综合| 国产亚洲一黄| 裸体美女免费看网站青草| 国产树林里野战在线看| A V视频日本| 国产精品999aaa| 嗯嗯不要视频| 99re在线| 2021国产成人精品久久| a片久久久久久久久久久久 | 天天欲望网| 人妻大香蕉| 国产精品午夜福利视频| 91在线限制级| 亚洲欧美色综合| 澳门成人网站久国产日韩| 日韩pv中文| 亚州色交| 国产天天骚| 91 丝袜在线| 97超碰久久色| 午夜啊啊| 国产在线播放成人免费| 午夜人人操| 麻豆综合一区av| 狠狠色伊人亚洲综合网站色| 亚洲一曲日韩精品| α√在线| 女优视频第10页| 中文字幕 一区二区 亚洲无码| 69AV女优男人的天堂| 97色97好| 东京热AV男人的天堂| 啊啊啊啊好疼| 日欧操屄| 欧美婷婷| 欧美78| 四虎884| 免费试看60秒| 欧美另类精品xxxx| 五月天婷婷激情| 国产又黄又猛又粗又爽的网站| 嗯嗯啊啊亚欧精品| 日韩精品人妻中文字幕不卡乱码| 夜夜骑夜夜操| 黄色毛片A片| 精品少妇后入一区二区三区四区人妻巨乳 | 岛国1区2区3区在线观看| 久久五十路熟女人妻| 青娱乐日韩无码| 欧美专区在线| 啊啊啊啊在线播放| 麻豆区99999| 日韩美脚一区二区网站| 超碰97网址| 久久久久久无码人妻中文字幕| 91亚洲黑人| 久久色人体| 九一精品牛牛一区二区| 久操视频这里只有精品| 性爱视频免费网址| 超碰人人超在线观看| 欧美午夜精品久久久久久超碰| 亚洲淫乱骚妇AV| 日日躁狠狠躁天天躁精品| 欧美成人性爱视频在线播放| 国产做?爰片久久毛片?片美国| 手机av天堂久久久久| 97超色| 成人五月天丁香激情综合| 操逼操逼逼操操逼91| 久久最新免费视频23| 亚洲精品不卡一二三区| 色欲av一区二区三区蜜芽| 日韩人妻丝袜美腿中文| 98精品国产乱码久久久久久| 清纯唯美综合亚洲| 国产亚洲深夜激情| 美女刺激久久国产欧美| 精品国产一区二区久久| 亚欧美天堂在线| 久久久月天| 91影库| 国产乱码久久| 精品国产a∨一区天美传媒| 天天干天天拍| 人妻喷水| 久草国产在线视频| 国产毛片毛片4p懂色| 强奸国产在线| 操人妻逼91| 色汉综合| 综合熟女| 欧美91色| 国产精品久久久久久照片| 婷婷综合激情| 日韩无码服务区| 强奸乱伦大香蕉| 麻豆天美制片厂网站视频| 欧美AB在线| www.99视频| 久久久一二三四区| 欧美性爱另类综合| 免看60秒涩涩视频| 一本一道vs波多野结衣| 91美女看B| 6080YYY午夜理论片在线观看| 国产精品乱人伊人网| 国产97在线 | 亚洲| 丁香五月婷婷色| 美女十八禁| 国产97色在线| 男人天堂导航| 婷婷五月天_亚洲小说欧美激情另类_精品久久国产字幕 | 综合久久婷婷| 中文字幕一区二区无码成人| 久久女婷| 人人妻人人爱人人玩| 九九九九久久久| 亚洲色人阁| 亚洲国产第一页综合视频| 不卡视频一区蜜桃视频| 夜夜爽爽爽| 97久久精品| 91女人的网站| 亚洲男人久久综合天堂| 色99在线| 3P丝袜熟女 色综合| 日本1区2区不卡视频| 日本久久久精品电影| 大香蕉一线视频| 九99久久| 色综合色欲色综合色综合色综合| 亚洲资源吧| www.99色| 无码一区免费在线不卡| 色www精品视频在线观看| 手机在线中文字幕国产| 97色婷婷| AV天天在线观看| 狠狠狠一区二区三区| 色婷婷蜜臀av| 成人aⅴ一区二区三区| 欧美黑人精品一区二区| 美女t无毒不卡不卡| 五月天婷婷基地| 97超碰精品| 99啪啪| 嫩草影院性色| 淫荡网址| 大香蕉之青青草原| 天天做天天爽| 你懂的在线观看区国产| 伊人午夜福利视频| 狠狠狠狠狠| 精品国产无码中文| 国产在线激情| 日本最新免费韩国1区2区视频播放| 多乙久久久久久| 91亚洲情色| 一本一首道人妻少妇免费久久| 精品一区二区人妖| 欧美性xxxxx狂欢| 天天干人妻| 韩日精品四区| 国产人妖视频一区在线观看| 国产精品剧情| 国产精品久久久久久9999| 亚洲男人天堂Av| 北约熟女超碰| 9999久久久| 日本免费一区二区不卡| 久久久久久久 九九九九九九九| 午夜男人av| 天天日夜干| WWW美腿丝袜香蕉中文| 蜜臀久久99精品久久综合| 变态乱伦伪娘灌肠一区二区| 久久69| 亚洲欧美91√| 久久久18禁| 天天综合91在线| 操逼视频亚洲| 精品国产三级av韩国在线 | 亚洲天堂自拍| 亚洲精品色| 免费看黄视频亚洲网站| 免费观看成人www精品视频| 超碰97极品9| 岛国黄片网站| 九九99精品视频在线观看| 国产精品网址| 天天搞欧美| 自拍视频大全亚洲专媒视频/一区二区三区| 国产成人网站在线观看| 亚洲成人无码影院| 八戒无码国产午夜福利| 久久久999| 蜜臀99久久国产| 一区二区不卡免费| 91 亚洲情侣偷拍 久久| 六月丁操逼| 一区二区久久天天干狠狠| 欧洲熟妇xxXx欧美老妇裸体| 操逼操网| 欧美亚洲日本视频久久久| 欧洲亚洲国产综合在线| 久久天堂| 在线观看中文字幕| 啪啪啪亚欧美视频| 澳门色噜噜色噜噜色噜噜色噜噜色噜噜| 91国精产品| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 人妻人人做人人澡人人爽欧美一区| 性videos欧美熟妇hdx| 青青草好吊色| 免费视频97| 夜夜欧美 | 美女极品一区二区三区| av无线看| 国产不卡免费在线视频| 青椒国产97在线熟女| 日韩中文字幕精品一区在线| 人人操人人插人人摸人人干| 国产网红精品| 激情综合网五月婷婷五月天| 国产99久久99热这里只有精品15| 亚洲AV无线| 天天做日日做天天欢。| 强奸乱伦av电影| 每日更新AV| 国产精品香蕉热久久新品| 黄色免费网页无码| 熟女人妻一区二区三区| 97操操| 精品一区二区啪啪啪| 六六久久日韩不卡| 91亚洲精品青草| 伊人色综合超碰| 亚洲AV永久无码精品成人调教 | 一区不卡在线观看av| 欧美日韩大香蕉| 午夜精品久久久| 国产成人在线观看网址| 乱伦熟妇一区二区| 日韩国产不卡在线视频| 亚洲国产高清福利视频| 日本黄 R色 成 人网站| 中文字幕黑人大片| 蜜桃视频一区二区三区在线观看| 超碰综合色| 色777999综合| 免费视频一二三区| 翔田千里Av在线| 盗摄女人妻在线| 日本肉体xxxx裸交| 亚洲色图91欧美日韩| 色天使大香蕉| 蜜臀在线看片| 啪啪视频免费在线观看| 思思热久久成人| 婷婷五月天影院| 国产久久视频| 黑人综合色| 99无码| 中文精品一区二去| 操人无码| 91激情网| 人妻少妇精品视频一区二区三区| 亚洲日韩精品久久久久一区壹牛 | 黄色片A级一区二区三区| 日韩Va亚洲va欧美Ⅴa久久| www九九热| 久久欧洲| 97亚洲中文| 国产精品日韩在线一区| 色综合久| 午夜后入| 日韩欧美日韩| 一级A片女人高潮叫床| 爱爱动态120秒| 加勒比少妇AV婷婷六月天超碰超碰| 97中文热色| 久久国产乱子伦精品免费女人| 国产成人+综合亚洲+天堂| 久久精品老司| 农村少妇久久久久久久| 天天激情干| 欧美日不卡| 久久99深爱久久99精品| 丰满人妻区一区二区三| 黄色高清无码无码破解免费暗网 | 特级毛片特黄久久免费看| 欧美午夜精品久久久久久超碰| 亚洲色入欧美| 日韩AV熟女乱伦| 熟女激情综合网| 日韩中文字幕二区| 使劲用力艹少妇视频一区二区| 色妺妺AⅤ| 中文激情网| 俺也射| 热久久无毒不卡| 精品人妻一区二区三区日产| 亚洲色图欧美视频| 伊人伊人LD| 国产偷人伦激情在线观看| 9l视频自拍9l九色成人| 啊啊啊好疼| 在线观看高清AV| 91人人看| 老女人综合网| 大香樵伊人网| 日比av无码| 亚洲国产一区二区三区四区国产| 亚洲熟久久| 国产精品露脸在线观看| 夜夜高潮夜夜爽高清视频一| 天天噜| 激情综合五| 91黄射| 熟女六十路| 欧美在线干| 国产亚洲精品av一区| 91挑色欧美| 亚洲国产av中文字幕久久| 免费农村成人少妇人妻Aa一区二区视频| 偷拍盗拍亚洲色图图片| 婷婷香蕉| 久久一区二区蜜桃| 水野优香在线观看| 野狼福利社区| 日韩偷拍色图| 国产乱伦视频污| 亚洲精品一区二区三区新线路| 91五十路| 夜夜狼人妻| 人人操,人人插| 亚洲永久AV无码精品秋霞| 亚洲欧洲中文日韩女优乱码| 日日干夜夜操视频h| 欧美性爱日韩高清| 久久久久9999妇女| 天天操天天干一区二区| 欧美玖玖爱免费玖玖| 国产小黄片在线免费观看| 久久人妻无码毛片A片麻豆| 久久精品店| 精品一区二区2| 欧美操人| av影片在线观看不卡| 国产自产91区13区| 国产日韩手机视频在线| 男人的天堂日本东京热| 国产乱码精品一区二区三区四川| 91在线丝袜| 色色色综合网| 久久精品国产亚洲AV清纯| 狠狠干精品一二三四五六2022| 午夜国产乱伦视频| 风骚少妇视频中文字幕| 亚洲欧洲网站免费观看| 午夜精品久久久久久久久久久久久 | 综合五月天| 久热色情精品| 中文字幕乱码人妻二区三区| 亚洲天堂电影网| 欧美很很操视频| 综合第一页| 96免费视频在线| 黄色视频特级毛片| 亚洲视频精选| 亚洲欧洲无码97久久精品| 特级丰满少妇一级AAAA爱毛片| 密臀在线视频| 另类亚洲图色| 亚欧高清在线| 96精品在线| 午夜a成v人电影| 99re这里| 婷婷亚洲天堂| 成人小说另类在线| 夜色97| 久久黄黄| 国产区91柔拿会所技师| 亚洲成成熟女人综合一区二区| 宅男午夜在线视频| 日本操嫩b网| 97在线免费视频观看| 狠狠夜色午夜久久综合在线| 伊人五月天| 天天射天天| 精品无人区麻豆乱码1区2区图片| 九九久久久久久爱| 8050午夜少妇无码| 女性喷水高潮在线观看| 夜夜操夜夜高潮夜夜爽国产精品区| 91丝袜美女国产| 中国少妇XXXX做受| 女人久久久| 亚洲欧美91√| 亚洲综合图文| 夜夜操狠狠操| 天天视频黄网站| 色吧 综合| 美女天天干| 欧美中字二区| 三级色综合| 91热热色| 九区国产| 99国产精品在线观看| 强奸乱亚洲| 久久受www免费人成| 鸥美中出| 日韩成人人妻网站| 国产熟女二区| 啊啊啊好湿久久| av中文在线| 果冻国产精品麻豆成人av| 久久黄片国产一区二区| 97综合在线| 深夜激情 | 中文字幕一区 二区三四五 区日 日骚| 国产欧美一级在线观看| 色欲Av人妻精品一区二| 亚州色综合| 后入合集| 91美女高潮| 亚洲图片 激情小说| 中文乱码99| 亚洲天堂东京热| 99热综合| 色婷婷网| 日本3级一区二区免费| 伦伦成年午夜免费视频| 黑人美精品 A片| 富女玩鸭子一级毛片| 亚欧美色| 91bbb| 久久东京热久久| 97操b| 91色欧美| 欧美综合色图网| 天天干人妻视频| 一本大道久| 欧美九一精品久久久熟妇| 日韩不卡网操逼中文字幕日韩| 九九成人精品| 九九夜精品九九在线| 精产国品一区二三产品| 亚91亚洲网| 久久夜色一区二区| 屌妞视频久久久久久久 | 91总综合网| 久久偷拍人| 精品无码一二三四区| 97色色国产视频| 午夜精品久久久久| 亚州春色| 91国精产品| 啊啊啊啊啊舒服| 97超碰人操| 人人九九精| 日本二区不卡| 97欧美综合网| 丝袜美腿亚洲| 成人蜜乳小视频网站| 国产精品麻豆成人av| 无码直播久久久| 波多野42部无码喷潮在线观看| 国产免a费看黄片在线| 亚洲国产成人精品久久久国产成人一区二区三.| 福利视频香蕉免费一区二区在线| 综合亚洲欧美精品日韩?v| 国产91av在线播放| 上海一级黄片| 在线看免费无码AV天堂的| a在线观看| 中文字幕一区 二区三四五 区日 日骚| 后入美女国产| 欧美日韩理论一区| 偷拍综合亚洲| 老熟女综合网| 91春色| 午夜福利无毒不卡| 成人福利视频网| www.婷婷六月天| AV一二区| 精人妻无码一区二区三区伊人直播| 超碰在线日韩一区| 亚洲国产精品无码AV久久| 国产真乱mangent| 国产精品视频一区二区三区八戒| 精品国产精品一区二区| 美女啊啊啊啊啊啊啊| 91麻豆天美传媒HD| 欧美手机在线综合| 亚洲色图一区二区三区| 免费啪啪av| 亚洲av无码成人精品国产| 美女诱惑爱爱| 久久久久78| 亚洲少妇视频| 欧美伊人久久综合网| 丁香五月激情综合国产| 亚洲伊人久久精品狠狠在线| 国产性爱欧美性爱在线| 高清孕妇孕交 交| 一二三四视频中文字幕在线看| 熟女突然公开看18禁影片| 校园春色之综合网| 色亚州人久干视频在线观看免费版| 伊香蕉综合久久久久久久噜噜噜| 啪啪啪精品| 91啪啪视频| 最新av在线| 国产97亚洲| 色噜噜精品一区二区三| 青青青操| 午夜福利合集| 日本日逼高清| 日本人体九九九九九九| 91精品又粗又猛又爽| 亚洲色婷婷久久久综合日本| 人人操,操人人| 欧美 中文字幕 一区| 九九久久首页| 绑缚麻绳人妻寝取完整版| 精品人妻15区| 97在线观看播放视频| 久久午夜伦| 亚洲在钱| 99re国产精品视频| 久久发布国产伦子伦精品| 后入综合久久| 黄色电影观看久久9| 亚洲欧洲美腿丝袜| 麻豆av一区二区| 家庭乱伦网站国产| 2019AV天堂| 七月婷婷综合| 在线只有精品| 欧美综合自拍亚洲综合图| 亚洲成aⅴ人片不卡无码| 91爱综合| 欧美96在线|欧| 性爱乱伦网址| 欧日韩在线观看| 人人干人人操人人爱| 国色天香av| 蜜臀99久久国产| 免费啪啪啪网站18岁| 精品九九九九九九九九九| 国产91亚洲精品一区二区三区| 嗯啊不要在线观看嗯啊| 中文字幕熟女人妻丝袜丝| 在线观看AV片| 综合色拍| 国产精品永久免费10000| 夜夜爽妓女| 日韩三级一区 | 亚洲欧美人妻| 玖玖视频在线资源一区二区三区| 综合少妇网| 色情五月丁香| 深夜激情| 婷婷综合网站| 久久久久女教师免费一区 | 久草加勒比一区在线| AAA久久| 一区二区无码视频| 黄页视频网站野外| 99re热| 一区二区三区四区免费视频| 98福利在线视频| 日韩精品人妻一| 中文字幕人乱码中文字的预防方法 | 综合久久中文字幕综合日韩精品| 中文字幕色AV| 成人性爱电影一区二区| 亚洲蜜臀精品视频久久| 国产精品视频精品一二| 精品人妻一区二区三区蜜桃视频| 曰韩av中文字幕专区| 东北女人性交| 色五月首页| 欧美日韩亚洲天堂| 亚洲欧美校园另类春色| 日韩无码极品| 成人综合视频久久| 日韩亚洲精品一区二区| 综合激情一一91| 日亚韩精品视频二区三| 97资源站国产精品| 五月花婷婷| 久久性爱视频免费看| 亚洲乱色视频一区、二区在线| 久久性生大片免费观看性| 亚州人妻| 国产亚州精品美女久久久免费| 变态另类专区| 国产精品天美传媒| 日韩免费高清大片在线| 成人一区二区三区四区| 亚洲砖码砖专无区2023| 60秒不遮不挡| 殴美牲| dy888午夜老子影视达达兔| 久久久久久久久久久久久久久乱码| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 欧美|91色综合| 超碰日韩人妻| 试看60秒| 亚洲精品成人| 91亚洲色图| 淫骚熟女一区二区三区| 人看人人摸人人操| 亚洲欲色| 超碰97最新人妻| 国产成人无码久久精品| 水多多映视AV| 加勒比东京热五月天天堂网| 丁香六月激情| 岛国激情视频在线观看| 亚洲日韩狠狠撸视频| 人人喜人人妻| 青娱乐国产盛宴视频| 欧美激情高清性猛交| 超碰97玖玖爱| 成人性爱电影一区二区| 中文字幕在线免费观看2| 97干综合网| 亚洲五月丁香花狠狠干一区二区三区| 国产美女口爆吞精视频| 久久久性少妇| 亚洲 图片 欧美 色图| 伊人久久大香大香线蕉中文| 免费岛国一级片| 五十路熟女,国产欧美精品区一区二区三区| 亚洲少妇色| 日本视频一区二区三区| 国产女人视频三四五区| 日韩不卡一二三四| 96精品在线| 国产精品久久久久久片| 亚洲九九九| 91在线一起| 国产91精品久久久久久久网曝门| av一区二区三区 中文| 100啪啪视频大全| 91色夜| 亚洲一区亚洲天堂| 热天堂一区二区| 国产激情在线观看| 久久亚州精品成人Av无| 青草一区二区| 夜夜夜夜爽| 双插在线| 天天欧美色| 高清在线偷拍自拍视频| 国产乱伦亚洲| 久久久久久精| 日韩久射综合| 97视频新免费| 黄网站黄视频网站进入口| 国产精品一二三区福利| 亚洲色图欧美视频| 日本一区视频在线观看| 啊啊啊啊啊好多水| 蜜桃久久一区| 亭亭在线资源| 欧洲精品在线播放| 亚洲情色五月天| 丁香五月性| 伊人黄色视频免费观看| 国产AV激情无码久久无码| 校园春色中文字幕AV| 亚洲熟妇图片| 激情99| 欧美性爱在线无码| 中日韩久久久| 日本欧美一区二区三区视频麻豆| 蜜臀久久99精品久久久电影| 国产999精品久久久| 女同性恋中文字幕| 亚洲精品白丝| 熟女网站最新| 色综和网| 怡春苑东京热| 另类av天堂| 欧美精品第四五页中文字幕在线观看| 天天色悠悠激情| 黄色网址久久精品欧美喷水| 五月丁香综合网| 99无码视频| 国产久久久久久久久一区二区| 久久精品国产亚洲AV高级北京| 亚洲精品无码成人久久久99| 日本黄色大片一级视频免费麻豆| 人人操,人人插| 国产AAAAAABBBBB| 91精品人妻一区二区三区蜜桃| 欧美成人亚洲精品| 江都AV在线| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 91欧美丨精品丨入口| 亚洲精品欧美专业| 亚洲第一页欧美| 99抽插| 老熟女中文字幕高清| 一区二区三区成人 | 久久久久久九九九| 久久精品| 日本操逼aaaaa| 国产家庭乱伦性爱视频| 91人妻精华帖| 色乱二区| 男女一级A片大黄,一进一出| 丁香五月婷婷基地| 婷婷色一区| 嗯……啊…嗯嗯…啊…好舒服| 大香蕉欧美伊| 成人在线永久| 天天操狠狠日夜夜干超碰撸com视频在线观看 | 亚洲一级特黄大片在线播放91| 少妇xx精品| 亚洲操逼无码| 99久久久久| 91亚洲人电影| 亚洲 图片 欧美 色图| 99热在线不卡| 久草精品一区| 国产深喉| 97干在线| 天天操人人操狠狠插| 精品亚洲国产成人av网站| 1769精品一区二区三区| 91无码中出人妻视频| 91视频观看网站| 色超碰综合| 91中出在线| 久久精品一区二区三区四区五区| 久久久久亚洲三级电影| 中文字幕aⅴ在线视频| 五月婷婷六月色| 91色图片| 91熟女视频网| 狠狠操使劲操| 无色无码| 日日黄色三级网站| 99re在线精品78| 91白虎| 亚欧毛片基地国产毛片基地| 亚洲国产午夜真人一级片中文字幕精品黄网站| 色欲久久综合| 欧美美女在线高潮999| 欧美最大综合网| 日本一区二区三区四区五区六区七区八区九区| 少妇一级无码精品| 高跟丝袜AV专区国产| 中文字幕日韩综合| 偷拍在线观看视频| 男人的天堂VA| 另类TS人妖一区二区三区 | 香蕉婷婷| 色诱avtt| 99re6在线视频播放免费精品| 国产精品久久久久久高清无码免费看| 中文字幕在线观看二区三区| 韩日男人的天堂| 91麻豆天美国产欧美高潮| 亚洲91网站| 天天插天天操| 大香蕉在线视频15| 大香蕉综合在线| 久久啊啊啊| 奇米狠999| 天堂av2019| 欧亚日韩综合精品国产| 天天伊人| 午夜福利视频在线一区| 青青草亚洲一区 | 青青草原综合久久大伊人精品| 久久中文字幕人妻熟av女蜜柚| 亚洲成人黄色在线观看| 婷婷丁香久久| 91精产一区二区三区| 天天干人人看综合| 亚洲欧美日韩综合在线尤物| 午夜操逼不卡| 九九九九精品精| www.91理论| 中文字幕乱碼在线| 变态综合色| 美国一区二区免费视频| 97精品视频免费| 欧美少妇色图| 色小视频蜜乳| 91欧美性| 啪啪啪东京| 国产白领连续中出在线观看| 78m成人视线| 综合欧美日韩在线观看| 大香网伊人久久综合网eew| 精品91日日夜夜超清资源| 九九色婷婷| 国产外初女出血视频| 久久久久亚洲av综合波多野制衣| 按摩中文字幕| 麻豆亚洲AV成人无码久久精品| 欧美成人午夜免费福利785| 亚洲视频二区| 国内精品a| 好看的91视频| 国产1024在线播放| 天天综合精品| 欧美日韩97|