日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

手寫一個輕量級C/C++內(nèi)存檢測工具:從原理到實(shí)戰(zhàn)

手寫一個輕量級C/C++內(nèi)存檢測工具:從原理到實(shí)戰(zhàn) 做嵌入式或者系統(tǒng)級開發(fā)的朋友大概率都有過被內(nèi)存問題折磨到抓狂的經(jīng)歷。程序跑著跑著內(nèi)存持續(xù)上漲、隨機(jī)出現(xiàn)段錯誤、某個模塊退出時(shí)崩潰……這類問題查起來極其磨人。Valgrind、AddressSanitizer 都是好工具但總有那么一些場景它們不太適用交叉編譯環(huán)境跑不了、性能開銷大到無法接受、或者你用的分配器根本不是 glibc 默認(rèn)的那個。于是我自己動手做了一個自定義內(nèi)存檢測工具在項(xiàng)目里實(shí)測下來幫我定位了不少隱藏很深的泄漏和越界問題今天就把這套思路完整分享出來。這個工具解決的核心問題是在不放慢程序太多、不依賴特殊運(yùn)行時(shí)的情況下給 C/C 項(xiàng)目加一層“內(nèi)存分配監(jiān)控網(wǎng)”。它能查泄漏、查越界寫、查重復(fù)釋放、查未初始化讀取而且最關(guān)鍵的是——它是可定制的。你可以按自己的項(xiàng)目場景調(diào)整檢測粒度、開關(guān)特定檢查項(xiàng)、對接自定義內(nèi)存池。適合被內(nèi)存問題困擾的 C/C 開發(fā)者、嵌入式工程師、游戲引擎/client 端開發(fā)者以及任何想搞懂“內(nèi)存檢測工具底層到底怎么工作”的人。1. 為什么我要自己寫一個內(nèi)存檢測工具1.1 現(xiàn)成工具的短板什么時(shí)候它們不夠用先把話說清楚Valgrind 和 AddressSanitizer 都是極其優(yōu)秀的工具我至今還在用它們。但它們有幾個在實(shí)際項(xiàng)目里很難繞開的限制交叉編譯平臺上跑不了。Valgrind 需要針對目標(biāo)架構(gòu)編譯它的運(yùn)行時(shí)很多嵌入式平臺根本編譯不過去。ASan 雖然支持交叉編譯但要在目標(biāo)板上跑起來對工具鏈版本要求很苛刻。性能開銷太高。Valgrind 平均會拖慢程序 10 到 50 倍在大型 GUI 程序或圖像處理項(xiàng)目里這種速度基本上沒法做實(shí)時(shí)操作。ASan 大概拖慢 2 倍左右但內(nèi)存占用會翻好幾倍。對自定義內(nèi)存分配器“無感”。如果你的項(xiàng)目用了內(nèi)存池、對象池、tlsf 這類自定義分配器Valgrind 和 ASan 默認(rèn)是看不到池內(nèi)部的分配和釋放行為的。你唯一能看到的是池一次性向系統(tǒng)申請了大塊內(nèi)存池內(nèi)部誰泄漏了、誰越界了它們管不著。團(tuán)隊(duì)環(huán)境不統(tǒng)一。開發(fā)機(jī)、CI 機(jī)器、客戶現(xiàn)場環(huán)境各不相同讓所有人都部署一套 Valgrind 不太現(xiàn)實(shí)。相比之下一個集成在項(xiàng)目內(nèi)部的、用宏和鏈接器包裝實(shí)現(xiàn)的自定義內(nèi)存檢測工具可以在任何平臺上編譯開銷可控還能專門針對自己的內(nèi)存池做定制檢測。它的定位不是替代 Valgrind而是填補(bǔ) Valgrind 在特定場景下覆蓋不到的空檔。1.2 自定義內(nèi)存檢測工具的定位輕量、可控、貼合場景我做的這個東西本質(zhì)上是一個“包裹層”。它包在系統(tǒng)分配器或你的自定義分配器外層每次分配和釋放都經(jīng)過它記賬然后在關(guān)鍵節(jié)點(diǎn)上做校驗(yàn)。設(shè)計(jì)目標(biāo)有三個輕量。不用在每次分配時(shí)做太重的操作記錄文件行號和簡要調(diào)用棧就夠了不追求像 Valgrind 那樣精確到每條指令。可控。通過編譯開關(guān)控制檢測項(xiàng)。比如發(fā)布版本可以直接退化成“僅統(tǒng)計(jì)內(nèi)存占用”不用做任何越界檢查。貼合場景。項(xiàng)目里用到的對象池、固定塊分配器、線程局部緩存都能掛接到這個框架下做統(tǒng)一記賬。這些目標(biāo)決定了后面所有的設(shè)計(jì)決策。2. 設(shè)計(jì)思路先想清楚怎么“接”進(jìn)項(xiàng)目2.1 核心原理攔截分配與釋放做簿記內(nèi)存檢測的根本原理說白了就一句話把每一次分配和釋放都記下來。你只要能在分配時(shí)知道“誰在哪個文件的哪一行分配了多少字節(jié)”在釋放時(shí)知道“這塊內(nèi)存是否真的合法”就能推導(dǎo)出很多結(jié)論。實(shí)現(xiàn)攔截有三種主流方案宏替換。在頭文件里#define malloc(size) my_malloc(size, __FILE__, __LINE__)。這是最簡單直接的方案能拿到文件和行號但有一個致命弱點(diǎn)只能攔截“包含這個頭文件”的代碼。第三方庫、同事的 .c 文件如果沒包含就直接繞過檢測了。鏈接器符號包裝。GCC/Clang 提供--wrapmalloc選項(xiàng)鏈接時(shí)把所有對malloc的調(diào)用都重定向到__wrap_malloc你在__wrap_malloc里記賬然后調(diào)__real_malloc干正事。這個方案能攔截整個程序里所有對 malloc 的調(diào)用不依賴頭文件包含非常干凈。dlsym(RTLD_NEXT) 運(yùn)行時(shí)劫持。運(yùn)行時(shí)通過動態(tài)鏈接器找到真正的 malloc 地址然后自己定義同名函數(shù)。方案很靈活但實(shí)現(xiàn)復(fù)雜還容易在非 glibc 平臺上踩坑。我最終的做法是宏替換 鏈接器包裝雙管齊下。項(xiàng)目自己的代碼用宏替換拿到文件行號第三方庫的分配行為用--wrap兜底。兩個方案互不沖突因?yàn)楹晏鎿Q后調(diào)的是my_malloc而鏈接器包裝只攔截符號名malloc。2.2 關(guān)鍵數(shù)據(jù)結(jié)構(gòu)設(shè)計(jì)在分配塊上“貼條”攔截到分配之后必須把簿記信息存下來。我的方案是在每個分配塊的前面加一個頭部結(jié)構(gòu)這就是所謂的“貼條”typedef struct mem_header { uint32_t magic; // 魔數(shù)用于識別合法頭部 size_t size; // 用戶請求的字節(jié)數(shù) const char *file; // 分配點(diǎn)文件名 int line; // 分配點(diǎn)行號 void *return_addr; // 調(diào)用點(diǎn)返回地址用于自定義調(diào)用棧 struct mem_header *next; // 全局分配鏈表的 next struct mem_header *prev; // 全局分配鏈表的 prev uint32_t head_guard; // 數(shù)據(jù)前的哨兵字節(jié) } mem_header; #define HEADER_GUARD_PATTERN 0xFDA4A5D5用戶拿到的指針是(char*)header sizeof(mem_header)。釋放檢查時(shí)用用戶指針減去頭部大小就能找到 header。head_guard和塊尾的tail_guard合起來用于越界檢測。這個鏈表的每個節(jié)點(diǎn)都記錄了分配信息而且是一個雙向鏈表方便在釋放時(shí) O(1) 摘除節(jié)點(diǎn)。實(shí)際項(xiàng)目里分配次數(shù)可能上百萬次如果從頭遍歷找節(jié)點(diǎn)一次釋放就是 O(n)整體會變成 O(n^2)程序基本跑不動。所以雙向鏈表是必須的。2.3 檢測能力設(shè)計(jì)泄漏、越界、重復(fù)釋放、統(tǒng)計(jì)一份工具要實(shí)用必須明確自己能輸出什么結(jié)論。我把檢測能力拆成四塊泄漏檢測退出時(shí)遍歷全局分配鏈表把未被釋放的節(jié)點(diǎn)按文件行號聚合并打印直接告訴你哪個文件哪一行泄漏了 N 次、總字節(jié)數(shù)多少。越界檢測分配時(shí)在用戶數(shù)據(jù)前后各放一段哨兵字節(jié)0xFD 模式釋放時(shí)逐一對比任何一個字節(jié)被改動就說明發(fā)生了越界寫。塊尾哨兵尤其容易踩到因?yàn)閿?shù)組越界寫是最常見的內(nèi)存錯誤。重復(fù)釋放檢測釋放時(shí)檢查 header 的 magic 是否還是有效值如果是 0 或別的說明這塊內(nèi)存已經(jīng)被釋放過。更嚴(yán)謹(jǐn)一點(diǎn)釋放后把 magic 改成0xDEADBEEF同時(shí)把用戶區(qū)填成 0xDD這樣再次釋放和“釋放后使用”都能被捕捉。內(nèi)存統(tǒng)計(jì)維護(hù)全局的已分配字節(jié)數(shù)、峰值、分配次數(shù)、釋放次數(shù)。這些數(shù)據(jù)對定位內(nèi)存持續(xù)增長問題非常關(guān)鍵——如果你發(fā)現(xiàn)分配次數(shù)和釋放次數(shù)之差在增長即使沒看到明顯的泄漏點(diǎn)也能確認(rèn)方向。3. 核心實(shí)現(xiàn)一步步把工具擼出來3.1 入口層鏈路包裝與宏定義先看頭文件memtrack.h的設(shè)計(jì)。這是用戶唯一需要 include 的頭文件#ifndef MEMTRACK_H #define MEMTRACK_H #include stddef.h #include stdint.h #ifdef MEMTRACK_ENABLED #define malloc(sz) mt_malloc(sz, __FILE__, __LINE__) #define calloc(n, sz) mt_calloc(n, sz, __FILE__, __LINE__) #define realloc(ptr, sz) mt_realloc(ptr, sz, __FILE__, __LINE__) #define free(ptr) mt_free(ptr) void *mt_malloc(size_t size, const char *file, int line); void *mt_calloc(size_t n, size_t size, const char *file, int line); void *mt_realloc(void *ptr, size_t size, const char *file, int line); void mt_free(void *ptr); #else // 禁用時(shí)直接調(diào)系統(tǒng)分配器零開銷 #define mt_malloc(sz, file, line) malloc(sz) #define mt_calloc(n, sz, file, line) calloc(n, sz) #define mt_realloc(ptr, sz, file, line) realloc(ptr, sz) #define mt_free(ptr) free(ptr) #endif #endif這是最經(jīng)典的外層接口。啟用宏替換后項(xiàng)目代碼里每個malloc(1024)都會被展開為mt_malloc(1024, main.cpp, 12)文件行號自然就帶上了。這里要注意宏替換只針對“看到這個頭文件”的翻譯單元所以必須在項(xiàng)目統(tǒng)一包含的頭文件里引入比如common.h。3.2 簿記實(shí)現(xiàn)的完整性接下來是memtrack.c里的核心實(shí)現(xiàn)。先看分配函數(shù)是怎么把 header 和用戶數(shù)據(jù)拼在一起的void *mt_malloc(size_t size, const char *file, int line) { // 在用戶請求大小之外多分配 header 和尾部哨兵的空間 size_t total sizeof(mem_header) size sizeof(uint32_t); mem_header *hdr (mem_header *)real_malloc(total); if (!hdr) return NULL; hdr-magic HEADER_MAGIC; hdr-size size; hdr-file file; hdr-line line; hdr-return_addr __builtin_return_address(0); hdr-head_guard HEADER_GUARD_PATTERN; hdr-next alloc_list; hdr-prev NULL; if (alloc_list) alloc_list-prev hdr; alloc_list hdr; // 頭哨兵之后的區(qū)域是用戶數(shù)據(jù) char *user_ptr (char *)(hdr 1); // 尾部哨兵 uint32_t *tail_guard (uint32_t *)(user_ptr size); *tail_guard HEADER_GUARD_PATTERN; // 新分配的內(nèi)存全部填 0xCD方便識別未初始化讀寫 memset(user_ptr, 0xCD, size); // 記錄統(tǒng)計(jì) total_allocated_bytes size; total_alloc_count; if (total_allocated_bytes peak_allocated_bytes) peak_allocated_bytes total_allocated_bytes; return user_ptr; }這里real_malloc是真正的系統(tǒng)分配器。在宏替換之外我會把real_malloc指向__real_malloc——如果你用-Wl,--wrapmalloc鏈接鏈接器會幫你自動提供__real_malloc這個符號如果沒啟用鏈接器包裝就把它定義為malloc的別名。兩種模式通過宏切換。有人可能會問為什么要多分配一個 header 空間而不是在維護(hù)一個全局哈希表記錄分配信息哈希表方案也能用但問題是釋放時(shí)要通過指針查到對應(yīng)的記錄哈希表 O(1) 查找沒問題但一旦指針被越界寫破壞成一個野值哈希表就直接查無記錄你無法確定到底哪里出了問題。而 header 方案下指針被破壞時(shí)你拿去減掉 header 大小拿到的可能是隨機(jī)值但至少magic校驗(yàn)?zāi)芰⒖谈嬖V你“這塊內(nèi)存的頭被踩了”這對于定位越界寫非常有幫助。3.3 釋放與校驗(yàn)把賬對平釋放時(shí)要做的事情明顯更多這是整個工具最核心的一段邏輯void mt_free(void *ptr) { if (!ptr) return; mem_header *hdr (mem_header *)((char *)ptr - sizeof(mem_header)); // 1. 檢查 head_guard 是否被蹂躪 if (hdr-head_guard ! HEADER_GUARD_PATTERN) { report_error(頭哨兵被破壞指針 %p 可能存在越界寫, ptr); return; // 不繼續(xù)釋放防止二次破壞 } // 2. 檢查 magic 判斷是否重復(fù)釋放 if (hdr-magic ! HEADER_MAGIC) { report_error(重復(fù)釋放或指針非法magic0x%08Xptr%p, hdr-magic, ptr); return; } // 3. 檢查 tail_guard uint32_t *tail_guard (uint32_t *)((char *)ptr hdr-size); if (*tail_guard ! HEADER_GUARD_PATTERN) { report_error(尾部哨兵被破壞: %s:%d 分配的大小為 %zu 字節(jié)寫入越界, hdr-file, hdr-line, hdr-size); } // 4. 將 magic 置為已釋放標(biāo)記并把用戶區(qū)填 0xDD hdr-magic FREED_MAGIC; memset(ptr, 0xDD, hdr-size); // 5. 從全局鏈表中摘除 if (hdr-prev) hdr-prev-next hdr-next; else alloc_list hdr-next; if (hdr-next) hdr-next-prev hdr-prev; // 6. 更新統(tǒng)計(jì) total_allocated_bytes - hdr-size; total_free_count; // 7. 真正釋放給系統(tǒng) real_free(hdr); }這段代碼里有幾個細(xì)節(jié)值得展開講。釋放后填 0xDD 而不是立即還給系統(tǒng)這是個刻意的設(shè)計(jì)。它能讓你在調(diào)試時(shí)一眼看出“這塊內(nèi)存已經(jīng)被釋放了”——0xDD 在調(diào)試器里顯示為“燙燙燙”取決于編碼和工具非常醒目。更重要的是如果釋放后代碼繼續(xù)用這個指針讀到的全是 0xDD很容易和正常數(shù)據(jù)區(qū)分。小概率的 head_guard 失效問題head_guard只能檢測“向后越界寫”。如果前一塊的內(nèi)存越界寫把 header 區(qū)域覆蓋了magic會變但你沒法知道是誰干的。這時(shí)候就要配合“分配塊日志”來查在報(bào)告里打印出鄰近分配的 file:line通常能找到線索。3.4 泄漏報(bào)告退出時(shí)清點(diǎn)現(xiàn)場泄漏報(bào)告在程序退出時(shí)觸發(fā)。我用atexit注冊一個回調(diào)函數(shù)在exit()時(shí)遍歷全局鏈表static void leak_report(void) { mem_header *it alloc_list; int leak_count 0; size_t leak_bytes 0; while (it) { leak_count; leak_bytes it-size; fprintf(stderr, [LEAK] %s:%d 泄漏 %zu 字節(jié) (ptr%p), 調(diào)用返回地址 %p\n, it-file ? it-file : ?, it-line, it-size, (char *)(it 1), it-return_addr); it it-next; } fprintf(stderr, [MEMTRACK] 泄漏塊總數(shù): %d, 總字節(jié)數(shù): %zu\n, leak_count, leak_bytes); }這里有個提升報(bào)告精度的技巧按 file:line 聚合統(tǒng)計(jì)。如果泄漏發(fā)生在循環(huán)里一次性可能打上千條記錄刷屏刷到看不到重點(diǎn)。實(shí)際項(xiàng)目中我用了一個哈希表把相同的 file:line 聚合起來最后只輸出按泄漏字節(jié)數(shù)倒序排序的前 30 行。這個改造對報(bào)告的可讀性提升非常大。3.5 對齊問題的處理不然崩到懷疑人生寫這個工具時(shí)最容易踩的一個大坑就是對齊。C/C 標(biāo)準(zhǔn)里malloc返回的指針必須滿足最嚴(yán)格的對齊要求通常是 16 字節(jié)對齊。如果你簡單地在用戶指針前面放一個mem_header然后返回(char*)hdr sizeof(mem_header)這個地址很可能不再是對齊的。一旦用戶在這個地址上存放double、__m128i這類需要嚴(yán)格對齊的類型程序會直接崩潰。解決辦法是在設(shè)計(jì) header 大小的時(shí)候就讓它成為 16 的整數(shù)倍或者在分配時(shí)額外多分配一個“對齊偏移量”再把用戶地址手動對齊到 16 字節(jié)邊界。簡化版的實(shí)現(xiàn)是#define ALIGNMENT 16 size_t total sizeof(mem_header) ALIGNMENT size sizeof(uint32_t); char *raw (char *)real_malloc(total); uintptr_t user_addr (uintptr_t)(raw sizeof(mem_header) ALIGNMENT) ~(ALIGNMENT - 1); mem_header *hdr (mem_header *)(user_addr - sizeof(mem_header));但這種做法需要額外字段記錄原始分配地址否則釋放時(shí)對齊不回來。最省心的方案還是“header 大小強(qiáng)制對齊”用__attribute__((aligned(16)))修飾結(jié)構(gòu)體保證sizeof(mem_header)是 16 的倍數(shù)然后直接返回hdr 1就是對齊的。這個做法我用了很久沒有再出過對齊崩的問題。4. 實(shí)操中的坑與排查技巧實(shí)錄4.1 性能開銷如何做到可接受的回落最初版本我每次分配都調(diào)用backtrace()采集完整調(diào)用棧結(jié)果程序直接慢了 30 倍完全沒法用。后來我只記錄__builtin_return_address(0)——也就是調(diào)用點(diǎn)上一層的返回地址配合地址轉(zhuǎn)符號表addr2line或者dladdr在報(bào)告階段再解析性能開銷降到了可接受范圍。實(shí)測下來啟用完整檢測后項(xiàng)目運(yùn)行速度大約是原來的 70% 到 80%。這在開發(fā)調(diào)試階段完全可以接受。如果嫌慢還有幾個開關(guān)可以關(guān)尾部哨兵檢查、釋放后填充、調(diào)用地址記錄。關(guān)掉后基本能恢復(fù)到接近原始速度。性能開銷主要來自三個地方全局鏈表的鎖競爭、哨兵字節(jié)的 memset 和對比、統(tǒng)計(jì)變量的原子操作。多線程場景下鎖競爭是最大瓶頸我在 4.3 節(jié)專門講。4.2 重入問題日志打印里藏著的死循環(huán)這是所有內(nèi)存檢測工具都會踩的經(jīng)典坑在 malloc/free 里調(diào)用 printf 打印日志而 printf 內(nèi)部又調(diào)用 malloc于是進(jìn)入無限遞歸。遇到這個問題的第一反應(yīng)是加一個“重入標(biāo)志”static __thread int in_hook 0; void mt_free(void *ptr) { if (in_hook) { // 重入直接放行不記賬 real_free(ptr); return; } in_hook 1; // ...正常檢測邏輯輸出日志 in_hook 0; }__thread保證了多線程下每個線程有自己的標(biāo)志不會互相干擾。這個小小的保護(hù)讓工具的穩(wěn)定性上了一大截。4.3 多線程競爭全局鏈表與鎖策略項(xiàng)目里開了 8 個線程同時(shí)分配內(nèi)存檢測工具的全局鏈表變成了一片戰(zhàn)場。用一把互斥鎖保護(hù)鏈表簡單但會導(dǎo)致線程間嚴(yán)重互斥性能下降明顯。我后來用了一個 64 槽位的哈希表把分配頭按地址 hash 到不同的桶每個桶一把獨(dú)立的小鎖。這樣不同線程分配的塊大概率落在不同桶里鎖爭用大幅下降。槽位數(shù)量怎么定的我參考了“一核一線程一槽位”的粗粒度思路64 個桶對 8 到 16 線程的項(xiàng)目來說足夠了。如果線程更多可以按線程數(shù) * 4調(diào)整桶數(shù)量。更精細(xì)的方案是用線程局部存儲加無鎖鏈表每個線程只操作自己的分配記錄最后匯總。這個實(shí)現(xiàn)復(fù)雜度高不少個人小工具里做不做取決于項(xiàng)目規(guī)模。對我來說哈希桶鎖已經(jīng)解決了實(shí)際問題。4.4 誤報(bào)排查哪些“泄漏”不是真泄漏用這個工具跑了幾天后我開始收到一些“看起來像泄漏”的報(bào)告。排查后發(fā)現(xiàn)有幾類經(jīng)典情況長期存活的單例對象。比如全局配置管理器在程序啟動時(shí) new 一次直到退出才釋放。這類對象嚴(yán)格來說沒被釋放但不會造成內(nèi)存增長不算真泄漏。處理辦法是維護(hù)一個白名單文件把已知的合法長生命周期分配排除掉。靜態(tài)初始化/反初始化順序問題。某些平臺在atexit回調(diào)執(zhí)行時(shí)某些全局對象已經(jīng)被銷毀此時(shí)訪問它的成員會導(dǎo)致崩潰。我的leak_report里有一個小技巧報(bào)告階段通過is_address_freed()檢查文件名字符串指針是否指向已釋放內(nèi)存如果已經(jīng)釋放就打印freed而不是直接訪問。第三方庫內(nèi)部緩存。有些庫會在退出時(shí)保留線程局部緩存以加速下一次調(diào)用。這些緩存必須被特殊標(biāo)記否則會出現(xiàn)“看起來”泄漏但實(shí)際無害的報(bào)表。我在接口里加了一個mt_mark_global(void *ptr)函數(shù)允許外部把一塊分配標(biāo)記為“全局存活”從泄漏報(bào)告里排除。遇到這些“假陽性”關(guān)鍵是先搞清楚泄漏報(bào)告里的分配點(diǎn)是哪里、關(guān)聯(lián)的對象生命周期是怎樣的。不要急著改代碼先加日志確認(rèn)。5. 擴(kuò)展實(shí)戰(zhàn)把檢測工具接到自定義內(nèi)存池上5.1 固定塊分配器為什么標(biāo)準(zhǔn)工具管不到前面提過Valgrind 和 ASan 對自定義內(nèi)存池基本無能為力。但實(shí)際項(xiàng)目中我最需要檢測的恰恰是自己寫的固定塊分配器。這種分配器一般持有一大塊連續(xù)內(nèi)存切成固定大小的塊用空閑鏈表串起來。它向用戶返回的指針來自池內(nèi)不是系統(tǒng)分配器返回的所以系統(tǒng)級工具完全感知不到。我給內(nèi)存池加了一個可選檢測層在池對象里維護(hù)一個位圖1 表示該塊已分配0 表示空閑。每次pool_alloc分配一塊時(shí)對應(yīng)位圖位置置 1每次pool_free釋放時(shí)置 0池析構(gòu)時(shí)掃描位圖凡是仍為 1 的塊就是泄漏塊。這個位圖方案的優(yōu)點(diǎn)是開銷極小每次分配/釋放只需要修改一個 bitO(1) 時(shí)間。對池內(nèi)固定塊的數(shù)量沒有硬性限制本質(zhì)上就是用空間換檢測能力。5.2 把檢測數(shù)據(jù)導(dǎo)出成可視化報(bào)表工具本身只輸出文本日志但項(xiàng)目組有些人就喜歡看圖。我給工具加了一個mt_write_report(FILE *fp)接口把統(tǒng)計(jì)數(shù)據(jù)和聚合泄漏數(shù)據(jù)用 CSV 格式導(dǎo)出。然后可以直接在 Excel 里透視圖或者用 Python/Pandas 腳本畫一張“泄漏熱點(diǎn)圖”——每個文件對應(yīng)一個長條條形高度表示泄漏字節(jié)數(shù)顏色表示泄漏塊數(shù)量。這些圖表在周會上匯報(bào)時(shí)非常直觀能瞬間說服老板“確實(shí)該修內(nèi)存問題了”。CSV 導(dǎo)出格式大致是file,line,leak_count,leak_bytes,total_alloc_count,total_free_count main.c,42,3,1536,1010,1007 network.c,118,1,4096,512,511 texture.c,7,12,24576,1200,1188注意不要把 CSV 的列頭寫得太復(fù)雜保持機(jī)器可讀就好。真要做可視化時(shí)間應(yīng)該花在“從日志里定位問題”上而不是折騰圖表庫。5.3 與項(xiàng)目框架集成的最后一步工具集成到 CMake 項(xiàng)目里非常簡單option(MEMTRACK_ENABLE Enable custom memory tracking OFF) if(MEMTRACK_ENABLE) target_compile_definitions(app PRIVATE MEMTRACK_ENABLED) target_compile_options(app PRIVATE -Wl,--wrapmalloc -Wl,--wrapfree -Wl,--wraprealloc -Wl,--wrapcalloc) endif() target_sources(app PRIVATE memtrack.c)用-Wl,--wrap注意一個細(xì)節(jié)宏替換已經(jīng)把代碼里的malloc變成了mt_malloc但第三方庫內(nèi)部對 malloc 的調(diào)用仍然指向原始符號。--wrap只影響原始符號不影響宏替換后的mt_malloc調(diào)用鏈。也就是說兩套機(jī)制完美互補(bǔ)不會互相打架。6. 工具能力邊界與實(shí)用的建議這個工具并不是萬能的說清楚它的邊界可以讓后來者少走彎路。它查不了“未初始化讀取”因?yàn)閮?nèi)存在分配時(shí)被填了 0xCD但 C 類的構(gòu)造函數(shù)可能把這個值覆蓋掉了檢測不了“讀到了舊數(shù)據(jù)”。它也不擅長查“并發(fā)數(shù)據(jù)競爭”——那是 ThreadSanitizer 的職責(zé)。它最擅長的是泄漏、越界寫、重復(fù)釋放、釋放后使用這些內(nèi)存錯誤里最折磨人的那幾類。根據(jù)我自己的使用經(jīng)驗(yàn)給準(zhǔn)備上手的人幾個建議別一上來就開全量檢測。先開“僅統(tǒng)計(jì) 泄漏報(bào)告”確認(rèn)程序能正常跑完再逐步打開越界檢查、釋放后填充這些重開關(guān)。在 CI 跑測試時(shí)用全量檢查模式跑單元測試和集成測試把報(bào)表存檔。連續(xù)對比幾天的報(bào)表能很早就發(fā)現(xiàn)內(nèi)存回歸。報(bào)告輸出的日志要有明確的級別。我一般按“錯誤級別”輸出哨兵被破壞是 ERROR泄漏是 WARNING統(tǒng)計(jì)信息是 INFO。這樣在日志系統(tǒng)里可以快速過濾。如果在某個版本里引入這個工具后程序反而崩了先關(guān)掉釋放后填充大概率是釋放后仍有讀取操作工具剛好把這個“臟數(shù)據(jù)”暴露出來了。這是工具在幫你發(fā)現(xiàn)問題不是工具本身的問題。最初把這個工具集成到項(xiàng)目里時(shí)報(bào)表輸出是純文本的全靠肉眼看。后來發(fā)現(xiàn)真正好用的檢測工具不是輸出得多而是輸出得“準(zhǔn)”。當(dāng)報(bào)告按文件行號聚合、按泄漏字節(jié)排序、過濾白名單之后每天打開報(bào)告掃一眼就能知道今天有沒有引入新的內(nèi)存問題。這種“一眼看到變化”的體驗(yàn)是 Valgrind 和 ASan 都沒法輕易給的——因?yàn)樗鼈冸x你的項(xiàng)目太遠(yuǎn)了而自定義工具就住在你的代碼里。最后再分享一個讓我收獲很大的小技巧工具開發(fā)出來后我故意在一個測試文件里寫了幾處 bug——一個越界寫、一個泄漏、一個重復(fù)釋放。然后讓人去查看工具能不能準(zhǔn)確報(bào)出來。這個“自測用例”非常有用每次給工具加新功能我都能快速回歸一遍確認(rèn)沒有把之前的檢測能力弄壞。內(nèi)存檢測工具本身也是軟件它也需要測試。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
www四虎| 性影在线视频| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 韩国免费播放一级毛片| 久久、1234| 911粉嫩人妻| 超碰99在线| 亚洲欧美国产va在线播放频| 亚洲欧洲第二视频在线观看色图| 天天日天天舔天天喷天天射| 国产精品美女视频诱惑| 久久m| 国产 丝袜 欧美中文 另类| 精品人妻一区二区三区日产| 久久久久密臀视频| 五月婷婷六月色| 日本性感人妻91| 密臀在线视频| 加勒比av官网在线| 九月AV| 女人午夜视频777| 囯产精品久久久久久久久久梁医生| 日韩精品9区| 国产九九久久久精品| 久久精品国产亚洲AV片多多| 亚洲精品免费中文字幕| 色香天天| 在线天堂资源亚洲| 台湾佬中文娱乐网久久久久久久久久com| 欧美1727免费观看视频| 秋霞久久亚洲精品成人| 日韩综合成人免费视频| 干我久操| a一区二区三区乱码在线| 亚洲欧美999| 欧日韩一二三f区| 三级网站超变态精品| 啊啊啊免费| 国产精品一二三| 男人的天堂在线2| 久9视频| 亚洲情色五月天 | 超碰1997| 佐山爱中文字幕| 亚洲综合首页| 影音先锋少妇| 澳门特级毛片免费观看| 97视频网站| 黄片aaaaa一区| 先锋色眉乱伦资源| 婷婷久草一区二区三区| 激情色图| 日本操逼无码| 蜜臀在线免费观看在线免费观看| 六月丁香网| 26uuu性| 水野优香在线观看| 亚洲国产精品久久久久久久久久| 操我啊啊啊啊啊| 超碰97.com| 亚洲色资源| 无码人妻一区二区三区四区老鸭窝| 一区二区偷拍拍视频| 91精品人妻一区二区三区蜜桃| 国产后入式在线观看| 久久精品三级影视| 久草精品一区| 热久久国产| 亚洲 综合 欧美| 色色热| 日韩AV电影网站| 超碰97男人| 色噜噜人妻av中文字幕| 女同性恋中文字幕| www.av在线视频| 激情五月综合| 亚洲 欧美 另类 综合 偷拍| 偷拍五区| 操逼无码操逼| 久久免费老司机精品| 天天舔天天日天天射| 校园春色五月天| 国产偷拍网站| 久久久蜜桃一区二区三区| 超碰97色色| 夜色91| 99在线无码精品秘 入口黑人| 日人妻视频91| 亚州精品人妻一二三区| 精品中文日韩字幕视频| 91处女在线观看| 日本1区2区不卡视频| 99这里有精品| 无码人妻一区二区三区免费九色| 天天视频黄网站| 欧美国产成人在线| 男人精品区| 日本高清一本二本免费不卡| 操逼视频亚洲| 人妻黑丝袜电影| 日本东京热加勒比久久| 久欲AV| 五月天丁香婷婷综合网站| 99re这里| 色色99| 亚洲国产美女久久久久 | 九九久久国产精品| 草草影院最新网址| 欧美色图中文字幕| 日本三级A片网站com| 蜜臀色乳| 十八禁成人网站在线观看| 玖玖蜜臀资源网| 亚洲精品天堂久久A∨51成人漫| 97亚洲一区| 天堂а√在线最新版在线| 蜜臀在线免费观看在线免费观看| 精品人妻一区二区视频| 老熟女天天操| 男人的天堂激情| 久草国产在线视频| 麻豆国产97在线| 欧美草草| 成人久久久精品| 久久香蕉网| 五月婷网站| 综合干干干av久久久综合网| 激情干在线| 13小男生GAY自慰脱裤子| 一级免费精品| 99re这里| 天天影视综合网欧美精品| 欧美大香蕉专区网| 美女91AV| 国产97/欧美| 中文字幕成人| 91 亚洲 欧美 日韩 国产 综合| 亚洲精品一区二区精华| 人人操人人精品影片| 欧美美女自慰一区二区三区| 97人人干| α√在线| 日日日日日| 美女国产一区二区久久| 人妻aa| 高清一区AV无码| 人人操我人人干| 97在线播放| 久久爱超碰网| 欧美日韩精品久久| 性九九九九九九| 日产成人久久| 夜夜免费视频| 国内精品99999| 亚洲熟妇A V黑人| 91情色在线| 欧美性性性| 久久綜合很很很| 欧美 亚洲 91| 偷拍 亚洲 欧美| 香蕉人欧美综合| 日韩国产精品人妻无码久久久| 视频一区二区免费在线| 亚洲一二三四区| 少妇一级无码精品| 亚欧高清| 又黄又爽在线观看视频| 99国产精品免费| 欧美大片一区二区三区| 亚洲色图欧美| 日韩AC| 殴美,日韩国产伦精品| 欧美男女午夜啪啪| 青草香蕉网| 女人香蕉久久毛毛片精品| 国内一区二区免费| 色墦五月丁香| 国产91丝袜在线播放蜜月| 亚洲国产精品成人久久蜜臀| 玖玖资源综合在线视频| 老鸭窝黄色视频网站| 色妹子A V| 日本性爱欧美性爱| 色啪网| 成人精品在线免费视频| 色视频蜜乳| 久久东京国产精品视频| 大香蕉在线视频重口味毛片在线| 中文熟女五十乱码在线| 久久一二三四五六七八九区区| 啊啊嗯嗯好爽| 91啦人妻| AND人妻系列| 欧美黑人熟妇精品91| 十八禁的黄污污免费网站| 日日天天久久啊啊aaa| 欧美se综合| 天天天天天天天天天天干美女| **一级毛片国产| 99爱爱| 黄色视频60分钟| 欧洲一区二区三区免费| 国产探花精品在线| 91劲爆| 丝袜熟女一区二区三区| 亚州欧美综合| 9 9精品一区二区三区| 96久久久久| 久草福利在线资源站| 欧美乱妇狂野欧美在线视频| 一区二区三区成人高清视频| 91精品久久久久久久久久| 天天摸夜夜添无码小视频| 婷婷尹人大香蕉免费| 1769成人国产精品视频| 极品色电影院| 一起草欧美| 一卡二卡三卡| 成 人 影视 一区 二区 三区 四区| 中文字幕av亚洲精品| 伊人久久大香线综合无码| 欧综合网| 白嫩妹子国产骚| 欧美亚洲日韩人妻在线观看| 欧美成人四级在线播放| 99爱爱| 久操不卡视频| 免费啪啪一级视频| 国产辣妈在线视频福利| 99re视频在线播放青草| 97视频在线免费看| 色色色网站| 九月丁香综合网| 伊人丁香五月婷婷| 久久99久久99精品天美传媒棢·纸:. | 亚洲麻豆精品二区三区| 在线精品福利免费播放| 丰满岳乱妇一区二区三区| 97在线视频网站| 亚洲老熟妇xxx| 九九香蕉网| 亚洲无码成人精品| 亚洲无码成人精品| 日本一区二区不卡| 干干干天天| 男女香蕉一区二区| 国产精品一二三| 天天躁日日躁xxxxx| 亚洲性爱成人| 日韩性爱免费观看视频| 免费在线黄片视频| 久久婷婷电影网| 美国三级日本三级久久99| 久草综合京东| 色五月婷婷麻豆在| 国产树林里野战在线看| AV女资源| 亚洲宅男天堂| 久久亚洲不卡一区二区三区 | 欧美一区二区日韩三区| 小日子操bb在线看| 懂色AV蜜臀无码精品APP | 1024精品在线| 九九视频黄色片| 亚洲精品无码成人久久久99| 一级婬片120分钟试看| 操逼片国产| 亚洲中文字母在线播放| 日韩精品一区二区三区四虎影视| 久久久久久91香蕉国产| 色综合1991| 亚洲国产精品成人久久蜜臀| 欧美三级偷拍| 成人AV超碰免费在线| 天天做日日做天天欢。| 动漫片子网站3黄| 后入日本1234| 亚洲高清无毛一区二区| 五月天啪啪| 天堂伊人久久| 午夜舔阴达高潮视频免费看| 天天干,天天日| 老熟女中文字幕高清| 性色亚洲| 久久一区二区高清免费| 亚洲狼狼干综合1| 97se亚洲综合自| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | xxx亚洲午夜天堂| 色哟哟精品1精品2| 欧美操逼熟女| 熟妇高潮精品一区二区三区下载| 日韩无限资源| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区 | 99热日| 在线洲亚线| 欧美熟妇成人一区二区| 久久99久久99久久99人受| 久久久久78| 在线a亚洲视频播放在线| 日韩成人精品视频自拍| 人妻天堂综合网| 92大香蕉| 欧美日韩操逼嗦吊| 四虎884| 大屁股人妻女教师撅着屁股| 嗯嗯嗯嗯啊啊啊好紧好大| 蜜区区视频79 | 91 丝袜在线| 美女十八禁| 日本日皮视频逼| 小骚逼被操的爽不爽| www.99色| 欧美亚洲美少妇一区二区| 美女91| 伊人久久艹| 久久蜜桃一区二区| 久热伊人| 欧美gv在线观看| 一区中文字幕二区日韩| 93人人操人人| 国产尤物在线三区| 国产日韩精品无码去免费专区国产| 91啪啪| 夜夜欢天天干| 夜夜夜夜夜夜夜夜夜狠狠狠狠狠狠狠| 日本国产亚洲一区在线观看| 久久超碰大香蕉| 一区在线观看中文字幕| 99热这里只有精品18| 毛片视频白嫩| 黄色在线网站| 啊啊啊操死我| 色网1| 久久综合九九| 翔田千里AⅤHD无码| 丁香六月天| 精品日韩人妻视频| 嗯嗯不要 视频| 天天干一干| 性爱网站一区二区| 1024亚洲中文字幕久在线看片你懂的 | 欧美精品四区| 国产福利在线视频网站| 亚洲精品蜜桃久久久| 秋霞视频一区二区 | 国模精品一区二区三区苹果色戒| 青娱乐休闲视频在线观看| 欧美情色男人的天堂| 色99色| 我要去看2个日本美女.com曹逼| 骚逼自拍99| 台湾肥佬网一区二区三区| 十八禁视频网站| 九九碰九九爱97超| www.97在线| 中文字幕五区| 毛片17S| 亚洲欧美校园另类春色| 性爱动态120秒| 日本欧美韩国日产片片在线看免| 亚洲乱熟女一区二区三区大香蕉| 成人三一级一片aaa| 欧美A√综合网| 国产欧美伊人| 99蜜桃臀久久久欧美精品网站| 60秒免费小视频| 人人妻人人爽一区二区三区| 蜜臀精品1区2区| 99视频这有这里有精品| 欧美性少妇| 五月色丁香| 欧美 亚洲 在线| 亚洲欧美天堂在线| 亚洲丝袜色| 在线A日本| 超碰97综合网| 久久国产精品熟女人妻| 亚洲国产精品久久久久久久久久| 丁香六月激情| 成人性爱AV在线免费观看| 一本正道久久熟女| 精品一区二区三区蜜桃臀赵总| 国产精品在线免费| 婷婷情色五月天| 天天射网| 色九九九| 久热免费视频| 亚洲丁香花色| 六月丁香五月婷婷| 五月婷婷丁香六月| 手机在线播放国产福利| 亚洲天堂男| 99re99在线视频| 黑人粗大V S日韩女优视频| 精品一区二区麻豆| 亚州熟妇精品| 破处bbq| 欧美久久九九| 久热久一区二区三区| 精品成人av一区二区三区在线| 日韩av性爱在线播放| 啪啪自拍九九综合| 狠狠干91| 丰满人妻-区二区三区| 亚洲日韩美女丝袜美腿人妻视频| 啊啊啊啊嗯嗯在线久久久| 国内毛片四区| 免费αV在线视频| 日本色色视频网站| 亚洲色欧美| 96久久久| 你懂的在线观看区国产| 亚洲高清无毛一区二区| 920日本午夜免费| 吉田爱美AV在线| 熟妇国产免费一区| 蜜臀久久99精品久久久久久无删减 | 夜夜天天噜狠狠爱2021| 六月色色| 日韩不卡网操逼中文字幕日韩| 美欧老女人97| 粉嫩AV一区二区夜夜| 日本高清熟女久久一区| 高清孕妇孕交 交| 亚州免费啪啪视频| 久久不卡一区二区| 久久精品视频一区三区小泽玛利亚| 91日产桃蜜| 青娱乐福利99| 中文字幕AV片| 久久9精品网站| 亚洲国产成人精品久久久国产成人一区二区 | 欧洲天天在线| 综合五月天| 色爱三区| 老色鬼成人精品视频下载大在线观看| 极品欧美一区二区三区| 狠狠色婷婷| 欧洲大香蕉| 91美女視頻| 6080YYY午夜理论片在线观看| 国内91熟女人妻丝袜天天精品视频在线 | 天天做天天爱夜夜爽毛片试看| 国产一区二区欧美日本| 青青草视频这里只有精品| 色欲人妻一区二区在线| 国产高清无码一区三区二区| 日韩视频小说在线观看| 无码聚合| 韩日欧亚a级| 伊人性在线视频| 人妻系列无码专区中文有码| 我爱搞逼综合网| 国产18精品亚洲精品| 超碰97男人| 无码人妻精品一区二区中文| 亚洲人久久久网| 免费在线观看AV无码网站| 欧美天天影院| 女人天堂AV五区在线| 人人操人人摸avav| 亚州综合色图| www.婷婷六月天| 色老久久| 久综合网| 九九九九久久久久| 好舒服视频| 九月激情婷婷| 超碰2017| 神马九九九| 天天综合网~69| 综合色好色| 九色黄站| 欧美亚涩| 国产亚洲日本精品在线| 91狠狠综合网| 欧中美三级一区二区三区| 久久国内| 日本中文字幕不卡视频| 日本道人妻久久久在线不卡色视频| 天美传媒av 在线| 久久永久无码人妻视频| 東南亚性呦成人伦理资源在线视频| 在线人妻熟女一区二区三区四区五区| 亚洲九月丁香| 校园春色亚洲色图| 97天天插| 亚洲视频小说| 蜜桃臀 后入 一区 二区 三区 在线| www亚洲免费| 九九九九九九九九九国产精品 | 九九自拍伦理| 人人爽夜夜操| 日韩在线视频1234| 中文字幕在线观看第二页| 夜夜操青青草| AV天堂因数| 91亚洲狠狠色| 一级特级aaaa毛片免费观看| 日本人妻中文字幕精品| 日韩免费簧片| 国产成人超碰在线| 一级性爱视频免费在线| 无码精品久久| 久久毛卡| 中文字幕成人| 97舔舔| 超碰狠狠操| 欧美另类色图片| 男人的天堂2018.| 色播五月婷婷| 亚洲国产欧美日韩精品一区二区三区,国产一区二区三区在线看片,欧美性猛交 XXX | 久久久久九九九九九| www久久精品| 色狠狠一区二区三区香蕉| 91美女視頻| 国产精品久久久久9999小说| 亚洲无码 国产无码| 亚洲欧美电影| 人人色人人射人人妻| 九九热视频这里只有精品| 久久夜夜夜| 男女国产精品| a亚洲欧美色欲| 亚洲最大成人a毛毛片| 国产免费操逼| 色一射色一射| 久久久久久十| 国产三区免费在线观看| 国产农村一一级特黄毛片| 久久国色天香香蕉| 在线天堂资源亚洲| 国产网红精品| 久久伊人亚洲AV无码网站| 人妻日日干| 无遮挡h肉动漫在线观看| 99国产天美| 日日A∨| 亚欧性爱ab| 99热色这里只有精品| 日韩天堂av电影在线观看| 亚洲日本天堂| 中文字幕亚韩| 97se综合| 久久精品熟妇丰满人妻99| 影音先锋日本一区二区| 亚洲,欧美,春色,另类| 蜜桃臀一区二区aV| 12一15性XXXX粉嫩国产| 激情五月综合| 99少妇| 色呦呦、国产精品| 亚洲色天| 日本天天人人狠狠在线日美女| 在线亚洲精品久久久| 9丨久久九九九| 丁香五月激情综合| 一区二区高清视频| 亚洲日韩天堂| 久超碰在| 男人女人18禁片免费看网站| 欧美日韩人人精品| 少妇无码av专区线| 久艹视频在线| 精品久久在线区一区| 久久黄人人爽视频| 水野优香在线观看| 亚洲激情视频| 欧美在线官网| 欧美熟妇成人一区二区| 国产熟女精品区| 无码自拍SM| 综合网91| 热久久无毒不卡| 欧美性爱另类综合| 亚洲av无码成电影在线播放| 欧美成人一区二区| 日韩欧美麻豆大片| 久久99午夜精品一区人妻| 日韩精品在线放| 锕锕好爽 死我在线观看| 欧美天天干| 98超碰日本| 天天天天干| 一本久道在线综合视频| 国产97亚洲| 国产精品对白自产拍| 久久久久久久久久久久久久久乱码| 黄片aaaaa一区| 欧美性爱日韩高清| 亚洲欧美高清| 日日日日做夜夜夜夜做无码97| 丁香五月社区| 三级片网站在线播放| 翔田千里AⅤHD无码| 亚洲成人在线乱码色午夜| 人人妻人人爱人人玩| 亚洲一二三| 天天色天天干天天射| 日本道不卡| 天天干嫩逼网| 久久久偷拍| 久久久av爱| 99精品久久| 色婷婷视频| 无码78| 久久久久久久久久久久97| 干美女人妻| 激情四射熟女丝袜| 九九九九97| 97欧美色资源| 上床不卡网站| 欧美后入式| 国产精品动态一区二区三区四四| 粉嫩AV输入| 欧美少妇熟女| 亚洲限制级| 国产Av超碰| 深夜激情| 91天天综合| 久久久久久亚洲中文| 亚洲日韩美国人妻| 色婷婷久久| 国产日韩精品一区二区三区| 欧美中文字幕一区 | 无码人妻丰满熟妇奶水区毛片| 国模不卡一本二本三电影| 国产在线播放成人免费| 久久老女人| 国模私拍一区二区三区神乳| 国产人妖的免费的视频| 92福利社视频| 2019亚洲男人天堂| 亚洲国产美女久久久久| 免费伦费视频在线观看| 69超碰综合| 97超碰久久色| 欧美在线视频观看一二三四区高清| 亚洲色婷婷综合久久一区二区三区| 在线播放成人网站| 91成人久久| 国产真实子伦对白| 五月丁香六月婷综合成人综合| 91人人看| 奶水 人妻 哺乳 在线| 日韩黄色片子| 激激五月| 婷婷久久久精品| 日韩激情毛片一级久久久| 男人天堂一区二区| 黑人性欧美| 亚洲无码免费看| 殴美日韩m| 亚洲欧美国产va在线| 国产99999久久精品| 久久97视频| 欧亚乱色熟女一区二区| 日韩欧美水蜜桃人妻| 麻豆精品一区二区三区四区免费观看| 女人高潮抽搐喷水视频网站| 欧美图片色五月天| 亚洲成av人片色午夜乱码| 综合网97| 精品偷拍13p欧美dodk视频| 亚洲熟女综合网| 9l视频自拍9l九色成人| 91久久国外网| 午夜影美女日鸡鸡天天视频国产| 蜜桃网熟妇| 91精品女厕偷拍视频| 强奸熟女一区二区三区| 亚洲精品aa久久伊人| 一本一道久久综合久久| 亚洲精品乱码久久久久久蜜桃麻豆| 少妇丝袜在线观看AV| 操我无码| 97亚洲综合影院| 欧美人妻色| 久久亚州精品成人Av无| 国产日韩中文字幕欧美| 日本三级韩三级99久久| 2020中文字幕| asc国产精品| 亚洲精品丝袜-不卡成人免费……| 97亚洲欧美| 色成人Www精品永久观看| 久久精品导航| 国产精品一区二区后入| 人妻天天夜夜爽一区二区| 69少妇一区二区| 久久线上视频免费看| 欧洲色色| 欧美黑人精品在线播放| 少妇内射视频| 97香蕉人人乳| 久久大香蕉| 国产精品无套内谢| yiqicaoav| 在线人人人人人人精品超 | 久热99| 日韩亚洲精品一区二区| 啊啊啊啊网站| 中文字幕青青草| 久久免费看高潮毛片韩国| 密桃99999| 大香蕉久久| 99久在线精品99re8热| 国产老太乱伦一区| 91日产欧美| 青青草吊丝| 人妻啊啊人妻啊| 欧美丰满熟妇XXXX性ppX人交| 人妻献身系列第54部| 蜜桃传媒视频第一区入口在线看| 大香蕉在线86| 夜夜操老骚逼视频网站| 六九九九| 91亚洲高清| 天天综合网91| 久久人妻| 综合久久97| 久久婷婷电影网| 大屁股人妻女教师撅着屁股| 久久丁香久草综合网| 日本媚薬中文字幕在线| 91色拍| 国产一级内射高清视频| 久久久涩| 天天拍夜夜| 久热影视| 国产精品国产拍高清AV| 欧美综合站| 亚洲男人的天堂AV| 中文字幕av一区二区三区人妻少妇| 人妻熟女一区二区三区视频| 久久久久久综合久久伊人蜜月| 啪啪自拍九九综合| 精品女同一区| 青青草原香蕉日本Ap| 殴美在线AⅤ| 亚洲毛片一级带毛片基地| 激情五月婷婷| 香蕉99秘 精品一区丁香| 另类图片五月| 伊人嫩草| 秋霞成人一级在线观看| 天天日夜夜爽| 久久久久96| 国产91av在线播放| 免费观看有码高清视频| 欧美色自拍| 大香蕉视频一二三区| 日韩欧美经典在线观看| 新97国产超碰| 91色色网站| 超碰在线香蕉| 一本大道综合伊人精品热热| 亚洲熟妇综合久久久久久| 国产美女裸体秘 永久无遮挡| 精品一二三区久久AAA片| 涩五月婷婷| 国产二区三区免费视频| 在线视频日韩欧美国产| 欧美第二页午夜| 日韩无码a片| 日韩偷拍色图| 呻吟 欧美 日本 中出| 91另类| 色色色99| 91国模| 青青操青娱乐| 在线αⅴ| jiujiujiujingpin| 国产一国产一级毛片古装| 免费看久久久性性| 五月天日日操夜夜操| 亚洲欧美经典一区二区| 五十路熟女人妻一区二区在线观看 | 天天色怡春院| 国产三级日产三级韩国三级| 91久久国外网| 婷婷色色五月天福利| 影音综合网| 欧美自拍偷拍综合图片| 伊人991| 户外裸露刺激视频第一区| 禁十八久久| 亚洲欧美综合区自拍另类| 欧美在线干| 欧美精品另类人妖xxxx| 国产按摩一区二区三区| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区 | 操www| 婷婷情色五月天| 嫩草美女久久| 大香蕉中文在线| 超碰欧美在线欧美| 黑人操一区二区| 色婷婷国产精品一区在线观看| 69丨亚洲丨精品丨入口免费播放| 欧美日韩国产高清在线一二三区 | 97AV爱| av一区二区三区四区| 婷婷国产精品一区二区| 一区,二区,三区网站| 立川理惠加勒比无码| 成人一道本免费视频| A男人的天堂| 精品人妻伦一二三区久久| 被男人吃奶很爽的毛片| www.人人摸在线视频| 久久久久久九九九九-美女久久久久久久-成人AV | 97欧美久久久久久久| 欧美亚综合色图| 蜜桃色色网站视频三区| 爽 好舒服 无码刺激久久| 欧美色图亚洲激情| 人妻丰满熟妇av无码区蜜桃| 中文字幕人妻色偷偷久久皮| 青青操97| 国产AV色黄看到爽| 欧美 亚洲 第一页| 啪啪免费| 亚洲第一精品在线视频| 欧美性爱中文字幕无线码| 国产对白刺激视频| 久久精品国产97欧美精品亚洲| 日韩黄色小说| 综合少妇网| 五月天伊人网| 日本女人久久久| 欲香欲色| 欧美熟妇色| 国产成人91一区二区三区| 女优大全 - 91n| 天堂v无码免费视频| 免费一二区| 在线岛国新天堂8| 欧美18 在线观看| 老子午夜伦不卡影院| 欧美亚洲一级在线观看| 新版天堂中文资源8在线| 久久鲁干| 97天天搞在线| 懂色Av| 五月婷网站| 六月色色| 麻豆影音天美视频| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 伊人天堂在线| 怡红院亚洲怡春院av| 狠狠操狠狠燥| 久久草草亚洲蜜桃臀| 人人干人人操人人..com| 精品久久久久,69国产成人精| 偷拍在线观看视频| 白丝被操91| 90后性网国产欧美| 看日韩美女二区三区免费操逼视频| 婷婷五月天影院| 999 久久久| 亚洲第一页第二页激情| 屌色在线97视频| 国内91熟女人妻丝袜天天精品视频在线 | 在线视频一区二区传媒| 啊啊啊啊啊啊啊啊要喷了| 久久精品熟妇丰满人妻99| 精品成人动漫一区二区| 混色激情av| 老熟女中文字幕高清| 成人AV超碰免费在线| 欧美色图亚洲特色| 18禁看网站一区| 欧美亚洲玖玖玖| 亚洲少妇综合| 欧美日韩操逼嗦吊| 91网站18+| 亚洲一本大道中文字幕无码在线| 天美传媒在线一区| 国产男女无套97| 人妻久久一区二区三区| 丁香五月天啪啪| 欧亚韩国999| 国产又操| 蜜臀一区二区三区亚洲最新章节在线观看 - 高清蜜臀一区二区三区亚洲全集播放 | 岛国网址国产 | 亚洲熟妇乱女区二区三区| 在线看污网站| 人妻日日夜夜精品| 97香焦色区| 先锋影音av先锋一区| 久久亚洲色图中文字幕| HEYZO高无码国产精品227| 亚州男人的天堂| 91久久久久久久久18| 国产日韩久久| 涩涩久久精品| 中文字幕日韩国产传媒欧美精品| 久久精品国产精品一区| 欧美青青草视频| 欧美午夜精品久久久久久3D| 亚洲激情 欧美色图| 青青操青娱乐| 99久久久久久亚洲精品不卡| 少妇色综合| 欧美v日韩欧亚洲电影天堂色诱,国产传媒| 97超碰色| 黄色网址在线免费观看| 亚洲久9| 国产中文字幕在线观看| 亚洲免费日韩在线一区二区| 翔田千里Av在线| 国产风韵犹存熟妇三区| 日日A∨| 91美腿丝袜在线观看| 综合一区中亚洲国产成人综合精品| 中文字幕三四五区| 久久久久婷婷精品av电影| 精品国产99| 干婷婷综合网| 亚洲导航深夜福利| 日本操大逼| 日韩欧美大力操| 婷婷探花久久精品一区| 婷婷15月天青娱乐| 婷婷午夜清品久久久久久久性色视频观| 99视频自拍| 欧美另类精品xxxx| 亚洲影院成人| 免费男人的天堂| 青青草乱入乱欲视频在线观看| 肥臀熟女福利视频一区二区| 欧美在线色图| av操操不卡| 国产原创精品| 欧美色图偷拍另类| 99九九久久| 日本好吊色视频| com 首页 18岁 禁区 女优 免费 精选 同城 | 天天α片| 一区二区三区蜜桃成人撸久久东京热| 自拍丝袜美腿人妻| 麻豆国产尤物AV| 在线啊v一区| 夜夜爽爽爽| 人妻在线中出视频| 超碰一区二区| 中文字幕后石码四区五区| 色综合av男人天堂| 亚洲色图殴美色图激情乱伦| ..日韩av毛片精品久久久| 在线v中文字幕一区二区三区| 日产狠狠干| 亚洲 另类 丝袜 自拍 动漫| 国产精品伦理| 四虎精品一区二区| 国产啊v在线免费播放| 婷婷视频网| 97bbn| 午夜舔阴达高潮视频免费看| 久久久久亚洲Aⅴ无码| 6080yy午夜理论三级一区二区三区无码| 天天插天天插| 99热国产| 手机看片日韩人妻| 另类一区| 青青欧美| 天天看天天在线精品| 按摩中文字幕| 婷婷人妻激情| 黄色免费网页无码| 夜夜夜夜夜夜夜夜夜狠狠狠狠狠狠狠| 中文字幕第23区| 久久久新亚洲AV| 熟女人妻av在线资源,黄色的资源 粉嫩国产精品久久粉嫩 | 五月丁香网站| 九九九不卡| 色小视频蜜乳| 舔人妻中文免费视频| 久久9 9 9精品| 亚洲欧美日韩国产丝袜自拍中文| 欧美+日产+中文| 久久久中文| 九九热只有精品| 9久久精品| 国产精品第一页国产大屁股视频免费区| 8050无码八戒| 麻豆区久久久久亚| 天天色综亚洲91污| 久久m| 国产在线综合福利网站| 亚洲日本男人天堂网| 欧美精品三级黄片| 啊啊啊好舒服好爽啊啊啊视频| 午夜美女诱惑电源网| 日本精品第一视频在'| 黑人性暴力毛片| 97干在线| 青青五月天| 国产不卡精品91| 天天谢天天干| 欧美亚洲美少妇一区二区| 免费A片三p视频| 高清肉丝中文无码| 色色亚洲| 亚洲国产ⅴ高清在线观看| 精品一区二区三区18| 成人老鸭窝人人在线视频| 国产AV色黄看到爽| K8久久久久| 蜜臀在线免费观看在线免费观看| 九九干| 亚洲色交| 日韩少妇在线视频| 国产成人在线观看综合| 中国一级αV| 亚洲色性情三级| 色婷婷电影| 人妻中文字幕精品无码| 超碰天天操| 亚洲精品819| 色官网在线| 九九九九一区| 97超级色碰碰| 91欧美丨精品丨入口| 久久9亚洲| 亚洲综合色男人网| 天天看天天在线精品| 91精品久久久久久综合五月天| 欧美爱三级日韩久久| 亚州一区二区| 少妇内射视频| 激情小说亚洲图片| 亚洲91网。| 91艹逼精品| 91丨国产丨白浆| 小少妇| 大香蕉黄色一区| 精品无码欧美三级| 欧美色图亚洲色| 久久三区四区| 99热一区二区三区四区| 亚洲91射| 玖玖爱伊人玖玖爱| 校园春色家庭伦理欧美激情| 四月丁香婷婷| 精品精品精品| 91撸色网 玖玖网 欧美| 青青草原综合久久大伊人精品| 久久极品一区二区| 色香色香欲天天天影视综合网| 大香蕉综合在线| 亚洲天堂人妻一区二区| 激情色色| 青青草日韩免费观看高清在线| 国语精品av| 欧在线一二区| 三级日本一区二区三区| 亚洲国产av中文字幕久久 | 亚洲欧美综合| 高清孕妇孕交 交| 久久超碰天天| 草草电影院| 探花一区在线| 九X超碰| 国产搭汕a级片| 亚洲阿v天堂无码z2018| 草莓精品视频| julia在线观看久久| 小草精彩毛片| 丰满少妇精品一区二区| 夫妻天天操岛国视频| 成人性爱av.com| 禁止观看美女黄| 东京热,男人的天堂| 日本午夜操逼| 91人人爽人人爽| 综合自拍| 日本操大逼| 亚洲精品欧美专业| 亚洲无码一二三区| 亚州色图片在线色| yw尤物av无码点击进入麻豆| 中日韩久久久| 黄色片大香蕉| 久久视频,这里只有精品| 新亚洲无码| 97亚洲性爱| 无遮挡男女激烈动态图| 婷婷久草一区二区三区| 九九九九精品在线| 国产一区二区欧美日本| 国产中文福利| 9久久久久| 首页中文字幕中文字幕免费| 精品一区96| 免费日韩黄片| 97高清啪啪| 91春色| 日韩/97| 四虎影视永久在线免费| 欧美久久婷婷| 在线免费观看日韩一区| 按摩中文字幕| 天天插网| 在线 制服丝袜中出 人妻| 日日夜夜精品视频| 大香蕉中文aV在线| 精品国产一区二区三区在线播出| 国产熟女精品一区二区| 日韩性爱免费观看视频| 中文字日本乱码| 91福利网在线观看| 亚洲污污网站| 色婷婷综合视频| 欧美欲色| 日欧操屄| 丝袜狂射91| 丁香五月婷婷色| 午夜精品久久99蜜桃的功能章节| 午夜天堂网| 国产亚州高清国产拍精| 日本国产欧美一区三区二区| 婷婷综合在线观看| 国产中文大片资源中文字幕| AV色图| 美女尤物福利视频| 国产成人久久久精品免费AV| 伦激情人妻另类人妻| 啊啊啊啊啊啊啊啊在线观看| 啊啊啊啊,啊啊好多水| 亚洲 欧美 中文 日韩超碰| 女人午夜视频777| 中文字幕高清精品一区| 男人的天堂2000| 亚洲精品天天影视综合网| 欧美日韩高潮喷水91| 色官网在线| 国产精品人妻熟女aⅴ| 91啦人妻| 另类天堂| 亚洲情色视频| 色五月av| 蜜区区视频79| 国产精品高朝久久久久久久| 欧美熟爽综合| 日本福利社| 麻豆久久久一区二区| 亚洲精品xxx| AV在线性爱| 黄色大片免费在线| 午夜福利激情在线视频| 99国产精品视频尤物| 国产亚洲福利第一页丝袜| 国产精品懂色tv影视免费观看| 亚洲欧美人妻| 性爱网站一区二区| 26UUU欧美激情一区二区| 人人操人人肉久久精品|