日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

百度校招核心網(wǎng)絡研發(fā)筆試題解析:從TCP/IP到SDN

百度校招核心網(wǎng)絡研發(fā)筆試題解析:從TCP/IP到SDN 1. 核心網(wǎng)絡研發(fā)考什么先看懂這張卷子的出題邏輯拿到“百度2018校招核心網(wǎng)絡研發(fā)工程師筆試題第三批”這個標題的時候我的第一反應是這屆題目應該挺硬核的。核心網(wǎng)絡研發(fā)工程師這個崗位在百度內(nèi)部對應的大多是基礎設施部門——負責數(shù)據(jù)中心網(wǎng)絡、骨干網(wǎng)、流量調(diào)度、自研網(wǎng)絡設備或者高性能網(wǎng)關這一類方向。和普通后端研發(fā)不一樣這個崗位的筆試題不會讓你寫業(yè)務接口也不會讓你做用戶表設計它考的是你對網(wǎng)絡協(xié)議棧、數(shù)據(jù)轉(zhuǎn)發(fā)路徑、路由控制平面和系統(tǒng)底層能力的綜合理解。我認識不少當年一起投這個崗位的朋友大家的反饋出奇一致這批題的區(qū)分度很高。高在哪里高在它不考死記硬背的協(xié)議細節(jié)而是考你“在一個真實網(wǎng)絡場景里能不能用協(xié)議知識做出正確判斷”。所以如果你打算投遞類似的崗位第一件事不是埋頭背OSI七層模型而是先把這張卷子的出題邏輯摸清楚。從我了解到的信息和多方比對來看第三批筆試題大致覆蓋了四個核心模塊。第一個模塊是網(wǎng)絡基礎與協(xié)議棧主要考察TCP/IP、HTTP、DNS這些日常最常接觸但又最容易被忽視的細節(jié)。第二個模塊是路由與交換技術重點在路由協(xié)議、轉(zhuǎn)發(fā)原理和網(wǎng)絡設計。第三個模塊是系統(tǒng)與編程能力畢竟核心網(wǎng)絡研發(fā)不是純網(wǎng)絡工程你得會寫代碼得理解操作系統(tǒng)底層。第四個模塊是數(shù)據(jù)中心網(wǎng)絡與SDN/NFV相關的前沿技術百度在自研網(wǎng)絡設備、SDN控制器和流量調(diào)度系統(tǒng)上投入很大筆試必然會對這個方向有所傾斜。理解了這張卷子的整體結構你再去看題就不會慌。它其實是在篩選兩類人一類是網(wǎng)絡底子扎實、遇到問題能追到報文級別的工程師另一類是系統(tǒng)能力強、能在高性能網(wǎng)絡場景里寫出可靠代碼的工程師。如果你兩項都占那這張卷子對你來說就是友好且能拉開差距的。2. TCP/IP協(xié)議棧高頻題細節(jié)決定你能不能進下一輪TCP/IP協(xié)議棧是核心網(wǎng)絡研發(fā)崗位的“吃飯本事”這部分題目的特點是看起來簡單一做就錯。我梳理了幾個在第三批題目里出現(xiàn)頻率較高的考點每一個都值得你重新過一遍。2.1 三次握手的邊界條件第三次ACK丟了會怎樣這幾乎是必考題但大多數(shù)人的答案最多得一半分。很多人只記得“客戶端進入ESTABLISHED服務端收不到ACK會重傳SYNACK”但真正值錢的細節(jié)在于如果客戶端在第三次握手ACK發(fā)出后立刻發(fā)送數(shù)據(jù)包服務端在SYN_RCVD狀態(tài)下收到這個數(shù)據(jù)包會怎么處理正確的鏈路是服務端在SYN_RCVD狀態(tài)收到客戶端的數(shù)據(jù)包時如果該數(shù)據(jù)包不帶ACK標志那么根據(jù)RFC 793服務端會把這個數(shù)據(jù)包丟棄并重新發(fā)送SYNACK。但如果這個數(shù)據(jù)包攜帶了ACK標志哪怕它不是純粹的ACK包服務端也會認為握手已經(jīng)完成把狀態(tài)切換為ESTABLISHED同時處理數(shù)據(jù)。這個細節(jié)考的是你對TCP狀態(tài)機和報文交互的理解深度而不僅僅是背一個三次握手流程。還有一個變體如果客戶端的第三次ACK在網(wǎng)絡上延遲了很久才到達服務端在此期間已經(jīng)因為重傳超時關閉了連接那這個遲到的ACK到了之后服務端會回一個RST。這個RST會導致客戶端從ESTABLISHED狀態(tài)直接跳到CLOSED。這種場景在處理高并發(fā)短連接服務時非常常見尤其是客戶端連接池需要大量新建連接時。2.2 擁塞控制的演進別只停留在Reno和CUBIC2018年的校招題已經(jīng)明顯開始考察BBR了。百度這樣的體量帶寬利用率哪怕提升1%節(jié)省的成本都是天量級的所以擁塞控制算法是核心網(wǎng)絡團隊的重點研究方向。題目通常這樣出解釋Reno、CUBIC和BBR在擁塞窗口調(diào)整上的核心差異以及在什么網(wǎng)絡場景下BBR能比CUBIC獲得更好的吞吐。CUBIC是BDP探測型的它通過三次曲線來探測帶寬遇到丟包會乘性減窗。BBR換了一套思路它不再以丟包作為擁塞信號而是通過實時測量最小RTT和最大帶寬來建模網(wǎng)絡管道然后用pacing的方式讓發(fā)送速率貼合帶寬。這里有一個關鍵點值得展開BBR的ProbeRTT階段會周期性把擁塞窗口降到4個MSS目的是重新測量最小RTT。因為路徑上的排隊延遲會隨時間變化如果一直保持一個很大的發(fā)送速率RTT會虛高。這個“故意降速重新測量”的操作和傳統(tǒng)算法“發(fā)送速率越高越好”的直覺完全相反但恰恰是BBR能夠在高丟包鏈路上保持高吞吐的原因。答題時如果能把這個機制解釋清楚面試官對你的評價會直線上升。2.3 HTTP隊頭阻塞從HTTP/1.1到HTTP/2再到HTTP/3這批題里HTTP相關的題目卡了不少人原因在于它考的已經(jīng)超出了“GET和POST的區(qū)別”這個level而是直接問你HTTP/2解決了HTTP/1.1的隊頭阻塞為什么還會出現(xiàn)隊頭阻塞HTTP/1.1的隊頭阻塞發(fā)生在應用層一個TCP連接上只能串行處理請求前面的響應慢了后面的請求全部排隊。HTTP/2引入了多路復用通過stream在一條TCP連接上并發(fā)傳輸多個請求看起來解決了問題。但HTTP/2的底層仍然是TCPTCP保證有序傳輸?shù)臋C制導致如果某個stream的包丟了后續(xù)所有stream的包都不能被應用層處理必須等待重傳。這就是TCP層的隊頭阻塞HTTP/2解決不了。真正的解法是HTTP/3它把傳輸層換成了QUIC基于UDP實現(xiàn)可靠傳輸每個stream獨立有序丟包只影響它自己所在的stream。這個問題在核心網(wǎng)絡研發(fā)面試里幾乎是必問的因為它考察的不是你用過多少HTTP庫而是你對分層模型和傳輸機制之間交互關系的深入理解。3. 路由與轉(zhuǎn)發(fā)題從CIDR聚合到BGP路徑選擇的計算邏輯路由與轉(zhuǎn)發(fā)是核心網(wǎng)絡研發(fā)的“物理基礎”這部分題目通常不是簡單的概念問答而是需要實際計算的。第三批題目里計算題的占比不低而且計算量都不大但思路要清晰。3.1 路由聚合的邊界不是所有地址都能老老實實聚合有一道經(jīng)典題目是這樣的有四個網(wǎng)段192.168.1.0/24、192.168.2.0/24、192.168.3.0/24、192.168.4.0/24要求寫出能覆蓋前三個網(wǎng)段的最小聚合路由以及能覆蓋四個網(wǎng)段的最少路由條目數(shù)。前三個網(wǎng)段聚合很簡單192.168.1.0/24的二進制是11000000.10101000.00000001192.168.2.0/24是00000010192.168.3.0/24是00000011。前22位相同所以聚合結果是192.168.1.0/22。但加上192.168.4.0/24就麻煩了它是00000100和前面的公共前綴只有20位相同。如果你強行聚合四個網(wǎng)段得到的是192.168.0.0/20這個路由會覆蓋192.168.0.0到192.168.15.255多覆蓋了12個網(wǎng)段在實際網(wǎng)絡中可能造成路由黑洞或流量被錯誤轉(zhuǎn)發(fā)。所以正確答案是兩條路由192.168.0.0/22和192.168.4.0/24它們才能精確覆蓋四個網(wǎng)段。這個題目的價值不在于計算本身而在于考察你是否明白一個道理路由聚合必須“精確”寧可多一條路由也不能讓聚合后的路由覆蓋到不存在的網(wǎng)段。3.2 OSPF與BGP協(xié)作角色不同路徑選擇邏輯不同另一道??加嬎泐}是路由優(yōu)先級和選路規(guī)則的混合場景。題目會給你一個網(wǎng)絡拓撲一臺路由器同時運行OSPF和BGPOSPF學習到一條到達目標網(wǎng)段的路徑cost為110BGP學習到同一條路徑local_pref為200MED為50。問你最終優(yōu)選哪條路徑。在華為、思科設備上不同協(xié)議之間比較的是路由優(yōu)先級華為叫preference思科叫administrative distance。OSPF內(nèi)部路由的優(yōu)先級通常是10BGP是255思科eBGP是20iBGP是200。但很多時候題目會故意省略這些默認值而是把比較邏輯放在同一個協(xié)議內(nèi)部。如果是BGP內(nèi)部比較local_pref優(yōu)先然后才是AS路徑長度、MED等。這里真正的考點是跨協(xié)議比的是優(yōu)先級同協(xié)議內(nèi)部才比選路屬性。很多考生把這兩個規(guī)則混在一起結果得出完全相反的答案。題目里還會附帶一個“為什么BGP要有這么多選路屬性”的加分題。這個問題的本質(zhì)是IGPOSPF、IS-IS在同一個AS內(nèi)部已經(jīng)能算出最短路徑了但AS之間的運營商有復雜的商業(yè)關系客戶、上游、對等需要一套可策略化控制的選路機制來體現(xiàn)這些商業(yè)決策。理解了這層邏輯你就懂了為什么BGP的選路規(guī)則不是單純的技術最優(yōu)而是商業(yè)策略驅(qū)動的。3.3 轉(zhuǎn)發(fā)面的最長前綴匹配硬件層面的核心邏輯路由與轉(zhuǎn)發(fā)的計算題有時候也會往硬件方向延伸比如問TCAM如何實現(xiàn)最長前綴匹配。TCAM三態(tài)內(nèi)容尋址存儲器的每個bit都有三個狀態(tài)0、1、X不關心所以它天然適合存儲路由前綴。要匹配時所有表項同時參與比較命中的條目里優(yōu)先級最高的就是最長匹配的那個。這里有一個補充考點因為TCAM貴且功耗高但路由表越來越大所以業(yè)界會有“把路由分級把常用前綴放到DRAM里用算法匹配不常用的才放TCAM”這類思路。這些內(nèi)容在筆試里考得少但如果你面試時能主動提出來會讓面試官覺得你有工程視野。4. 高性能網(wǎng)絡與系統(tǒng)底層DPDK、零拷貝和網(wǎng)卡多隊列的實戰(zhàn)理解核心網(wǎng)絡研發(fā)工程師的工作場景里有相當一部分是高性能網(wǎng)絡轉(zhuǎn)發(fā)比如百度自研的四層負載均衡、流量網(wǎng)關、緩存加速代理等這些系統(tǒng)的核心就是處理海量并發(fā)報文。所以筆試里出現(xiàn)系統(tǒng)與性能類題目一點都不意外。4.1 內(nèi)核協(xié)議棧的瓶頸和DPDK為什么能繞過去題目常常這樣出一臺普通的x86服務器跑Linux內(nèi)核協(xié)議棧處理64字節(jié)小包轉(zhuǎn)發(fā)性能通常只能到幾十萬PPS想提升到千萬PPS甚至更高需要怎么做答案的核心就是“繞過內(nèi)核”或“優(yōu)化內(nèi)核收包路徑”。展開來說內(nèi)核協(xié)議棧的瓶頸有三個。第一系統(tǒng)調(diào)用開銷每個包都要經(jīng)過recvfrom/sendto或read/write用戶態(tài)和內(nèi)核態(tài)頻繁切換。第二數(shù)據(jù)拷貝包從網(wǎng)卡緩沖區(qū)拷貝到內(nèi)核內(nèi)存再從內(nèi)核內(nèi)存拷貝到應用緩沖區(qū)多一次訪存開銷。第三內(nèi)核鎖競爭多核CPU同時處理網(wǎng)絡包時協(xié)議棧里的全局鎖和共享數(shù)據(jù)結構會形成爭搶。DPDK的處理思路是通過UIOUserspace I/O把網(wǎng)卡設備映射到用戶態(tài)用輪詢模式PMD替代中斷通知應用程序直接通過大頁內(nèi)存與網(wǎng)卡交換描述符繞過內(nèi)核協(xié)議棧。這個方案能把單核收包性能從幾十萬PPS提升到上百萬PPS級別在業(yè)界已經(jīng)是非常成熟的實踐。答題時如果能提到“大頁內(nèi)存減少TLB miss”這一層說明你真的看過代碼而不是只背了概念。4.2 零拷貝的幾種實現(xiàn)mmap、sendfile和網(wǎng)卡分片零拷貝是高性能網(wǎng)絡服務里繞不開的話題。題目通常給你一個文件下載服務的場景問你如何減少數(shù)據(jù)在用戶態(tài)和內(nèi)核態(tài)之間的拷貝次數(shù)。傳統(tǒng)方式要經(jīng)歷磁盤到內(nèi)核緩沖區(qū)內(nèi)核到用戶緩沖區(qū)用戶到socket緩沖區(qū)socket緩沖區(qū)到網(wǎng)卡一共四次拷貝四次上下文切換。用sendfile可以達到兩次拷貝用DMA直接內(nèi)存訪問配合網(wǎng)卡Scatter-Gather功能可以做到真正意義上的“零拷貝”——數(shù)據(jù)從磁盤到頁緩存后通過DMA引擎直接描述符指向頁緩存中的數(shù)據(jù)不經(jīng)過CPU拷貝直接發(fā)送到網(wǎng)卡。這里有個細節(jié)很多人會忽略零拷貝的瓶頸不再在CPU拷貝上而是轉(zhuǎn)移到了頁緩存和socket緩沖區(qū)之間的一致性維護上如果頻繁讀寫可能觸發(fā)page fault反而性能下降。實測下來對小文件高并發(fā)的場景用sendfile不一定比精心調(diào)優(yōu)的傳統(tǒng)readwrite快因為DMA描述符的建立和拆除也有開銷。這個反直覺的結論如果在筆試的論述題里寫出來會很加分。4.3 網(wǎng)卡多隊列與RSS讓每個CPU核心都有活干另一個常見考點是網(wǎng)卡多隊列和Receive Side ScalingRSS。單隊列網(wǎng)卡在接收報文時需要靠一個中斷來處理所有包多核CPU無法分攤收包壓力。啟用多隊列后網(wǎng)卡可以根據(jù)四元組或五元組哈希把不同的流分散到不同的RX隊列每個隊列由獨立的CPU核心處理這樣就能并行收包。題目會問RSS的哈希因子有哪些如果哈希因子包含源IP和目的IP來自同一個IP的不同端口連接會被分到多個隊列嗎答案是如果哈希計算包含端口那會分散到不同隊列但如果只基于IP那同一對IP的流會固定在同一個隊列可能在某些負載均衡場景下造成隊頭熱點。這個問題的價值在于它讓你意識到看似“自動分散”的網(wǎng)卡哈希如果不和實際業(yè)務流特征匹配反而會成為性能瓶頸。5. 數(shù)據(jù)中心網(wǎng)絡與SDN/NFV從VXLAN到控制器設計的必考題百度在數(shù)據(jù)中心網(wǎng)絡方向的布局很早從自研交換機、SDN控制器到流量調(diào)度系統(tǒng)都有成熟的落地。這批筆試題里出現(xiàn)數(shù)據(jù)中心相關題目非常合理也代表著國內(nèi)頭部互聯(lián)網(wǎng)公司對這個方向的重視程度。5.1 VXLAN封裝細節(jié)外層UDP的源端口到底怎么選VXLAN幾乎是數(shù)據(jù)中心網(wǎng)絡必考項。題目通常會給你一個虛擬機遷移的場景虛擬機從物理機A遷移到物理機B但IP地址保持不變對端如何通過VXLAN隧道繼續(xù)訪問它VXLAN把二層幀封裝在UDP報文里VTEPVXLAN Tunnel Endpoint負責封裝和解封裝。關鍵點在于外層UDP的源端口它是根據(jù)內(nèi)層MAC、IP、端口等信息哈希計算出來的目的端口固定是4789IANA分配的端口。源端口設計成哈希值的目的是為了在底層網(wǎng)絡上實現(xiàn)負載均衡——ECMP等價多路徑協(xié)議可以根據(jù)外層五元組把流量打散到不同的物理鏈路上。如果不做這個哈希所有VXLAN流量在底層看來都走同一個五元組ECMP會把所有流量都壓到一條鏈路上這就是經(jīng)典的“Hash極化”問題。答題時如果能把這個設計意圖講清楚就不僅僅是答了一道題而是在展示你理解了VXLAN“為什么這么設計”的工程智慧。5.2 SDN控制器集中式優(yōu)于分布式但沒有全局看到底行不行SDN相關題目在第三批里也有一席之地。常見問法是SDN控制器的核心職責是什么為什么數(shù)據(jù)中心網(wǎng)絡要用SDN做流量調(diào)度而不是傳統(tǒng)的分布式路由協(xié)議SDN把網(wǎng)絡控制平面和數(shù)據(jù)轉(zhuǎn)發(fā)平面分離控制器掌握全局拓撲可以用全局視角計算最優(yōu)路徑下發(fā)流表到交換機。相比之下傳統(tǒng)路由協(xié)議是分而治之的每臺設備只知道自己的鄰居關系無法感知全局擁塞情況。數(shù)據(jù)中心網(wǎng)絡流量模型極其復雜流量矩陣動態(tài)變化集中式控制器可以根據(jù)實時負載做全局優(yōu)化。但集中式控制器也帶來可靠性問題——控制器掛了整個網(wǎng)絡的路徑計算就癱瘓了所以實際工程中控制器通常以集群方式部署用分布式數(shù)據(jù)庫同步網(wǎng)絡狀態(tài)。這里有一個容易踩坑的認知很多人以為SDN就是OpenFlow的代名詞但實際工程中OpenFlow只是SDN南向接口的一種實現(xiàn)方式。百度早期的SDN方案里也大量使用了自研的南向協(xié)議或者通過BGP、NETCONF等“傳統(tǒng)”協(xié)議實現(xiàn)控制器的集中控制。SDN的本質(zhì)是“控制與轉(zhuǎn)發(fā)分離”這個思想而不是某一種具體協(xié)議?;卮饡r點出這層才能體現(xiàn)出工程視野。5.3 CLOS架構與ECMP現(xiàn)代數(shù)據(jù)中心網(wǎng)絡的骨架數(shù)據(jù)中心網(wǎng)絡設計題通常圍繞CLOS架構展開。CLOS解決的是“大二層網(wǎng)絡如何擴展”的問題核心層Spine和接入層Leaf之間通過ECMP形成等價多路徑所有Leaf都能通過多條路徑到達任何其他Leaf帶寬可水平擴展。題目會問為什么CLOS架構比傳統(tǒng)三層樹形架構更適合數(shù)據(jù)中心核心原因有兩個。第一樹形架構的匯聚層是瓶頸流量越高匯聚層設備壓力越大而且難以水平擴展。第二CLOS架構下所有路徑都是等價的通過ECMP實現(xiàn)負載均衡鏈路利用率高故障轉(zhuǎn)移也快——一條鏈路斷了流量立刻均勻分攤到其他等價路徑上。這個題目還有一個衍生問法ECMP的哈希因子和前面VXLAN的哈希源端口設計有什么關聯(lián)對的VXLAN外層UDP源端口哈希就是為了解決ECMP哈希極化問題兩道題是一套組合拳。你如果能把它們串起來回答面試官會知道你是真的理解而不是背概念。6. 編程與系統(tǒng)實現(xiàn)題網(wǎng)絡工程師的代碼功底不能拉胯核心網(wǎng)絡研發(fā)工程師的日常不是天天調(diào)路由器而是寫代碼——寫網(wǎng)關、寫轉(zhuǎn)發(fā)面、寫控制面組件、寫網(wǎng)絡監(jiān)控系統(tǒng)。所以卷子里一定有代碼題和系統(tǒng)設計題這些題目的水平和難度和純后端崗位的題風格截然不同。6.1 C語言的字節(jié)序與內(nèi)存對齊最容易栽跟頭的地方第一類高頻題是C語言和操作系統(tǒng)底層細節(jié)。字節(jié)序問題是網(wǎng)絡編程的經(jīng)典陷阱x86機器是小端序網(wǎng)絡字節(jié)序是大端序用htonl/ntohl轉(zhuǎn)換。但如果處理的是一個結構體——比如一個自定義報頭里面有uint8_t、uint16_t、uint32_t混合字段直接強制類型轉(zhuǎn)換再發(fā)送就會因為內(nèi)存對齊產(chǎn)生填充字節(jié)導致接收端解析出錯。正確的做法是用packed結構體__attribute__((packed))或者每個字段單獨序列化。筆試里可能會給你一段代碼問你這個結構體在64位系統(tǒng)上會占用多少字節(jié)如果加了packed又是多少字節(jié)。這種題考察的是你寫網(wǎng)絡協(xié)議代碼時能否處理字節(jié)序和內(nèi)存布局問題這在高性能網(wǎng)絡開發(fā)里非常常見坑很深。6.2 生產(chǎn)者消費者模型從互斥鎖到無鎖隊列的設計取舍題目會給你一個場景多個生產(chǎn)者線程把網(wǎng)絡數(shù)據(jù)包寫入隊列多個消費者線程從隊列中取包處理如何設計這個隊列第一層答案是互斥鎖加條件變量這是教科書方案。第二層答案是讀寫鎖、自旋鎖的取舍在臨界區(qū)極小的情況下自旋鎖比互斥鎖更合適因為它避免陷入內(nèi)核態(tài)。第三層答案才是面試官真正想聽的無鎖隊列。用CASCompare-And-Swap實現(xiàn)lock-free的MPMC隊列或者更務實的SPSC隊列——單生產(chǎn)者單消費者隊列通過ring buffer就能實現(xiàn)無鎖這在DPDK的rte_ring里就是經(jīng)典實現(xiàn)。這里有一個關鍵取舍無鎖隊列在讀多寫少、臨界區(qū)極短的高并發(fā)場景下性能優(yōu)勢巨大但無鎖不等于無坑ABA問題、內(nèi)存序問題memory ordering都可能導致詭異bug。所以筆試答題時最好能說明白什么場景選什么隊列以及為什么而不是一味追求花哨的無鎖實現(xiàn)。6.3 多線程并發(fā)中的原子操作與內(nèi)存屏障再往后有一類題圍繞多線程同步的正確性展開兩個線程一個寫一個讀都操作同一個變量如何保證讀到的一定是最新值答案是volatile?錯。在C/C里volatile只能告訴編譯器不要優(yōu)化不能保證多核間的可見性也不提供原子性。正確做法是用C11的atomic、std::mutex或者提供內(nèi)存屏障的原子操作。進一步會問為什么CPU會亂序執(zhí)行為什么需要內(nèi)存屏障現(xiàn)代CPU為了性能會進行指令重排多核之間還有緩存一致性協(xié)議比如MESI帶來的偽共享問題。cache line是64字節(jié)如果兩個線程頻繁修改同一cache line上不同變量會因為偽共享導致性能雪崩。用__attribute__((aligned(64)))把變量對齊到cache line邊界可以規(guī)避這個問題。這類題考的是你對系統(tǒng)底層的理解一個合格的核心網(wǎng)絡研發(fā)工程師必須能寫出“確定性強”的高并發(fā)代碼。7. 綜合設計題實戰(zhàn)模擬從零設計一個高可用四層接入網(wǎng)關網(wǎng)絡方向的綜合設計題通常是卷子的壓軸大題分值高、難度大。它往往不以“寫代碼”的形式出現(xiàn)而是要求你畫架構圖、說清楚關鍵模塊和容災方案。這里我結合網(wǎng)絡上找到的類似題型和崗位要求還原了一道比較有代表性的設計題并附上完整的解題思路筆試面試都能用得上。題目大意公司需要設計一個高可用的四層接入網(wǎng)關承接所有外部流量并轉(zhuǎn)發(fā)到后端服務集群要求支撐10萬QPS、可用性99.99%請設計整體架構并說明關鍵設計點。這道題想拿高分需要從四個層面去回答。第一層是整體架構接入網(wǎng)關采用集群部署多臺機器通過ECMP等價路由對外提供服務使用BGP與上層交換機互通任何一臺機器故障流量自動被ECMP重新哈希到其他機器。在網(wǎng)關機器內(nèi)部使用DPDK接管網(wǎng)卡業(yè)務邏輯全部在用戶態(tài)實現(xiàn)。四層轉(zhuǎn)發(fā)不做太多復雜邏輯只做DNAT和SNAT所以可以做到很高吞吐。第二層是會話一致性四層網(wǎng)關必須保證同一個客戶端的連接五元組始終落在同一臺后端機器上否則TCP連接會斷開。用一致性哈希表保存會話狀態(tài)會話表需要定期同步或者將狀態(tài)存到分布式KV里保證故障切換時會話不丟。但分布式KV帶來的延遲在數(shù)據(jù)路徑上不可接受所以實踐中會在每臺機器本地保存會話表配合主備同步極少數(shù)情況下故障會導致連接重建這是99.99%可用性可以容忍的。第三層是健康檢查與故障剔除網(wǎng)關需要定期探測后端服務的健康狀態(tài)探測失敗要自動摘除該后端并重新建立會話同時不能影響現(xiàn)有連接。這里要考慮“探活頻率”和“誤判”之間的權衡探得太頻繁會對后端產(chǎn)生額外壓力探得太慢故障轉(zhuǎn)移時間過長。一般會設計成TCP連接探測和HTTP探測的雙層機制。第四層是安全與防洪作為公網(wǎng)入口網(wǎng)關必須能抵抗SYN Flood。解法是開啟SYN Cookie或者用硬件卸載卡做DDoS清洗只有通過驗證的流量才進入內(nèi)核態(tài)處理。這個問題在百度真實場景里是繞不開的所以出現(xiàn)在筆試里非常合理。這道題的完整回答至少要涵蓋ECMP接入、DPDK轉(zhuǎn)發(fā)、會話一致性、健康檢查、故障轉(zhuǎn)移、DDoS防護、安全隔離、監(jiān)控和日志統(tǒng)計這幾個模塊答得越全越接近核心網(wǎng)絡研發(fā)工程師的真實工作畫像。8. 備考與答題策略筆試里的時間管理同樣決定成敗最后聊點實際的這部分是我和幾個參加過百度校招的朋友交流后總結出的經(jīng)驗不一定寫在任何帖子里的但非常關鍵。8.1 時間分配和答題順序這套筆試題給人的體感是“時間不夠”。我有朋友當年在這套題上有些題目只能留空白原因不是不會做而是前面在二叉樹、哈希表這類基本功題目上花了太久后面的大題反而沒時間展開。我個人的建議是先做綜合設計題和論述題再做計算題最后做選擇題和填空題。為什么綜合設計題是開放性的只要你框架清晰、要點齊全即使細節(jié)不夠完美也能拿到大部分分數(shù)。計算題如果思路錯了可能什么都得不到但如果是列了步驟但算錯結果通常還能拿到過程分。選擇填空是純客觀題一題就一兩分占比不大放在最后反而不會心慌。8.2 答題時的表述技巧請用“工程師的語言”而非“課本的術語”筆試答題尤其是簡答和設計題極其看表述方式。舉個例子同樣的意思“TCP的擁塞窗口會減小”和“窗口大小根據(jù)當前鏈路的RTT和丟包率動態(tài)調(diào)整丟包時進入擁塞避免階段通過乘性減窗降低發(fā)送速率以緩解鏈路擁塞”給閱卷人的專業(yè)程度印象完全不同。再一個細節(jié)設計題里圖要畫關鍵模塊的名稱要寫清楚接口要標注箭頭方向不要只寫一堆文字。閱卷人和面試官都偏好“能一眼看到架構全貌”的答案。畫圖不需要多精美但核心鏈路和容災鏈路必須用不同顏色或線型區(qū)分開。8.3 結合個人經(jīng)驗談談這套題的復習方向如果你正打算投遞核心網(wǎng)絡研發(fā)崗我建議你按照“基礎協(xié)議棧-路由交換-高性能轉(zhuǎn)發(fā)-數(shù)據(jù)中心網(wǎng)絡-SDN/NVF-系統(tǒng)編程”的順序系統(tǒng)復習。但要注意不要停留在背概念每學一個協(xié)議問自己三個問題——它解決什么問題、它的報文格式里每個字段為什么存在、它在真實網(wǎng)絡里有哪些常見的坑。把這三個問題想清楚無論是筆試還是面試你都能對答如流。我當年復習TCP時用一個笨方法用Wireshark抓自己機器上瀏覽網(wǎng)頁的包跟著TCP流看三次握手、窗口變化、重傳超時再對照RFC看報文頭。這個過程看起來慢但對建立“報文級直覺”特別有效。筆試里有些題是“紙上談兵”考不出來的但你如果見過真實的報文交互一眼就能看穿考點在哪里。9. 寫在最后幾個容易被忽略但考試高頻的“邊角料”這些內(nèi)容我在前面沒有具體展開但它們出現(xiàn)的概率極高而且一旦考到如果沒看過就是完全空白所以我單獨拉出來講一下。9.1 DNS解析細節(jié)遞歸、迭代與緩存TTL的坑DNS相關題目在網(wǎng)絡崗筆試里很少缺席。常見問法是用戶在瀏覽器輸入一個域名完整解析過程是怎樣的這里要答清遞歸查詢和迭代查詢的區(qū)別、本地hosts文件、系統(tǒng)resolver、客戶端本地DNS緩存、運營商LocalDNS、根服務器、頂級域服務器、權威服務器以及每個環(huán)節(jié)的緩存TTL機制。有意思的考點是TTL過短會導致DNS查詢爆量TTL過長會導致域名切IP后客戶端不生效。2018年前后正是各家互聯(lián)網(wǎng)大廠開始大規(guī)模使用HTTPDNS的年代原理就是繞過運營商LocalDNS避免被劫持和調(diào)度不精準所以題目也有概率延展到HTTPDNS的優(yōu)缺點——相比傳統(tǒng)DNSHTTPDNS是應用層通過HTTP接口直接拿到IP列表避免中間環(huán)節(jié)的污染和緩存問題但需要客戶端SDK配合。這題考的是你對“域名解析鏈路”的完整理解。9.2 BGP路由振蕩正則表達式和route-map實際怎么用BGP的題目有時候會出一些實操向的給出幾條BGP路由填寫正則表達式匹配特定前綴或者設計route-map完成基于AS路徑的選路控制。這類題要求你真用過BGP知道AS_PATH里各種字符的含義。正則表達式里有一個坑^192_和_192_的區(qū)別。前者匹配的是以192開頭的AS路徑后者匹配路徑中包含192的任意位置。如果只是求包含某個AS號的所有路由用后者如果限定起源AS用前者。這種題目答案很明確但很多沒實操經(jīng)驗的人會混淆。我建議備考時在模擬器里建一個BGP環(huán)境手動配幾條route-map把正則表達式和過濾邏輯親手跑幾遍記憶會牢固很多。9.3 網(wǎng)絡質(zhì)量觀測RTT、抖動、丟包率到可用性的推導關系最后一類容易被忽略的題目是網(wǎng)絡質(zhì)量觀測類。它會給你一組數(shù)據(jù)某條鏈路的RTT是20ms抖動5ms丟包率0.1%問這條鏈路的可用性是多少這里“可用性”的定義不是簡單的1減去丟包率而是要看業(yè)務模型。比如嚴格依賴TCP傳輸?shù)臉I(yè)務0.1%的丟包率會導致大量TCP重傳和擁塞窗口退化實際吞吐可能下降超過5%可用性遠低于99.9%。這個問題的深層考點是網(wǎng)絡質(zhì)量指標不能只看單個值需要結合協(xié)議行為和應用場景做聯(lián)合分析。核心網(wǎng)絡研發(fā)工程師在真實工作中就是干這個的——接報警、看指標、定位鏈路瓶頸、優(yōu)化轉(zhuǎn)發(fā)路徑每一步都需要這套分析能力。我把這些“邊角料”單獨拎出來是因為它們在我的經(jīng)驗里恰恰是拉開分差的地方?;A題大家都會協(xié)議細節(jié)背一背也能過關但能把DNS解析、BGP實操、鏈路質(zhì)量分析這些細碎知識融會貫通的人才是真正適合核心網(wǎng)絡研發(fā)崗位的人。這套筆試的第三批題目本質(zhì)上就是在篩選這批人。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
日韩在线观看中文字幕视频| 九九九色| 精品综合久久久久久五月天| 亚洲av热热色| 欧美夜夜狠| 蜜臀久久99精品久久久| 91少妇香蕉久久精品| 日韩AV一起草| 色网站导航大全| 影音先锋一区二区在线资源| 97人人模人人爽人人| 九九九色| 日本久久久精品电影| 免费黄色片子| 亚洲色图美腿丝袜| 91精品伊人久久久大香线蕉91| 青青国产精品在线| 性爱乱伦一区| 天美91| 精品无码产区一区二| 国产亚洲99久久精品| 操逼逼一区视频| 神马久久久久久久久| 啊啊啊 在线观看| 日韩亚洲精品一区二区| 欧美成人免费在线观看| 亚洲精品黄码久久久久| 亚洲综合图片在线| 成片免费播放| 黄色毛片A片| 一级性爱视频免费观看| 加勒比aⅴ| 91精品国产长腿丝袜美女| 欧美亚综合色图| 狠狠穞A片一區二區三區| 黄色AAAAA欧美| 日韩97P| 午夜福利合集| 久夜操| 久久久久久久六六| 精品人妻一区二区三区视频| 久久久男人的天堂| 操死我了嗯嗯嗯| 午夜天堂网| 日韩美脚一区二区网站| 狠狠中文字幕| 久久久久久夜夜夜夜夜| 狠狠狠一区二区三区| 日本日逼视频网| 夜色AV无码手机在线影院| 91丰满| 国内外激情在线| 青青伊人久久| 在线观看午夜婷婷久久久久清性观看| 裸体1区| 亚洲不卡不卡中文字幕不卡 | 97超碰色屌| 五月丁香婷婷色| 色色色色电影网| 日韩激情中文字幕有码| 大色综合网| 91粉嫩萝控精品福利网站_精品影音先锋国 | 樱花蜜乳av| 乱论91| 日韩一级片在线看| 成人在线视频网| 六月婷婷激情| 欧美色图片91| 亚洲图片 激情小说| 超碰在线1234区| 蜜桃臀一区二区三区久久| 亚洲诱惑天堂| 操屄日韩| 日本色色视频网站| 丁香久久| 中文字幕免费观看| 久久久久久免费电影| 亚洲干B| 久热这里只有精品9| 欲香欲色| 久久精品国产精品亚洲艾通辽熟妇| 96精品在线| 色婷婷成人综合| 国产久久男人天堂| 日本媚薬中文字幕在线| 涩综合导航| 家庭乱伦网站国产| 午夜精品一区二区三区三上悠亚| 蜜桃精品一区二区三区久在线| 丝袜视频一区二区在线播放国产中文| 欧美综合自拍亚洲综合图| 丝袜足交视频| 久久99午夜精品一区人妻| 丁香五月婷婷基地| 日韩精品99久久久久久中文字幕| 好舒服视频| 9久9久9久9久视频网站| 最新的亚洲无吗| 综合激情婷婷| 欧美亚洲日韩16色| 亲子敌伦对白在线播放| 亚洲欧洲日韩国产自在线| 人妻少妇精品一区二区三区| 亚洲日韩乱码中文无码蜜桃臀网站| 综合亚州欧美| 人人 操人人 操人人| 国产亚洲美日韩Aⅴ中文字幕无码成人| 麻豆天天躁天天揉揉AV| 毛片17S| 婷婷三区| 玖草在线视频| 亚洲性爱无码乱伦av| 青娱乐亚洲热| 欧美综合1性辶| 国内毛片国产专区二| 久久中文字幕一区不卡| 久久艹逼视频| 伊人五月天婷婷| 久久日韩肥臀| 双插在线| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 国产婷婷一区| 一区| 国产超碰人人爽人人做| 国产人妻精品一区二区三区秋霞| 亚洲欧美另类激情小说| 日本色色色| 欧日韩在线观看| 91N综合网| 成人精品一区二区91毛片不卡| 亚洲天堂性爱| 91亚洲不卡一区| 乱老女人一区二区视频| 国内精品伊人久久久久影院会| 91视频成人福利网站在线一区 | 精品丰满人妻一区二区三区免费观| 亚洲 中文 女同| 啊啊啊久久| 少妇一线天久久久久久| 九九九国产| 久久一区无码| 日日操免费视频| 免费啊啊啊| 巨爆乳一区二区爆乳区| 俞拍自拍| 久久久久国产精品喷潮免费观看臀| 免费农村成人少妇人妻Aa一区二区视频| www.久久最新地址| 精品成人女人久久| 乱伦日本色图AⅤ| 午夜综合在线| www.狠狠操| 中文字幕乱亚洲美女精品一区| 九九九九久久久| 91天天综合| 97超碰色屌| 最新三级网址| 大香蕉草草| 美中韩AV综合网| 国产精品精品系列在线观看| 亚洲电影91| 国产二区三区粉嫩在线| 台湾肥佬网一区二区三区| 小视频玖玖| 东京热,男人的天堂| 91网站18在线| 97色爱| 蜜臀AV网站| 淫骚熟女一区二区三区| 久色99999| 青青青国产| 东京热,男人的天堂| 欧美姓爱综合网| 蜜臀99999| 在线观看黄色电话| 98福利在线视频| 久久精品99| 久久精品国产免费观看99| 综合网亚洲1| 99re热| 亚洲无限观看| 亚州国产精品乱| 日韩在线地址一| 国产亚洲深夜激情| 少妇激情一区二区三区视频| 日韩av色图| 久久久精品国产亚洲伊人| 中文字幕交换人妻| 中文字幕久热视频在线| 日本影视久久免费| 国产老太乱伦一区| 天美传媒AV在线| 加勒比伊人综合| 97精品视频免费| 91大胆欧美| 欧美亚洲日本视频久久久| 性爱AV天堂| 大香蕉天天看妹子| 日日躁夜夜躁狠狠躁超爽| 欧美综合天堂| 老女人综合网| 国产亚洲精品玖玖玖在线观看| www.色婷婷| 欧美成人亚洲精品| 美女极品一区二区三区| 91成人国产综合久久精品蜜月| 亚洲久草AV色图| 国产精品一区二区后入| 99黄页网站| 大香樵伊人网| 亚洲av无码国产精品字幕| 婷婷五月天激情四射| 99久久婷婷国产综合精品草原| 可以免费观看的AV| 偷拍 精品 另类 四区| 色综合天天| 国产剧情一区在线观看| 久久久久久久久久久999| 激情欧美日韩女同久久| 无码精品久久久久久亚洲| 996热| 久99热| 国产成人网| 亚洲无码色| 九九成人| 欧美国产成人在线| AV中文字幕剧情1区2区3| 色阁阁AV综合网| 十八禁电影伊人网| 国产成人五月天丁香花| 亚洲国产日韩欧美熟妇在线| 欧美性爱五月天| 成人小说另类在线| 神马午夜久久久| 国产日韩欧美中文在线播放| 91久久久久| 国产操逼逼网| 久久华人网| 亚洲AV无码AV吞精久久久久 | 粉嫩不卡一区二区性爱| 国内外激情在线| 女人香蕉久久毛毛片精品| 一级人妻性爱视频| 色香网| 97精| 黑人嘿嘿嘿超爽免费视频| 情色五月天网| 久久久久久中文| 蜜臀久久99精品久久久久久酒店| 欧美一区二区三区互相| 无码 有码 国产18p| 日日干夜夜干| 日日摸日日碰| 在线免费观看高清无码视频| 日韩乱伦影音先锋| ,国产乱人伦精品一区二区三区| 日本精品性生活久久久| 男人天堂2030| 久操视频资源站公开| caorenqi shipin| 亚洲大胆人体av| 大香久久| 网页导航五月天免费一二三区| 欧美黄页在线| 日日摸日日弄日日拍| 91精品国产91久久福利| 性爱综合网| 新97国产超碰| 男女日B国产| 69精品人人人人| 亚洲色入欧美| 亚洲日韩AV视色| 久湿久久 | 激情综合色| …亚洲黄色厕厕女女在线播…| 青青草伊人久久| 亚洲强奸乱伦影视网| 啊啊啊啊啊啊好多水| 26uuu国产成人综合| 激情熟女12P| 亚洲欧美校园| suv精产一二三区| 美女91在线观看| 色综合大香蕉| 日韩av一级黄片| 91男女啊啊啊| 91情色| 中文久久爆乳| 亚洲熟久久| 成人久久久| 91精品国产麻豆国产自产在| 色香伊人| 免费啪啪av| 伊人97超碰| 一区二区无码视频| 岛国艾薇凹凸视频天堂| 人妻 制服 日韩 中文 在线| 午夜a成v人电影| 午夜人妻精品综合在线| 综合五月天| 国产精品岛国片在线观看| 红杏大香蕉| 亚州性色| 精品久久99| 亚洲另类天堂| 大稥蕉免费视频这里只有精品| 久男人久久| 丰满人妻av一区二区三区| 亚洲综合99999| 精品综合久久久久久五月天| 97色97好| 超碰色男人操熟女| 亚洲中文字幕一区| 亚洲夜夜欢无码一区二区 | 久久日本熟女精品一区| 久久国产乱子伦精品免费女人| 日韩三级在线观看mp4| 91亚洲高清| 亚洲综合小说另类图欧美视频激情小说色五月天| 国产一区二区免费福利片| 大香蕉亚洲中文| 久久噜噜噜精品国产亚洲综合| 色欲日韩欧美在线一区| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 中文字幕一品色图| 99久久久无码国产精品性男| 中出20p| 男人的天堂2010| 操国产高清| 亚洲欧美天堂在线| 曰韩操B| 色五月AV在线| 天天看综合网| 人人看人人插| 校园春色家庭伦理欧美激情| 97超碰国产亚洲精品资源| 牛牛AV人人夜夜澡人人爽| 粘花网06av视频| 亚洲最新中文字幕免费| 91亚洲图片| 男人的天堂成人的社区| 国产av美女被艹的乱叫| www熟女乱伦com| Aa东京男人的天堂| 人妻AV 中文字幕的| 黄色免费网| 超碰碰小说97| 熟妇最新先锋一二三区| 一级A片女人高潮叫床| 我要色综合网站| 九九成人精品| 亚洲欧美国产日本一区二区三区| 白丝被操91| 亚洲97网站| 中文伊人大香蕉视频| 超碰无码加勒比| 久热精品在线| 干B| 屌逼传媒| 国产精品久久久久av| 欧美视频一| 四季av一区二区凹凸精品小说| 人妻密肉在线观看| 免费人成?大片在线播放| V A在线| 天天碰久久入| 人妻天天爽| 久久久久久久久久久人妻| 四虎影院成年人片| 成人午夜小视频手机在线看| 国产无码久久高清| 中文字幕在线免费观看| 人妻少妇精品无码专区二区密桃| 亚洲999综合| 小草精彩毛片| 色色综合网站| 欧美精品日韩一区二区| 欧亚成人| 成人 日本A片无码8888| 国产一区免费午夜视频| 精品视频一区二区| 人人妻人人爽| 天天爽天天操啊啊啊| 美女让帅哥通她小鸡鸡| 国产精品天干天干综合网麻豆| 日韩一级二级| 九九热免费国产视频婷婷伊人| 欧美午夜视频精品久久| 国产亚洲美日韩Aⅴ中文字幕无码成人| 热天堂一区二区| 国产美女高潮叫床视频| 国产www色在线观看| 国产成人一级av88| 国产高清吃奶免费视频网站| 日小BB小视频| 久久久精品91八戒| 日日日日做夜夜夜夜无码| 欧美视频一| 日韩肏逼视频| 国产福利一区二| 日本色色色网站免费看不卡| 超碰在线人妻中文字幕| 天天干天天燥| 激情五月天社区| h无码动漫在线观看| 网页导航五月天免费一二三区| 黄色片,com| 久久社区一区二区三区| 无码逼| 婷婷综合激情| 97二区四区| 亚洲色图加勒比| 夜夜骑天天燥| 国内一区二区三区| 日本一道在线播放高清| 婷婷av在线中文字幕| 日韩中文字幕视频| 九九无码视频| 嗯嗯嗯啊啊啊操的我好爽| 国产乱婷婷精品二区三区| 天操天操夜操夜月操月年年操| av在线人气| 97激情97激情| 91在线一起| 久久久久久九九九九九| 亚洲欧美日韩制服另类| 日本性爰一道本| 99操视频| 一区二区三区四区五区高清无码永久视频 | 久久久精品视频免费观看| 免费操逼视频下载| 偷拍伦理视频| 新视频sss国产| 久草加勒比一区在线| 日日干天天干夜夜爽| 无码日韩人妻av一| 91 在线亚洲| 超碰人妻久久人妻中文97| 国产精品3| 97超碰护士| 韩三级a视频在线观看| 404操逼福利视频| 欧美v日韩欧亚洲电影天堂色诱,国产传媒| 日韩一性一交一A片俄罗斯| 国产精品激情久久久久久久| 999岛国大片| 日韩精品三区四区| 宅男午夜在线视频| 欧美亚洲韩国视频十五区 | 国产精品成人AV片免费看网站| 国产对白刺激视频| 26uuu欧美| 98精品国产乱码久久久久久| 国产在线视频午夜精华在| 欧美不卡二区| 中文字幕天天天天天| 91网站在线播放| 欧美日韩电影成人在线| AV中文在线| 9 9无尺码天堂网| 成人国产视频在线观看| 吻戏激情性巴克| 亚洲熟女少妇免费视频| 久久综合国产精品国产| 精品无人区麻豆乱码久久久| 色亚洲欧美| 国产亚洲精品美女久久久m| 77777亚洲蜜臀精品久久综合蜜臀| 99热18这里只有精品| 人妻无一区二区三区| 欧美嗯啊……在线观看视频免费| 亚洲 欧美 日本 国内 首页| 色婷婷九月天天综合| 亚洲视频小说| 日本免费一级AAA大片器 | 欧美青青视频| 久久黄色视频一区二区三区| 欧美久久毛片基地| 亚洲精品尤物yw在线影院| 爆乳免费黄网站| 午夜毛片亚洲精品片国产久久久| 嫖老熟女A片一二三区| 亚洲丝袜二区| 日本性爱视频一级| 天操天操夜操夜月操月年年操| 国产高清精品一区二区三区毛片| 色爱综合网欧美| 中文字幕日韩专区精品系列| 91天美传媒精品| 中国AAAAAA黄色片| 九九热五区| 91人妻精华帖| 91精品少妇搡搡搡| 999国产精品999| 999久久久久久久久| 国产超碰人人爽人人做| 九九九999久久久网站| 爱我干综合| 欧美亚州综合网图片| 99精品久久| 少妇久久久久久久久| 天天操狠狠日夜夜干超碰撸com视频在线观看 | 日韩性爱视频在线免费观看 | 巨乳特殊服务按摩| 99视频内射三四| 97亚洲中文| 色牛牛AV| 人妻另类 专区 欧美 制服| 久久久久久久久久久久久久9999| WWW操逼| 精品人妻一区二区乱码一区二区| 精品区国产区一区二区三区| 高清视频一区| 欧洲射精91| 郑州宾馆老熟女露脸啪啪| 伊人9| 亚洲日本韩国极品一区二区| 日韩精品人妻一| 国产精品久久久久999| 久久久久久精品免费看A级| 欧美亚洲韩国视频十五区 | 精品四五区| 久久久久人妻| 人人插人人摸人人| 秋霞怕怕片| 爱妻综合网| 97超碰jingpin| 国产一级作爱毛片| 麻豆美女丝袜人妻中文| 天天日美女的B| 人妻激情偷乱视频一区二区三区| 日韩乱伦影音先锋| 97免费视频在线观看| 日本九九久久99| 欧美久久草熟女| 色噜噜精品一区二区三| 亚洲激情片| 国产熟女自拍| 精品毛片av一区二区| 韩国一级婬片A片无码天美| 大香蕉伊人网WWWn0n| 黄色高清无码无码破解免费暗网| 国产在线观看一区二区三区| 熟妇无码视频三区| 熟女中出视频| 91neishe| 日韩成人精品中文字幕| 91c色| 国产高清亚洲日韩一区| julia国产在线| 熟妇人妻一区二区三在线| 亚洲天堂,男人| 国产精品国产亚洲区艳妇糸列| 男人天堂无码| 久久久9999| 亚洲色棕合| 伊人操操| 天天综合欧美综合| 蜜桃久久综合视频| 婷婷亚洲综合| 人妻少妇被猛烈进入中| 91人精品妻入口| 九九热AV| 日韩av无码网站| 国产400孕妇孕交群| 欧美综合综合| 亚洲色交| 老鸭窝成人免费毛片视频| 九九九九九九九九九九九蜜桃| 亚州久久9| 97青青操视频| 国产精品熟女AV中文字幕在线播放| 激情综合色| 免费人成毛片乱码| 精品欧美老熟女一二区| 91欧美亚洲| 91亚洲欧美| 激情小说在线视频| AV乱伦国产| 成人无遮挡毛片免费看| 欧美亚洲91| 国产主播福利| 久久久久人妻二区精品叶可怜| 91性高朝久久久久久久久| 日韩欧美女优电影| 中文字幕 人妻不满 在线视频| 国产第25页在线观看| 国产三级多多影院2022国产AA一级毛片无码 | 吻戏激情性巴克| 开心婷婷五月| 人妻少妇精品一区二区三区| 青青草在线成人视频| AV色天香在线| 麻豆精品A片免费观看| 99999精品成人| 欧美性生活内射| 自拍第一页| 午夜αv| 1人人看人人摸人人操| 激情网色| 六月激情网| 在线黄色污污网站| 婷婷精品久久av影视| 超碰97中文| 成人性爱av| 91精品国产高清久久久久久,亚洲成人 | 国语av最新自产拍在线观看| 校园春色 男人天堂| 91九色丨国产丨爆乳| 成人羞羞视频国产| 日本一区二区不卡精品| 丁香五月天激情综合| 污到发麻的视频 国产| 亚洲欧美爆| 狠狠干2020| 东京热毛片177b2viP| 天天操夜夜操狠很操| 日韩欧美视频青青| 欧亚日韩三区| 蜜臀99精品国产高清在线观看| 日韩欧无码一区二区三区免费不卡| 久久无码成人| 中文字幕在线24| 激情文学 亚洲图片| 女人香蕉久久毛毛片精品| 极品销魂美女一区二区| 亚洲图片欧美在线视频| 91精品国久久久久久无码| 97国产|免费| 中文字幕国产| 玖玖97综合| 亚洲麻豆18发?| 我要去看2个日本美女.com曹逼| 久久鲁干| 蜜桃久久久久久久久久久久| 97在线视频免费观看| 欧美精品久久久久久久久88| 91nbbbbbb| 天天干天天做| 久久九操在线观看| 日本熟女不卡视频| 女色视频社区| 女人香蕉久久毛毛片精品| 三级激情网站| 久久国产视频专区一二三| 无套后入双马尾| 天天干天天燥| 成人熟女视频一区二区三区| 欧美天天干| 亚洲成人久久美女| 久久久九精品| 国产精品成人福利在线| 国内操逼视频二区| 久久久久免费看少妇A片特黄| 偷拍网站久久男女男| 亚洲情色 自拍| 丁香五月色情| 久久这里只精品| 极品色www影院| 精品一区二区久久| 亚洲成aⅴ人片不卡无码| 国产白领连续中出在线观看| 97日韩| 九九热免费国产视频婷婷伊人五月 | 性无码专区2020| 欧苏综合色综合| 久久午夜神马| 久久,精品一二三| 91美女小视频| 九九伊人网| 免费一级精品啪啪视频| 亚洲天天在线| 激情在线青青操| 国产伊人精品在线| 亚洲AV在线资源| 国产美女精品| 亚洲自拍一区夜夜操| 天天操妹子| 精品国产乱码久久久久久日本公司| 亚州熟女乱伦| 91美女丝袜诱惑视频| 色香综合| 人妻精品一区二区全免费| 亚洲无码国产探花在线观看| 超碰这里只有精品| 在线精品福利免费播放| 亚州五月| 亚洲日本韩国极品一区二区| 亚洲电影中字一区二区| 狠狠躁AV| 亚洲无吗在线视频| 蜜臀99久久精品久久久久久| 啊啊啊啊嗯嗯嗯用力好爽 | 粉嫩在线一区二区懂色| 亚洲男人在线观看天堂| 丝袜夫妻自拍| 亚洲成A∨人影院在线欢看| 91丝袜人妻| 啊啊啊啊啊在线观看网址| 丰满人妻无码一区二区三区| 人妻熟妇一区二区三区| 欧美专利1区2区3区4区5区免费| 亚洲av无码国产精品字幕| 欧美与日韩97| 91人人爽人人爽人人人,gav福利视频导航,日韩欧美亚洲国产字幕四区 | 视频国产精品未满十八禁止在线观看| 9ⅰ久久久天天| 97爱爱爱综合| 看日韩操逼| 久久成人东京热人妻| 99精品丰满人妻无| 插日本熟女视频| 97久久精品| 一区二区亚州激情久婷婷欧美| 天天看天天综合成人网| 亚洲高清无码在线桃色| 日本欧美中文字幕| 欧美在线视频播放| 天天看综合网| 日本午夜精品理论片A级APP发布| 明星性猛交ⅹxxx乱大交| 五月天亚洲网| 欧美性暴力猛交XXXX| 啊…啊…操我用力操我| 色成人Www精品永久观看| 日韩无码一区二区三区| 男人精品天堂一区| 91在线综合网| 免费观看有码高清视频| 欧美顶级黄片AAAAA在线免费看| 老司机福利青青草| 色妇综合网| 2019男人的天堂| 欧美亚洲日韩人妻在线观看| 在线 亚洲 网爆 自拍| 久久精品国产亚洲AV无码电影| 五月天AV资源| 1000午夜黄色| 天天天肏屄欧美| 免费久久精品麻豆一区二区av| 亚洲欧美综合区自拍另类| 91精品人| 人妻久久| 清纯唯美综合亚洲| 九九热视频这里只有精品| 久久婷婷色综合一区二区三区| 亚洲国产日韩欧美熟妇在线| 亚洲超碰AV| 国模艳艳啪啪一区| 国产欧美精选自拍一区| 日本人妻中文字幕| 中国一级特黄大片护士| 亚洲情色在线| 爽爽爽免费视频| 精品成人无码| 都市久久精品激情亚洲| 97Ai亚洲| 九九九九9999| 无码九九| 超碰超碰超碰超碰的大鸡吧操黑丝袜 | 日韩在线性爱免费视频| 97色伦97色伦国产欧美| 国产精品久久久 | 啊啊在线| 久久这里只| 久久久涩| 1240青青草一区二区三区视频天爱| 欧美96在线|欧| 精人妻无码一区二区三区伊人直播 | 欧美91精彩| 天美传媒av在线| 91日产桃蜜| 97伊人网| JIZZJIZZ亚洲女人被躁| 熟妇xxxxx性春色| 美国人人操人人操| 亚洲 欧美日韩 另类| 国产欧美亚洲精品a第2页| 久久久久久AⅤ无码免费肉站| 婷色五月| 亚洲伊人久久精品狠狠在线| 欧美久久婷婷| 国产九九九九九九| 超碰久超碰久| 久9精品| 中文字幕精品一区欧美| 乱欲一区二区| 91女网站| 在线免费试看60秒| 欧美日韩一二三| 日韩肏逼视频| 天堂无码精品国产久| 综合啪啪| 九一综合网| 国产久久天堂资源| 隔壁邻居波多野结衣中文字幕| 囯产乱伦一区二区三女 | 殴美性天天| 激情小说日韩无码| 色欲蜜臀AV| 小情侣高清国产在线视频| 丁香五月天激情综合| 欧美午夜精品久久久久久超碰| 粉嫩AV一区夜夜嗨| 91N综合网| 欧美日韩国产三级黄色| 99色热| 亚洲欧美爆| 欧美偷偷网| 中文字幕丰满人妻日本| 午夜寂寞欧美| 亚洲城人男人的天堂| 国产丝袜高跟美女av免费观看| 国产午夜精品理论片一二三区区| 人妻精品一区二区在线| 男人兔费天堂| 97国产精品久久久久| 99久久久无码国产精品性啊聊| 亚洲精品人妻吞精av| 亚洲日韩青青草色月| 东北女人性交| 免费A V在线播放| 日韩紧密久久| 日日爱99| www.夜夜操| 嗯嗯啊啊日韩精品| 26uuu久久| 人妻天天夜夜爽一区二区| 国产蜜臀在线| 亚洲自拍天堂| 久久久久久久久久久久久久久乱码| 欧美中日韩XXXX| 乱伦3P视频| 91是天天| 97天天日| 色优久久| 欧美激情 亚洲色图| 国产午夜激片Av毛片不卡| 激情四射婷婷四五月天| 日本色日夜干| 极品色www影院| 玖色av| 思思在线免费视频| 少妇第一页| 亚洲欧美在线观看2021| 美女诱惑在线一区| 国产成人手机视频激情| 欧美日韩精品久久| 情趣丝袜无码操逼视频| 青青草在线视频人人想人人上 | 999久久久免费精品国产牛牛| 欧美久久九九| 69一区二区三区 | 国产人妻精品久久久一区二区三区 | 狠狠爱综合| 久久香蕉国产线看观看亚洲女人 | 伊人国产AV| 偷看洗澡一二三区美女| 天天干人妻视频| 性做久久久久久免费观看软件| 伊人宅男大香蕉| 国产精品久久久三级无码| 色香综合天天影视综合 | 亚洲精品色| 欧美岛国精品在线观看| 啊啊啊好舒服好爽啊啊啊视频| 国产高清精品一区二区三区毛片| 久久伊人青青草| 新婚人妻扶着粗大强行坐下| 日本亚欧爱爱| 国产成人网| 91免费看一区二区三区 | 亚洲男人的天堂网| 操逼日韩无码 | 国内精品嫩模A∨私拍小视频| 九九热免费在线国产视频伊人五月| 久久久久久99AV无码免费网站| 黄色成品网站| 欧美精品一区二区少妇免费A片| 91精品婷婷国产综合久久竹菊| 92午夜免费福利视频| 无码九九九九| 97久精品| 日韩Va亚洲va欧美Ⅴa久久| 中文字幕二区| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 99久久精品无码一区二区毛片免费| 色欲色香天天天综合网www-亚洲综合国| 人妻少妇三级| 天天色播亚洲综合网站| 加勒比中文av| 欧美色日本| 九月丁香| 最新日日夜夜天天干干| 欧美性天天影院| 人人爱操| 日韩免费看在线黄色片| avav青青草久久夜| 激情露脸爱| 亚洲综合精品国产一区| 欧美色亚洲| 学生妹天天看| 亚洲日韩成人性爱视频| 96久久久久| 香蕉免费一区二区三区不读 | 亚洲丝袜色图| www黄片免费看com| 91美女在线观看| 好屌色综合| 校园春色 男人天堂| 香蕉久久AⅤ...| 欧美性色网| 亚洲日韩肥臀视频在线观看| 青草av在线| 99国产在线 精品 视频| 999精品乱码| 国偷自 一区| 欧美操逼视频二区| 欧美激情总合网| 国产呦精品一区二区三区下载| 亚洲日韩av专区无码| 欧美同性恋 的搜索结果 - 91n| 台湾肥佬网一区二区三区| 噜噜噜无码AV一级一级久久影院| 伊人网青青| 午夜一区| 人妻少妇无码 | 无码聚合| 正在播放国产精品一区| 日本一区二区不卡| 欲色综合| 日本精品一区二区三| 97久久免费| 夜夜中出国产| 婷婷五月花| 国产AV久久久蜜爱影集| 国产熟女完整版中字| 中文字幕人妻资源在线| 99re视频这里只有精品| 热G综合热G中文| 亚洲人码13| 亚洲 另类 丝袜 自拍 动漫| 九九九九九九成人| 亚洲宗合电影| 欧美亚综合色图| 欧美色棕合| 色色色综合网| 亚洲第一综合| 欧美熟女操屄| 两性色网| 国产真实野战在线视频| 国产精品无码论坛| 日本操BAV| 丰满的三级少妇欧美久久久| 国内自拍 日韩激情 99| 国产精品久久久三级无码| 国产精品香蕉热久久新品| www…国产操逼| 91色婷婷综合久久中文字幕二区| 思思热久久成人| 殴美大黄片| 久久久成人国产精品无码| 日韩精品一区的| 9999久久久久| 日本美女性生活久久久久久久 | 中文字幕国产在线天堂| 国产高清自拍| 日韩一级性爱无码| 另类亚洲一区二区三区| 麻豆久久精品亚洲精品88| 日韩无码一级黄色av片| 91久久免费视频互動交流| 午夜视频久久久久一区| 岛国黄| 国产乱码精品一区二区三区四川| 亚洲一本大道中文字幕无码在线| 亚欧视频在线| 色官网在线| 干B视频伊人网| 亚洲综合性网址| 伊色久人大在线| 熟女少妇一区二区三区| 午夜精品久久99蜜桃的功能章节| 国产在线观看一区二区三区| 欧美色宗合| 日本一区视频在线观看| 粉嫩不卡一区二区性爱| 国产激情综合五月久久| 日韩性爱1级片视频| 99久久无色码| 欧美色欧美| 大香蕉黄色一区| 无码九九九九| 国产亚洲深夜激情| 成人性爱电影网| 大屁股国产在线视频| 东京热一区二区中文字幕| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴| 国产高清精品福利| 日本久久综合| 日本人妻伦在线中文字幕| 亚洲春色激情小说| 人人妻人人澡人人爽久久av| 91狠狠综合久久| 亚州精品人妻一二三区| 99久久精品国产高潮| 色欲人妻一区二区在线| 国产精品嫩草影院午夜两性| 欧美三级一级| 免费a v| 91美女视屏| 蜜臀视频网站| 91九久| 久久精品国产亚洲5555| 在线观看AV片| 97天天操天天干| 国产强奸乱伦xd| 欧亚乱色熟一区二区三四区| 蜜乳中文字幕a在线| 天天摸,夜夜摸| 91天堂网| 青青青操| 少妇人妻好深太紧了vr91| 九九亚洲精品| 熟妇的味道HD中文字幕| 国产噜噜噜噜噜久久久久久久久| 插穴性爱视频在线观看| 久久久99999久网站| 亚洲一级特黄大片在线播放91| 91超碰碰在线| 韩国黄色片精品久久久| 日韩一级二级三级| 国产精品美女在线一区| 九九九精品色乱九九九| 综合色播| 久久日本熟妇熟色一区| 美腿色图| 国产成人无码啪| 很黄很色的视频在线观看| 丁香激情五月天| 五月丁香婷婷综合| 91久久国产精品| 久久99黄色卞西瓜| 26uuu成人影片| 日日干男人的天堂| 日本在线不卡v二区| 欧美久久人体| 丰满人妻一区二区三区在线| 国产精品福利视频播放| 亚洲诱惑天堂 | 男女一进一出视频久久| 女一区二区| HEYZO高无码国产精品227| 国产AB视频| 69人妻精品一区二区绯色| 香蕉99秘 一区精品蜜桃臀| 日韩伦理视频| 丝袜美腿制服人妻二区中文字幕| 精品一区二区久久| 禁止观看美女黄| 国产 无码 一区二区| 亚洲成人无码影院| 久久久久久久久久久人妻| 国产一在线观看| 97操综合| 夜夜夜夜夜夜夜夜夜狠狠狠狠狠狠狠| 国产精品一区二区亚洲人成毛片| 丝袜高跟澳门91视频| 九九九九九九九九九九九免费国产| 国产理论视频在线播放| 国产女人视频三四五区| 欧美亚洲成人在线一区二区三区| 射 色综合| 久久性爱视频免费看| 大香蕉日亚洲日本亚大 | 欧美亚洲| 啊啊啊久久久视频| 婷婷日韩一区二区三区中文字幕在线| 欧美成人一级免费电影| 欧美在线啊啊啊| 亚洲 日本 一 二 三| 一级久久久久久久久久久 | 九九九九九九成人| 欧美激情综合色综合啪啪五月| 成人 日本A片无码8888| 人人搞人人插人人操| 91女日逼| 99日免费视频中文字幕| 中文一区二区婷婷视频| 久久HD| 国产做?爰片久久毛片?片美国| 午夜男女爽爽爽影院视频| aV中文麻| 91精品久久久久久久久久| 妇女视频网站| 中文久久一区| 蜜臀国产AV中文字幕| 2020国产精品| yellow网站免费观看日韩高清无码| 日日夜夜免费| 性高潮久久久| 91男女| Aa东京男人的天堂| 91视频成人福利网站在线一区| 99亚洲天堂| 久久综合九九| www.国产高潮精品| 久久这里是精品| 久久透逼视频| 成年人网站在线免费观看| 天天爱天天操| 国语精品av| 无码粉嫩白虎一线天b区| 丝袜内射| 国产久久一区二区三区野外在线| 91亚洲不卡一区| 久久久艹艹艹| 97亚洲综合电影| 男人天堂婷婷五月天校园春色| 婷婷97| 大香蕉九九| 久久99综合| 99色色网| 激情五月天婷婷| 无遮挡h肉动漫在线观看| 日日碰狠狠添天天爽超| 国产精品久久久久av| 日韩在线观看中文字幕视频| 亚洲中文国际强奸字幕| 国产第12页| 中日韩熟女| 日本午夜操逼| 亚洲成?V人片在线观看福利| 睡产熟女乱伦| 日韩国产成人自拍视频| 国产精品久久久久av| www.大香| A级片日韩欧美国产欧美视频精选观看| 国产美女精品| 日本女厕偷拍| 啊啊啊97视频| 欧美亚洲国产日本在线,久久精品国产| 久久精精区一区二区一蜜桃一区二区| 日韩婷婷| 久悠悠av| 久久熟妇五十路一区| 亚洲欧洲无码97久久精品| 激情露脸爱| 骚逼自拍99| 97国产综合欧美| 香蕉免费一区二区三区不读| 天堂av最新电影网| 久久超碰日韩精品| 操国产逼| 国产操逼网站亚洲一级黄色| 国产精品嫩草久久久久| 一级啊性爱在线视频| 思思热在线视频精品| 国产欧美一区二区| 韩日巨乳美女免费视频在线观看|