日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

VRRP多VLAN鏈路負(fù)載分擔(dān)配置實(shí)踐:雙網(wǎng)關(guān)冗余與故障切換

VRRP多VLAN鏈路負(fù)載分擔(dān)配置實(shí)踐:雙網(wǎng)關(guān)冗余與故障切換 在園區(qū)網(wǎng)絡(luò)或企業(yè)分支網(wǎng)絡(luò)中網(wǎng)關(guān)設(shè)備一旦故障所有依賴(lài)該網(wǎng)關(guān)下行的終端都會(huì)斷網(wǎng)這是典型的“單點(diǎn)故障”問(wèn)題。而采用 VRRP 做網(wǎng)關(guān)冗余時(shí)如果只是簡(jiǎn)單地把兩臺(tái)設(shè)備配成一主一備備用設(shè)備常年閑置鏈路利用率又太低。本文將圍繞“配置 VRRP 實(shí)現(xiàn)多 VLAN 的鏈路負(fù)載分擔(dān)”展開(kāi)先帶你理解 VRRP 的工作原理和“負(fù)載分擔(dān)”的實(shí)現(xiàn)方式再給出一個(gè)可以在 eNSP 中完整復(fù)現(xiàn)的多 VLAN 場(chǎng)景實(shí)驗(yàn)包含 VRRP 組規(guī)劃、交換機(jī) VLAN/Trunk 配置、路由器子接口配置、驗(yàn)證與故障切換測(cè)試最后整理常見(jiàn)雙主、搶占、通信異常等問(wèn)題的排查思路。內(nèi)容偏實(shí)踐適合正在學(xué)習(xí)華為設(shè)備、準(zhǔn)備網(wǎng)絡(luò)工程師認(rèn)證或在企業(yè)網(wǎng)中做網(wǎng)關(guān)冗余改造的讀者。1. 背景與核心概念1.1 什么是 VRRPVRRPVirtual Router Redundancy Protocol虛擬路由器冗余協(xié)議是一種容錯(cuò)協(xié)議。它的核心作用是把網(wǎng)絡(luò)中兩臺(tái)或多臺(tái)路由器“編成一個(gè)組”對(duì)外提供一個(gè)虛擬 IP 作為終端網(wǎng)關(guān)。終端只會(huì)感知到這個(gè)虛擬 IP而不會(huì)關(guān)心真正轉(zhuǎn)發(fā)流量的是哪一臺(tái)物理設(shè)備。在這個(gè)虛擬路由器組中Master 路由器負(fù)責(zé)轉(zhuǎn)發(fā)終端發(fā)往網(wǎng)關(guān)的流量同時(shí)周期性發(fā)送 VRRP 通告報(bào)文。Backup 路由器監(jiān)聽(tīng) Master 的通告報(bào)文處于待命狀態(tài)。Virtual IP終端配置的網(wǎng)關(guān)地址由 Master 和 Backup 共同“虛擬”出來(lái)。當(dāng) Master 出現(xiàn)故障、鏈路中斷或優(yōu)先級(jí)變化時(shí)Backup 會(huì)在短暫的時(shí)間后切換為 Master繼續(xù)承擔(dān)網(wǎng)關(guān)轉(zhuǎn)發(fā)工作。對(duì)終端來(lái)說(shuō)網(wǎng)關(guān) IP 沒(méi)有變化ARP 緩存也會(huì)在虛擬 MAC 切換后得到刷新因此用戶(hù)幾乎感知不到切換過(guò)程。1.2 為什么需要 VRRP在一個(gè)沒(méi)有冗余設(shè)計(jì)的網(wǎng)絡(luò)中終端默認(rèn)網(wǎng)關(guān)通常指向一臺(tái)路由器或三層交換機(jī)。這臺(tái)設(shè)備一旦斷電、重啟、板卡故障或上行鏈路中斷所有終端將無(wú)法訪問(wèn)外部網(wǎng)絡(luò)。雖然可以通過(guò)堆疊、鏈路聚合等方式提高可靠性但如果設(shè)備本身沒(méi)有堆疊能力或者轉(zhuǎn)發(fā)節(jié)點(diǎn)不在同一臺(tái)設(shè)備上就需要在三層網(wǎng)關(guān)層面做冗余。VRRP 解決的核心問(wèn)題就是“網(wǎng)關(guān)冗余”。它不要求兩臺(tái)設(shè)備型號(hào)相同不要求運(yùn)行相同路由協(xié)議甚至不需要兩臺(tái)設(shè)備都在同一個(gè)廣播域內(nèi)直連只要它們能夠通過(guò)二層網(wǎng)絡(luò)互通即可。加上 VRRP 配置簡(jiǎn)單、對(duì)現(xiàn)有網(wǎng)絡(luò)結(jié)構(gòu)改動(dòng)小所以成為園區(qū)網(wǎng)中部署最廣泛的網(wǎng)關(guān)冗余協(xié)議之一。1.3 什么是鏈路負(fù)載分擔(dān)很多人會(huì)把“負(fù)載分擔(dān)”理解成流量逐包或逐流的負(fù)載均衡也就是一條流量同時(shí)均勻分?jǐn)偟絻蓷l鏈路上。這種技術(shù)在華為設(shè)備上通常稱(chēng)為負(fù)載均衡或負(fù)載分擔(dān)常見(jiàn)于等價(jià)路由ECMP和鏈路聚合中。而 VRRP 本身的模型是“一主一備”或“一主多備”。在默認(rèn)配置下備用路由器不承載流量形成了一定程度上的資源浪費(fèi)。為了提升鏈路和設(shè)備利用率可以利用“多個(gè) VRRP 組”來(lái)實(shí)現(xiàn)另一種負(fù)載分擔(dān)將 VLAN 10 的虛擬網(wǎng)關(guān)綁定到 VRRP 組 1由路由器 A 做 Master。將 VLAN 20 的虛擬網(wǎng)關(guān)綁定到 VRRP 組 2由路由器 B 做 Master。當(dāng) VLAN 10 流量到達(dá)路由器 A 時(shí)VLAN 20 流量到達(dá)路由器 B兩臺(tái)設(shè)備同時(shí)工作。這種方式的本質(zhì)是把“網(wǎng)關(guān)層面的主備”轉(zhuǎn)化為“不同 VLAN 之間的互為主備”所以它分擔(dān)的是不同用戶(hù)群經(jīng)過(guò)網(wǎng)關(guān)的流量而不是單條數(shù)據(jù)流的拆分。本文標(biāo)題里說(shuō)的“多 VLAN 的鏈路負(fù)載分擔(dān)”指的就是這種通過(guò)多 VRRP 組實(shí)現(xiàn)的雙設(shè)備同時(shí)轉(zhuǎn)發(fā)方案。1.4 VRRP 負(fù)載分擔(dān)與普通負(fù)載均衡的區(qū)別這里需要特別區(qū)分一個(gè)容易混淆的概念。對(duì)比維度VRRP 負(fù)載分擔(dān)等價(jià)路由 / 鏈路聚合負(fù)載均衡實(shí)現(xiàn)層三層網(wǎng)關(guān)冗余協(xié)議三層路由 / 二層鏈路技術(shù)轉(zhuǎn)發(fā)方式不同 VLAN/網(wǎng)段的流量走不同 Master同一條路由下一跳哈希分配到多條鏈路可靠性主備互為備份故障可切換單鏈路故障后重新哈希配置位置網(wǎng)關(guān)接口或子接口上路由表、鏈路聚合組內(nèi)適用場(chǎng)景網(wǎng)關(guān)冗余同時(shí)兼顧設(shè)備利用率多條鏈路帶寬聚合、流量均衡因此本文的“負(fù)載分擔(dān)”不是 VRRP 的默認(rèn)行為而是利用多個(gè) VRRP 組規(guī)劃出來(lái)的結(jié)果。理解了這一點(diǎn)后面的拓?fù)浜团渲镁蜁?huì)更有針對(duì)性。2. 負(fù)載分擔(dān)的設(shè)計(jì)思路與需求分析2.1 典型業(yè)務(wù)場(chǎng)景假設(shè)某公司內(nèi)部網(wǎng)絡(luò)按部門(mén)劃分了兩個(gè) VLANVLAN 10辦公區(qū)終端網(wǎng)段 192.168.10.0/24。VLAN 20研發(fā)區(qū)終端網(wǎng)段 192.168.20.0/24。為了提高可靠性網(wǎng)絡(luò)管理員準(zhǔn)備部署兩臺(tái)路由器作為終端網(wǎng)關(guān)而不是只使用一臺(tái)。如果只配一個(gè) VRRP 組比如虛擬 IP 為 192.168.10.254那么無(wú)論終端屬于哪個(gè) VLAN流量都會(huì)匯聚到 Master 設(shè)備上。結(jié)果是一臺(tái)路由器 CPU 和鏈路繁忙。另一臺(tái)路由器雖然在線卻沒(méi)有任何轉(zhuǎn)發(fā)任務(wù)。一旦 Master 設(shè)備發(fā)生故障備用設(shè)備接管但在切換瞬間可能存在丟包。更合理的做法是為 VLAN 10 和 VLAN 20 分別創(chuàng)建獨(dú)立的 VRRP 組并讓兩臺(tái)路由器分別成為不同 VLAN 的主網(wǎng)關(guān)。這樣兩臺(tái)路由器都在工作即使其中一臺(tái)故障另一臺(tái)也能同時(shí)接管兩個(gè) VLAN 的網(wǎng)關(guān)不影響整個(gè)網(wǎng)絡(luò)的連通性。2.2 負(fù)載分擔(dān)后的流量路徑以雙路由器雙 VLAN 場(chǎng)景為例配置完成后流量走向大致如下PC1 (VLAN 10) - 虛擬網(wǎng)關(guān) 192.168.10.254 - R1 (Master of VRID 1) PC2 (VLAN 20) - 虛擬網(wǎng)關(guān) 192.168.20.254 - R2 (Master of VRID 2)當(dāng) R1 故障或下行鏈路斷開(kāi)時(shí)PC1 (VLAN 10) - 虛擬網(wǎng)關(guān) 192.168.10.254 - R2 (Backup - Master of VRID 1)當(dāng) R2 故障或下行鏈路斷開(kāi)時(shí)R1 也會(huì)接管 VRID 2 的轉(zhuǎn)發(fā)任務(wù)。整個(gè)過(guò)程不需要修改終端 IP 和網(wǎng)關(guān)配置這也是 VRRP 負(fù)載分擔(dān)方案在工程中受歡迎的重要原因。2.3 設(shè)計(jì)目標(biāo)在動(dòng)手配置前先明確幾個(gè)設(shè)計(jì)目標(biāo)第一冗余性。任意一臺(tái)路由器故障另一個(gè) VLAN 的流量仍能通過(guò)另一臺(tái)路由器轉(zhuǎn)發(fā)且兩個(gè) VLAN 都不會(huì)長(zhǎng)時(shí)間中斷。第二負(fù)載均衡。正常情況下 VLAN 10 流量走 R1VLAN 20 流量走 R2避免單臺(tái)設(shè)備或單條鏈路成為瓶頸。第三配置可驗(yàn)證。所有配置均可通過(guò)display vrrp、ping等命令驗(yàn)證能夠模擬主備切換并觀察結(jié)果。有了這些目標(biāo)接下來(lái)的規(guī)劃和配置就不會(huì)跑偏。3. 拓?fù)湟?guī)劃與地址設(shè)計(jì)3.1 實(shí)驗(yàn)拓?fù)湔f(shuō)明本文實(shí)驗(yàn)基于華為 eNSP 模擬器完成設(shè)備類(lèi)型為 AR2220 路由器和 S5700 交換機(jī)。命令在 V2/V3 系列版本上均可使用如果你使用的是不同版本個(gè)別命令可能略有差異但配置思路完全一致。拓?fù)溥B接方式路由器 R1 的 GE0/0/0 接口連接交換機(jī) SW1 的 GE0/0/24 接口。路由器 R2 的 GE0/0/0 接口連接交換機(jī) SW1 的 GE0/0/23 接口。交換機(jī) SW1 的 GE0/0/1 接口連接 PC1PC1 屬于 VLAN 10。交換機(jī) SW1 的 GE0/0/2 接口連接 PC2PC2 屬于 VLAN 20。R1 和 R2 之間不額外連接互聯(lián)鏈路因?yàn)閮烧咄ㄟ^(guò) SW1 的 Trunk 鏈路已經(jīng)是二層互通。R1 (AR2220) --------- Trunk --------- SW1 (S5700) GE0/0/0 - GE0/0/24 |-- GE0/0/1 - PC1 (VLAN 10) R2 (AR2220) --------- Trunk ----------|-- GE0/0/2 - PC2 (VLAN 20) GE0/0/0 - GE0/0/233.2 VLAN 規(guī)劃VLAN ID名稱(chēng)用途接口10OFFICE辦公區(qū)SW1 GE0/0/120RD研發(fā)區(qū)SW1 GE0/0/23.3 IP 地址規(guī)劃設(shè)備接口IP 地址所屬 VLANPC1-192.168.10.1/24網(wǎng)關(guān) 192.168.10.254VLAN 10PC2-192.168.20.1/24網(wǎng)關(guān) 192.168.20.254VLAN 20R1GE0/0/0.10192.168.10.251/24VLAN 10R1GE0/0/0.20192.168.20.252/24VLAN 20R2GE0/0/0.10192.168.10.252/24VLAN 10R2GE0/0/0.20192.168.20.251/24VLAN 203.4 VRRP 組規(guī)劃VRRP 組虛擬 IP關(guān)聯(lián) VLANMaster 設(shè)備Backup 設(shè)備VRID 1192.168.10.254VLAN 10R1優(yōu)先級(jí) 120R2優(yōu)先級(jí) 100VRID 2192.168.20.254VLAN 20R2優(yōu)先級(jí) 120R1優(yōu)先級(jí) 100可以看到兩臺(tái)路由器各自在一個(gè) VRRP 組中是 Master在另一個(gè) VRRP 組中是 Backup。這就是“負(fù)載分擔(dān)”的核心設(shè)計(jì)讓兩臺(tái)設(shè)備都有流量可轉(zhuǎn)發(fā)同時(shí)又互為備份。4. VRRP 核心原理拆解4.1 VRRP 的角色與狀態(tài)VRRP 組中的設(shè)備有三種角色Master負(fù)責(zé)轉(zhuǎn)發(fā)目的 MAC 為虛擬 MAC 的報(bào)文并周期發(fā)送 VRRP 通告報(bào)文。Backup監(jiān)聽(tīng) Master 的通告報(bào)文當(dāng) Master 失效時(shí)切換為 Master。Initialize設(shè)備剛啟動(dòng)、接口未就緒或配置未完成時(shí)的初始狀態(tài)不參與選舉。協(xié)議狀態(tài)機(jī)從 Initialize 開(kāi)始當(dāng)接口 UP、VRRP 配置生效后進(jìn)入 Backup 或 Master。如果交換機(jī)上某個(gè) VLANIF 接口處于 DOWN 狀態(tài)VRRP 也會(huì)進(jìn)入 Initialize這是排查時(shí)需要注意的細(xì)節(jié)。4.2 優(yōu)先級(jí)與搶占機(jī)制VRRP 組內(nèi)設(shè)備的優(yōu)先級(jí)范圍是 1 到 254默認(rèn)值為 100。優(yōu)先級(jí)最高的設(shè)備會(huì)成為 Master。如果一臺(tái) Backup 設(shè)備的優(yōu)先級(jí)高于當(dāng)前 Master且開(kāi)啟了搶占Preempt Mode那么該 Backup 會(huì)立即成為新的 Master。這樣做的目的是讓網(wǎng)絡(luò)在故障恢復(fù)后能自動(dòng)回到最優(yōu)路徑上。但搶占也可能帶來(lái)問(wèn)題。比如設(shè)備剛重啟、路由協(xié)議還沒(méi)收斂時(shí)如果立即搶占可能造成流量轉(zhuǎn)發(fā)異常。因此生產(chǎn)中通常建議開(kāi)啟搶占并配置“搶占延遲”比如延遲 20 秒再搶占給設(shè)備留出收斂時(shí)間。華為設(shè)備上的相關(guān)命令如下# 開(kāi)啟搶占模式默認(rèn)開(kāi)啟 vrrp vrid 1 preempt-mode enable # 配置搶占延遲 20 秒 vrrp vrid 1 preempt-mode timer delay 20不同版本命令可能稍有差異比如部分低版本使用preempt-mode timer delay或preempt-mode直接開(kāi)啟配置前建議先確認(rèn)當(dāng)前設(shè)備版本。4.3 虛擬 MAC 地址的作用VRRP 組會(huì)生成一個(gè)虛擬 MAC 地址格式為00-00-5E-00-01-{VRID}。對(duì)于 VRID 1虛擬 MAC 為00-00-5E-00-01-01對(duì)于 VRID 11虛擬 MAC 為00-00-5E-00-01-0B。終端發(fā)出 ARP 請(qǐng)求詢(xún)問(wèn)網(wǎng)關(guān) IP 對(duì)應(yīng)的 MAC 時(shí)Master 會(huì)使用虛擬 MAC 回復(fù)。這樣即使 Master 切換虛擬 IP 和虛擬 MAC 關(guān)系不變終端 ARP 緩存也不會(huì)失效因此切換過(guò)程對(duì)終端更友好。在 eNSP 中可以通過(guò)在終端上執(zhí)行arp -a或ping網(wǎng)關(guān)后查看 ARP 緩存觀察網(wǎng)關(guān) MAC 是否為虛擬 MAC。4.4 多 VRRP 組如何實(shí)現(xiàn)負(fù)載分擔(dān)VRRP 協(xié)議本身不會(huì)自動(dòng)做負(fù)載分擔(dān)它是通過(guò)在同一接口上創(chuàng)建多個(gè) VRRP 組來(lái)實(shí)現(xiàn)的。以本文場(chǎng)景為例R1 和 R2 的 GE0/0/0 接口上都開(kāi)啟了子接口在子接口GE0/0/0.10上創(chuàng)建 VRID 1虛擬 IP 為 VLAN 10 的網(wǎng)關(guān)。在子接口GE0/0/0.20上創(chuàng)建 VRID 2虛擬 IP 為 VLAN 20 的網(wǎng)關(guān)。將 VRID 1 的 Master 設(shè)置為 R1VRID 2 的 Master 設(shè)置為 R2。這樣做的結(jié)果是不同 VLAN 的終端通過(guò)各自的 VRRP 組選擇到了不同的活躍網(wǎng)關(guān)。VLAN 10 的流量走 R1VLAN 20 的流量走 R2兩條網(wǎng)關(guān)鏈路都處于工作狀態(tài)實(shí)現(xiàn)“鏈路負(fù)載分擔(dān)”。需要注意的是如果 VLAN 數(shù)量很多也可以創(chuàng)建多個(gè) VRRP 組并交叉分布。比如 VLAN 10、30 走 R1VLAN 20、40 走 R2分配原則以流量模型和鏈路帶寬為依據(jù)。4.5 雙主問(wèn)題VRRP 最典型的故障是“雙主”也就是同一個(gè) VRRP 組里同時(shí)出現(xiàn)兩個(gè) Master。此時(shí)網(wǎng)絡(luò)會(huì)震蕩終端網(wǎng)關(guān)時(shí)而可達(dá)、時(shí)不可達(dá)。產(chǎn)生雙主的原因通常是Master 和 Backup 之間的 VRRP 通告報(bào)文無(wú)法到達(dá)。比如交換機(jī) Trunk 沒(méi)有放通對(duì)應(yīng) VLAN。子接口沒(méi)有配置arp broadcast enable。兩臺(tái)路由器之間的二層鏈路中斷。防火墻或 ACL 過(guò)濾了 VRRP 組播報(bào)文。排查雙主時(shí)重點(diǎn)確認(rèn)兩臺(tái)設(shè)備之間是否能正常通信以及 VRRP 通告報(bào)文是否被丟棄。后面的常見(jiàn)問(wèn)題章節(jié)會(huì)詳細(xì)介紹排查方法。5. 完整配置實(shí)戰(zhàn)5.1 交換機(jī) SW1 配置交換機(jī)部分主要負(fù)責(zé) VLAN 劃分和 Trunk 放通。先把 VLAN 創(chuàng)建出來(lái)再把下行接口劃入對(duì)應(yīng) VLAN最后把連接兩臺(tái)路由器的接口配置為 Trunk 并放通 VLAN 10 和 20。system-view sysname SW1 # 創(chuàng)建 VLAN vlan batch 10 20 # 連接 PC1 的接口劃入 VLAN 10 interface GigabitEthernet0/0/1 port link-type access port default vlan 10 quit # 連接 PC2 的接口劃入 VLAN 20 interface GigabitEthernet0/0/2 port link-type access port default vlan 20 quit # 連接 R2 的 Trunk 口 interface GigabitEthernet0/0/23 port link-type trunk port trunk allow-pass vlan 10 20 quit # 連接 R1 的 Trunk 口 interface GigabitEthernet0/0/24 port link-type trunk port trunk allow-pass vlan 10 20 quitport trunk allow-pass vlan 10 20意思是該 Trunk 口只放行 VLAN 10 和 VLAN 20 的報(bào)文。默認(rèn)交換機(jī) Trunk 口只放行 VLAN 1如果沒(méi)有放行對(duì)應(yīng) VLANVRRP 報(bào)文和終端業(yè)務(wù)報(bào)文都會(huì)丟失。5.2 路由器 R1 配置R1 的配置重點(diǎn)有兩個(gè)在物理接口上創(chuàng)建子接口終結(jié)對(duì)應(yīng)的 VLAN Tag。在子接口上創(chuàng)建 VRRP 組并配置虛擬 IP。首先創(chuàng)建 VLAN 10 對(duì)應(yīng)的子接口system-view sysname R1 # 進(jìn)入物理接口 GE0/0/0它是連接 SW1 的接口 interface GigabitEthernet0/0/0 quit # 子接口 .10 用于終結(jié) VLAN 10 interface GigabitEthernet0/0/0.10 dot1q termination vid 10 ip address 192.168.10.251 255.255.255.0 arp broadcast enable # VRRP 組 1虛擬 IP 等于 VLAN10 的網(wǎng)關(guān) vrrp vrid 1 virtual-ip 192.168.10.254 # 設(shè)置高優(yōu)先級(jí)讓 R1 成為 Master vrrp vrid 1 priority 120 # 開(kāi)啟搶占延遲防止頻繁切換 vrrp vrid 1 preempt-mode timer delay 20 quit接著創(chuàng)建 VLAN 20 對(duì)應(yīng)的子接口R1 在這個(gè) VRRP 組里做 Backupinterface GigabitEthernet0/0/0.20 dot1q termination vid 20 ip address 192.168.20.252 255.255.255.0 arp broadcast enable # VRRP 組 2虛擬 IP 等于 VLAN20 的網(wǎng)關(guān) vrrp vrid 2 virtual-ip 192.168.20.254 # 不配置 priority保持默認(rèn) 100讓 R2 成為 Master # 如果需要顯式指定也可以配置 priority 100 vrrp vrid 2 preempt-mode timer delay 20 quit這里需要解釋一個(gè)細(xì)節(jié)為什么不把a(bǔ)rp broadcast enable放在物理接口上在華為路由器子接口上默認(rèn)不處理廣播報(bào)文。VRRP 通告報(bào)文是一種組播報(bào)文子接口終結(jié) VLAN 后必須允許廣播/組播處理否則 VRRP 鄰居關(guān)系無(wú)法建立。arp broadcast enable的作用就是為了讓子接口能夠處理收到的 ARP 廣播和 VRRP 組播報(bào)文。這一步在 eNSP 中尤其容易遺漏。5.3 路由器 R2 配置R2 的配置邏輯與 R1 完全對(duì)稱(chēng)只是優(yōu)先級(jí)分配相反VRID 1 保持默認(rèn)優(yōu)先級(jí)做 BackupVRID 2 配置高優(yōu)先級(jí)做 Master。system-view sysname R2 interface GigabitEthernet0/0/0 quit # 子接口 .10VLAN 10R2 在 VRID 1 中做 Backup interface GigabitEthernet0/0/0.10 dot1q termination vid 10 ip address 192.168.10.252 255.255.255.0 arp broadcast enable vrrp vrid 1 virtual-ip 192.168.10.254 vrrp vrid 1 preempt-mode timer delay 20 quit # 子接口 .20VLAN 20R2 在 VRID 2 中做 Master interface GigabitEthernet0/0/0.20 dot1q termination vid 20 ip address 192.168.20.251 255.255.255.0 arp broadcast enable vrrp vrid 2 virtual-ip 192.168.20.254 vrrp vrid 2 priority 120 vrrp vrid 2 preempt-mode timer delay 20 quit5.4 終端 PC 配置在 eNSP 中直接為 PC1、PC2 配置 IP 地址、掩碼和網(wǎng)關(guān)即可不需要其他協(xié)議配置。PC1IP 地址192.168.10.1子網(wǎng)掩碼255.255.255.0默認(rèn)網(wǎng)關(guān)192.168.10.254PC2IP 地址192.168.20.1子網(wǎng)掩碼255.255.255.0默認(rèn)網(wǎng)關(guān)192.168.20.2545.5 配置要點(diǎn)回顧總結(jié)一下整個(gè)配置過(guò)程的關(guān)鍵點(diǎn)有四個(gè)第一交換機(jī) Trunk 必須放通所有涉及 VLAN。如果漏掉 VLAN 20VRID 2 的 VRRP 報(bào)文就無(wú)法在 R1 和 R2 之間傳遞兩個(gè) VRRP 組都會(huì)異常。第二路由器子接口必須配置dot1q termination vid否則無(wú)法識(shí)別帶 VLAN Tag 的報(bào)文。第三子接口必須配置arp broadcast enable否則 VRRP 組播報(bào)文和終端 ARP 請(qǐng)求無(wú)法被處理。第四VRRP 虛擬 IP 必須與終端默認(rèn)網(wǎng)關(guān)一致否則終端雖然能學(xué)到網(wǎng)關(guān) MAC但數(shù)據(jù)包目的 IP 仍指向錯(cuò)誤的網(wǎng)段。6. 配置驗(yàn)證與故障切換測(cè)試6.1 查看 VRRP 狀態(tài)配置完成后在 R1 上執(zhí)行display vrrp可以看到 VRID 1 為 MasterVRID 2 為 Backup虛擬 IP 與規(guī)劃一致。display vrrp示例輸出GigabitEthernet0/0/0.10 | Virtual Router 1 State : Master Virtual IP : 192.168.10.254 Master IP : 192.168.10.251 Priority : 120 Preempt : YES Delay Time : 20s ...在 R2 上執(zhí)行display vrrp則應(yīng)該是 VRID 2 為 Master、VRID 1 為 Backup。如果兩邊顯示狀態(tài)不符合預(yù)期優(yōu)先檢查物理鏈路、Trunk 配置和子接口 ARP 配置。也可以使用display vrrp brief快速查看所有 VRRP 組的摘要信息display vrrp brief輸出里會(huì)列出接口、VRID、狀態(tài)、虛擬 IP 和主用 IP適合快速判斷是否出現(xiàn)雙主或狀態(tài)卡住的問(wèn)題。6.2 驗(yàn)證終端與網(wǎng)關(guān)的連通性在 PC1 上執(zhí)行 ping 命令驗(yàn)證 VLAN 10 終端能否訪問(wèn)虛擬網(wǎng)關(guān)ping 192.168.10.254在 PC2 上執(zhí)行ping 192.168.20.254如果能 ping 通說(shuō)明對(duì)應(yīng) VLAN 的 VRRP 組工作正常。如果不能 ping 通按順序檢查SW1 是否正確創(chuàng)建 VLAN 并劃分接口。兩臺(tái)路由器的子接口 IP 是否配置正確。子接口上是否配置了arp broadcast enable。Trunk 口是否放通了對(duì)應(yīng) VLAN。6.3 模擬 R1 故障接下來(lái)驗(yàn)證冗余切換能力。在 R1 上關(guān)閉連接 SW1 的物理接口system-view interface GigabitEthernet0/0/0 shutdown quit此時(shí) VRID 1 的 Master 變?yōu)?R2VLAN 10 的虛擬網(wǎng)關(guān)也由 R2 接管。在 PC1 上再次 ping 192.168.10.254正常情況下仍然可以 ping 通只是中間可能因?yàn)?R2 的 VRRP Master 切換觸發(fā)一次短暫的 ARP 刷新存在極少數(shù)丟包。驗(yàn)證完成后恢復(fù) R1 接口system-view interface GigabitEthernet0/0/0 undo shutdown quit由于 R1 在 VRID 1 中優(yōu)先級(jí)為 120且開(kāi)啟了搶占延遲等延遲時(shí)間結(jié)束后會(huì)重新成為 Master網(wǎng)絡(luò)自動(dòng)回到原有負(fù)載分擔(dān)狀態(tài)。6.4 模擬 R2 故障同樣可以在 R2 上關(guān)閉連接 SW1 的接口驗(yàn)證 R1 是否接管 VRID 2。關(guān)閉后R1 會(huì)同時(shí)成為 VRID 1 和 VRID 2 的 Master。在網(wǎng)絡(luò)規(guī)模不大時(shí)這種“單機(jī)兜底”完全可以滿(mǎn)足可靠性要求如果業(yè)務(wù)量很大這種狀態(tài)下可能出現(xiàn)帶寬瓶頸需要在設(shè)計(jì)階段就意識(shí)到這一點(diǎn)。6.5 負(fù)載分擔(dān)效果分析正常狀態(tài)下通過(guò)流量查看功能可以觀察到VLAN 10 終端訪問(wèn)外部網(wǎng)絡(luò)的報(bào)文會(huì)經(jīng)過(guò) R1。VLAN 20 終端訪問(wèn)外部網(wǎng)絡(luò)的報(bào)文會(huì)經(jīng)過(guò) R2。兩臺(tái)設(shè)備同時(shí)工作鏈路不再閑置。從協(xié)議角度看VRRP 組 1 和組 2 互不影響任何一組的主備切換都不會(huì)影響另一組的轉(zhuǎn)發(fā)。這也是多 VRRP 組負(fù)載分擔(dān)方案的最大優(yōu)勢(shì)。7. 常見(jiàn)問(wèn)題與排查思路VRRP 配置不難但在實(shí)際實(shí)驗(yàn)和生產(chǎn)環(huán)境中經(jīng)常遇到的問(wèn)題往往集中在幾個(gè)共性點(diǎn)上。問(wèn)題現(xiàn)象常見(jiàn)原因解決思路同一個(gè) VRRP 組出現(xiàn)兩個(gè) MasterVRRP 通告報(bào)文無(wú)法互通或中間設(shè)備過(guò)濾組播檢查 Trunk 放通、子接口 ARP 配置、中間安全策略VRRP 狀態(tài)一直為 Initialize物理接口或子接口 DOWN或配置未下發(fā)完整檢查接口狀態(tài)、子接口 VID 配置可以 ping 通虛擬 IP但 PC 無(wú)法上網(wǎng)缺少默認(rèn)路由或上網(wǎng)鏈路未配置檢查路由器上行路由和 NAT 配置子接口無(wú)法 ping 通對(duì)端缺少 arp broadcast enable在子接口下補(bǔ)充配置arp broadcast enable主備切換非常頻繁搶占延遲未配置或鏈路抖動(dòng)配置preempt-mode timer delay建議 20-60 秒終端 ARP 表里的網(wǎng)關(guān) MAC 不正確虛擬 MAC 學(xué)習(xí)錯(cuò)誤或中間交換機(jī) MAC 表異常檢查交換機(jī) MAC 表查看是否存在漂移配置后 VLAN 間無(wú)法通信交換機(jī)未創(chuàng)建 VLAN 或 Trunk 未放通在交換機(jī)上查看display vlan和display int trunk7.1 出現(xiàn)雙主怎么排查雙主是 VRRP 故障中最嚴(yán)重的現(xiàn)象。一旦出現(xiàn)兩個(gè) Master 都會(huì)回復(fù)終端的 ARP 請(qǐng)求終端 ARP 表會(huì)在兩個(gè) MAC 之間抖動(dòng)導(dǎo)致網(wǎng)絡(luò)時(shí)通時(shí)斷。排查步驟在 R1 和 R2 上分別執(zhí)行display vrrp確認(rèn)雙主現(xiàn)象。從 R1 ping R2 的物理接口直連 IP驗(yàn)證基礎(chǔ)二層連通性。查看 SW1 的 Trunk 配置確認(rèn) VLAN 10、20 已放通。檢查子接口下是否配置了arp broadcast enable。如果仍然無(wú)法解決使用display vrrp interface GigabitEthernet0/0/0.10查看 VRRP 收到的通告報(bào)文計(jì)數(shù)確認(rèn)報(bào)文是否到達(dá)。7.2 VRRP 狀態(tài)一直是 InitializeInitialize 狀態(tài)通常說(shuō)明 VRRP 組所在的接口沒(méi)有處于 UP 狀態(tài)??赡茉蚴俏锢斫涌跊](méi)有連接或線纜故障。子接口配置了dot1q termination vid但物理接口 DOWN。設(shè)備上沒(méi)有創(chuàng)建對(duì)應(yīng)的 VLAN。排查時(shí)先看display interface brief確認(rèn)物理接口狀態(tài)為 UP再檢查子接口是否綁定正確 VID。7.3 搶占導(dǎo)致頻繁切換沒(méi)有配置搶占延遲時(shí)如果物理鏈路出現(xiàn)短時(shí)間抖動(dòng)Backup 會(huì)立刻搶占造成不必要的切換。網(wǎng)絡(luò)規(guī)模越大路由收斂時(shí)間越長(zhǎng)頻繁切換的影響越明顯。解決辦法是在兩個(gè) VRRP 組的 Master 上配置搶占延遲vrrp vrid 1 preempt-mode timer delay 30延遲時(shí)間可以按業(yè)務(wù)容忍度設(shè)置。對(duì)丟包敏感的業(yè)務(wù)建議設(shè)置為 30 秒以上對(duì)切換時(shí)間要求高的場(chǎng)景需要結(jié)合 BFD 或接口監(jiān)視功能綜合設(shè)計(jì)。8. 工程落地最佳實(shí)踐8.1 規(guī)劃優(yōu)先先設(shè)計(jì)后配置多 VLAN 負(fù)載分擔(dān)方案的核心不是命令而是規(guī)劃。正式配置前建議先畫(huà)一張表明確每個(gè) VLAN 對(duì)應(yīng)哪個(gè) VRID、虛擬 IP 是多少、哪臺(tái)設(shè)備是 Master、優(yōu)先級(jí)是多少。否則 VLAN 一多很容易在優(yōu)先級(jí)和 VRID 上寫(xiě)錯(cuò)。規(guī)劃表可以按下面格式維護(hù)VLAN網(wǎng)段VRID虛擬網(wǎng)關(guān) IPR1 角色R2 角色10192.168.10.0/241192.168.10.254MasterBackup20192.168.20.0/242192.168.20.254BackupMaster8.2 合理設(shè)置優(yōu)先級(jí)與搶占優(yōu)先級(jí)建議根據(jù)設(shè)備性能和鏈路帶寬來(lái)分配。默認(rèn) 100 表示平等配置 120 或更高表示更優(yōu)。不要讓兩臺(tái)設(shè)備優(yōu)先級(jí)完全一致否則 VRRP 的 Master 選舉可能會(huì)不穩(wěn)定。生產(chǎn)環(huán)境建議開(kāi)啟搶占但必須配置搶占延遲。不要為了“切換快”關(guān)閉搶占這樣故障恢復(fù)后流量可能長(zhǎng)期停留在備用設(shè)備上無(wú)法回到最優(yōu)路徑。8.3 注意二層網(wǎng)絡(luò)邊界VRRP 要求 Master 和 Backup 之間二層互通。如果兩臺(tái)路由器中間跨越了三層設(shè)備或交換機(jī) Trunk 過(guò)濾了 VRRP 組播就會(huì)出現(xiàn)雙主或狀態(tài)異常。在接入交換機(jī)上Trunk 口要明確放通涉及 VRRP 的 VLANinterface GigabitEthernet0/0/24 port link-type trunk port trunk allow-pass vlan 10 20不建議使用port trunk allow-pass vlan all這種方式雖然配置簡(jiǎn)單但會(huì)讓 VLAN 廣播域無(wú)謂擴(kuò)大增加廣播風(fēng)暴風(fēng)險(xiǎn)。8.4 子接口場(chǎng)景不要漏掉 arp broadcast enable在 eNSP 和真實(shí)路由器子接口場(chǎng)景中arp broadcast enable很容易被忽略。少了這條命令VRRP 報(bào)文和終端 ARP 請(qǐng)求無(wú)法被子接口正確處理VRRP 組會(huì)停留在 Initialize 或無(wú)法選舉出 Master。如果是三層交換機(jī)使用 VLANIF 接口不需要配置這條命令這也是生產(chǎn)環(huán)境更常見(jiàn)的方式。但很多實(shí)驗(yàn)和中小網(wǎng)絡(luò)仍使用路由器子接口配置時(shí)要注意區(qū)分。8.5 安全與維護(hù)VRRP 組的數(shù)量不宜太多。每個(gè) VRRP 組都會(huì)占用設(shè)備資源并產(chǎn)生通告報(bào)文。VLAN 很多時(shí)可以按業(yè)務(wù)網(wǎng)段合并不必每個(gè) VLAN 都創(chuàng)建一個(gè)獨(dú)立組。如果需要提高安全性可以在支持 VRRP 認(rèn)證的設(shè)備上配置認(rèn)證模式防止非法設(shè)備偽造 VRRP 報(bào)文干擾選舉。不過(guò) eNSP 對(duì)認(rèn)證命令支持有限生產(chǎn)環(huán)境應(yīng)查閱設(shè)備手冊(cè)后按需配置。8.6 持續(xù)監(jiān)控配置完成后建議在網(wǎng)管平臺(tái)監(jiān)控以下內(nèi)容每臺(tái)路由器的 VRRP 狀態(tài)是否長(zhǎng)期保持預(yù)期角色。VRRP 主備切換次數(shù)是否異常頻繁。Master 設(shè)備接口流量是否超過(guò)閾值。是否有 VRRP 狀態(tài)抖動(dòng)告警。如果出現(xiàn)切換次數(shù)過(guò)多優(yōu)先檢查鏈路穩(wěn)定性和搶占延遲配置而不是盲目調(diào)整優(yōu)先級(jí)。9. 總結(jié)與后續(xù)學(xué)習(xí)方向通過(guò)本文的配置實(shí)驗(yàn)?zāi)銘?yīng)該已經(jīng)掌握了利用多個(gè) VRRP 組實(shí)現(xiàn)多 VLAN 網(wǎng)關(guān)負(fù)載分擔(dān)的核心方法。整個(gè)方案的本質(zhì)并不復(fù)雜在同一個(gè)接口上為不同 VLAN 創(chuàng)建不同的 VRRP 組然后通過(guò)調(diào)整優(yōu)先級(jí)讓不同組的主設(shè)備錯(cuò)開(kāi)實(shí)現(xiàn)兩臺(tái)路由器的雙活轉(zhuǎn)發(fā)。下一步可以繼續(xù)學(xué)習(xí)的內(nèi)容包括在 eNSP 中使用三層交換機(jī) VLANIF 接口替代路由器子接口配置 VRRP 負(fù)載分擔(dān)。結(jié)合 VRRP 與 BFD 實(shí)現(xiàn)快速故障檢測(cè)縮短切換時(shí)間。研究 VRRP 與 MSTP多生成樹(shù)協(xié)議的配合避免二層環(huán)路和冗余路徑浪費(fèi)。將 VRRP 與 DHCP、DHCP Relay 配合實(shí)現(xiàn)終端地址自動(dòng)獲取場(chǎng)景下的網(wǎng)關(guān)冗余。配置再多最終還是要回到“為業(yè)務(wù)服務(wù)”這一點(diǎn)上。設(shè)計(jì)網(wǎng)絡(luò)時(shí)先想清楚哪些流量該走哪條路徑故障時(shí)誰(shuí)能接管切換時(shí)間是否滿(mǎn)足業(yè)務(wù)要求再動(dòng)手敲命令這樣的配置才會(huì)有意義。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久久久亚洲AV无码专区少妇| 91女人的网站| 国产精品免费久久久久久久久久| 日韩性爱电影一区| 很很很很操| 色情婷婷久久五月天| 中文字幕天堂在线| 欧美另类色图片| 五月天AV资源| 日本色色色视频| 久久久熟妇熟女国产| 久久久久久久九九九九| 精彩视频日韩| 精品一级毛片在线观看| 日韩AC| 日韩超碰精品综合| 日日操免费视频| 色性综合| av网站免费线看| 试看60秒 爽| 熟女精品va中文字幕| 欧美性爱一区二区三区四区| 欧美日韩插逼视频| 997色在线| h无码动漫在线观看| 亚洲色图国产另类| 国内精品伊人久久久久影院会| 黄色十八禁网站| 无遮挡又黄又刺激的视频| 亚洲色偷偷色噜噜狠狠99网| 精品人妻av区天天看片| 亚洲天天影视综合网| 久久黄片国产一区二区| 国产热av| 蜜桃无码AV一区二区| 91国产丝袜美女| 操91| 天天精品| 丝袜AV一区二区三区| 国产精品大香蕉| 亚洲欧美综合图片| 使劲用力艹少妇视频一区二区| 性色AV蜜色av色欲av| 亚洲男人的天堂V| 影音先锋少妇| 91四海无码日韩欧美| 欧美刺激色黄片免费看| 亚洲情色 欧美| 91在线免费观看处女| a男人的天堂久久一级A毛片| 久久精品国产久精国产| 久热色情精品| 玖玖资源综合在线视频| 97九色| 亚洲无码国产精品久久| 亚洲一区二区 麻豆传媒| 国产一区二区在线播放量| 天天综合网~91综合网| 亚洲一本色道中文无码aV天美| 热热色综合网| 亚洲吊色| 久青草影院| 麻豆久久一区二区三区| 精品人妻二区三区| 性爱综合一区二区| 男女性扦B| 中文激情网| 在线视频 亚洲精品| 亚州欧美综合| av亚洲天堂资源网站| 国产92麻豆天美精品色欲5| 国产区在线| 伊人网青青| 麻豆精品三区视频| 久久熟妇五十路一区| 99久久精品无码一区二区| 精品国产乱码久久久A| 精品国产91久久久久久一区黄无| 欧美劲爆视频一区二区| 国产精品成人久久一区二区三区| 视频二区美腿制服人妻欧美| 青青草字幕AV| 久久最新免费视频23| 萌白酱自拍视频| 日本媚薬中文字幕在线| 哑洲在线| 精品国产久久乱码| 一区操逼| 啊啊啊啊网站| 91制服丝袜中文字幕| 天天天天做夜夜夜夜做| 97视频网站在线观看| 少妇熟女1区2区3区| 97久久超碰日韩精品| 亚洲男人天堂2016| 久久久久久久 九九九九九九九 | 伊人一区二区三区| 婷婷三区| 国产丝袜视频| 亚洲精品三| 国产无码高清操逼视频| 91社区伊人| 国产 码在线成人网站| 激情无码日韩| 免费在线黄片视频| 日本午夜操逼| 岛国黄色短视频| 国产超碰AV在线精品| 熟妇人妻精品一区二区| 久久亚洲一区女同性恋中文字幕| 精品乱码在线观看| 97在线无精品| 日本人妻天堂网站在线播放| 九九九久久久久| 亚洲AV资源| 久久一二三级一一一| 日韩久久三区| 亚洲欧洲小说图片视频 | 亚洲AV永久无码一区仙野| 三级精品三级在线观看| 欧美性爱无码一区二区三区| 亚洲一卡2卡3卡4卡乱码网站| 黄片www视频免费| 久久国产精品m码| 欧美96在线|欧| 97欧美色| 91 天天综合| 91制服丝袜| 天天操天天日天天干| 一区二区三区成人| 少妇丝袜在线观看AV| 亚熟hd视频在线| 亚洲啪AⅤ永久无码| 免费AV中文网在线观看| 九九视频黄色片| 淫荡熟女乱伦网| 无码人妻一区二区三区色欲aⅴ| 国产高清自拍视频| 偷拍三区| 久久超碰爱| 福利偷拍视频-中文字幕2019国语完整视频大全-S91AV | 91综合网| 麻花豆传媒剧国产MV出差| 欧美日本中字另类在线| 日本久久久久久久久久| 欧美日韩国产人人| 91欧美情色| 人人妻人人爱人人玩| 日本操逼视频免费| 精品九九国产无码| 怡红院一区二区熟女人妻| 99久久网站| 日韩情色视频| 伊人在线大香蕉视频久久| 青青草在线视频播放器| 国产无码精品高清| 久久婷婷五月天| 久久精品免费| 97爱啪| 97视频免费播放| 手机午夜电影神马久久| 天天综合网~91| 亚洲欧美黄| 岛国1区2区3区在线观看| 日本三级一区二区 在线| 曰韩无码777| 亚洲欧美一区二区三区在钱蜜桃| 天天天天天天天天综合| 天天欧美| 中文字幕精品一区二区精| 97在线视频观看网站| 国产高清无码一区二区三区四区皇冠| 91日日| 操一对老熟妇爽上天视频| 国产精品成久久久久午夜午夜| 看日韩操逼| 丝袜狠狠草尤物人妻av91| 97精品久久久久中文字幕| 欧洲精品二区| av午夜影院在线播放| 九九九九九九亚洲| 亚洲伊人青青草| 人人手机欧洲亚洲国产人妻| 欧美,亚洲,日韩,v,天堂,手机在线观看| 国产99热| 91精品丝袜在线观看| 亚州春色| 在线亚洲 欧美 日本专区| 九九香蕉网| 欲香欲色天天天综合和网| 大香蕉日韩| 亚洲黄色a级片| 欧美色一二三| 亚洲欧美国产va在线播放频| 青青草视频久久| 狠狠操狠狠燥| 亚洲欧美自拍偷拍| 欧美伦乱爱| w w w.久久精品| 天天综合色| 欧美一区二区三熟女剧情| 国产婷婷综合在线观看| 欧洲色| 人人操人人狠狠操| 亚洲999综合| 日韩偷拍一区二区三区| 欧美大香蕉在线观看| 91免费看中出视频| 丁香五月av| 久久久久国产| 乱伦AVxx| 日韩综合97P| 中文字幕奈奈美被公侵犯| 人妻精品综合中文字幕在线| 久久久一区二区三区四区五区| 国产又色又爽又舒服的三级视频| 五月丁香成人网| 无码一区二区三区四区五区六区七区八区九区十区视频 | 亚洲欧洲无码一区夜| 精品一区二区国产日韩| 精品久久久九九九孕妇| 激情色图| 九久9热| 乱伦熟女论坛| 国产夫妻一区二区| 麻豆综合一区av| 69综合网| 多乙久久久久久| 久久中文字幕女同性恋一区| 台湾一区国产高清在线| 亚欧中文字幕在线视频| 久久精品日韩| 久久久久幕乱码| 久久婷婷色| 大香蕉99999| 六九九九| 日本免费一级AAA大片器 | 97超碰人人模人人拍人人| 久久久工口| 日韩15p| 欧美亚洲玖玖玖| 亚洲一区二区三区春色| 午夜啊啊啊| 色久桃花影院在线观看| 久久精品国产97欧美精品亚洲 | 夜夜福利| 人人摸人人干| 亚洲性爱免费电影| 91老熟女视频| 久久久久久久久国产| 久久久97| 午夜激情成人在线观看| 超碰色美女| 大鸡吧尹人在线| 2019久久久久久久久福利| 偷拍亚洲情色| 老女人日韩美91| 亚洲欧美自拍偷拍| 婷婷丁香激情| 五月天欧美色图| 秋霞视频一区二区 | 大香蕉色欲AV| 青青草自拍视频在线播放| 7777奇米影视久久| 久操视频在线观看| 蜜区区视频79 | A片三级无码| 91麻豆天美| 91欧美丝袜| 人妻少妇视频在线播放| 中日亚韩免费视频| 草久在线| 久欲AV| 91九九九馒头| av婷婷色婷婷色六月| 无码高清少妇久久| 国产精品人妻无码久久久互動交流 | 亚洲综合首页| 欧美日韩人妻精品一区二区三区 | 亚洲欧美在线观看免费| 国产在线综合网| 亚洲情色 无码专区| 亚熟在线| 91美女视屏| 国产极品一区二区三区三州| 欧美色图第一页| 日本加勒比无码专区一二三| 搞中出视频在线观看| 5278欧美一区二区三区| 91在线精品一区二区三区| 日韩成人小视频| 夜夜骑操视频| 久草婷婷| 中文字幕片| 日本人体九九九九九九| 91色婷婷综合久久中文字幕二区| 超碰人妻天天干| 伊人国产成人av网站| 色九九九九九九| 伊人991| 亚洲一二三精品久久网 | 综合大香蕉美。| 欧天美中出| 国产精品乱码久久久久久久久久久久| 日韩99999色| 日韩AV电影网站| 久久久久久亚洲精品不卡人乳| ..日韩av毛片精品久久久| 人妻丝袜日本| 骚鸭AV| 超碰97日韩| 久久久久久十| 2017天天插| 97人人夜| 欧州91高潮| 91 欧美| 国产女大学生AV| 免费a v| 久久久久九九九| 久久的免费性爱视频| 美女被啪到深处抽搐视频| 超碰在线一区二区| 久操精品| 美女天天干| 午夜视频久久久久一区| av日韩国产一区二区| 国产精品一级特黄aaa大片在线观看 | 97超视频在线观看| 997色在线| 就去色综合| suv精产一二三区| 欧美翘臀视频网站一区二区三区| 欧美人与动性人交a| 亚洲影院365| 91久久九九精品国产综合| 午夜福利av电影在线| 啪啪资源网| 欧美中出1| 欧美精品另类人妖xxxx| 色婷婷成人| 天堂九九九九九九九九九| 红桃视频高潮| 男人成人黄色视频在线观看免费下载| 久久久久久久9| 国产欧美日本亚洲精品| 最近2019中文字幕国语免费版| 久久直播国产| 天天操天天插| 久久久专区| 另类小说欧美激情校园春色| 日韩视频精品在线观看| 日韩精品中文字幕二区| 成人AV素股で擦久久| 欧美精品双插| 999综合网| 午夜无遮挡男女啪啪视频| 欧美一级做a爰片免费视频| 久久精品亚洲婷婷| 亚洲交换| AV一区观看| 色玖玖| 搞中出视频在线观看| 97天天在线| 久久久久久久久久9| 国产www色在线观看| 美女露胸露屁股| 99久在线精品99re8a| 亚洲在钱| 双插性欧美一二三区| 久草婷婷| 欧洲亚洲人妻无码久久三区四区| AV污污污污| 天天综合精品| 伊香蕉综合久久久久久久噜噜噜| 国产精品免费日韩| 亚洲熟妇无码一区二区三区| 另类图片五月天| 成人av在线播放| av中文字幕在线熟女| 四虎免费视频| 大香蕉黄色一级片免费看| 女人爽到高潮久久久| 久久精品高清无码一区| 亚洲一级性爱视频免费看| 国产精品一区二区在钱播放| 熟妇人妻精品一区二区| 最新国产亚洲精品精品国产亚洲综合| 高潮嗯啊性感美女久久久| 国产深喉视频一区二区| 无码99| 久久久久九九九九九| 97精品熟女少妇一区| 东京热一区二区三区四区五区六区| 试看福利| 日韩无码操逼片| 91人人爽人人爽| 色香蕉影院| 一区二区三区色综合| 韩日色费| 色超碰综合| 伊人操你| 中文字幕久久精视频久久大全| 天天影视网综合少妇| 亚洲图片欧美另类综合免费视频大大香| 天天色黄色影院天天操| 日韩资源网| 久久久久亚洲av综合波多野制衣| 蜜臀久久99精品| 亚洲好看强奸乱伦| 死我十八禁| 亚洲国产一级精品毛一级精品看免费视频| 91久久国产综合精品| 久操com| 久操影视| 探花激情视频| 九久9精品| 98一区二区精品| 久久久精品网站| www老逼91| 欧美的性爱网站免费| 四虎视频在线观看| 亚洲五码一区二区三区| 天堂亚洲精品| 色999五月色| 亚洲男人天堂手机版| 丝袜美腿诱惑亚洲欧美视频在线观看 | 亚洲精品白浆高清久久久久久 | 蜜臀AV秘一区翔田千里| 蜜屁Av| 欧美性爱在线无码| 久久久日本电影| 啊啊啊好爽快点啊啊啊嗯嗯| 青娱乐淫乱1314| 国产五码丝袜屁眼| 太久视频| 97碰碰色| 亚洲91网。| 乱伦AVxx| 欧美人妻少妇| 亚洲精品蜜桃久久久一区二区三区| 综合亚洲欧美精品日韩?v| 高潮综合网| 一区二区三区精品久久| 99999亚洲另类| 久九干| 黑人精品XXX一区一二区| 色综和网| 日韩草久视频| 自拍偷拍 高清无码| 97超碰欧美精品| 国产女同性恋视频| 五月激情在线| 国产欧美精选自拍一区| 精品78| 激情婷婷丁香| 日本少妇va7777| 久久久久久AV无码免费网站| 欧亚无码视频| 怡红院成人视频| 成人久久精品| 日韩免费人妻色情网站| 伊人激情五月天一区二区| 超碰97精品| 男女香蕉一区二区| 欧美日日网| 日韩性爱电影一区| 国产人妖的免费的视频| 啊啊啊啊啊啊啊啊视频| 99精品丰满人妻无码| 91色爽欧美| 97中文综合| 在线视频一区二区传媒| 日韩AV片| 综合一区中亚洲国产成人综合精品 | 粉嫩不卡一区二区性爱| 欧美大波激情xxxx| 色欧洲| 人妻激情视频| 嗯~啊~轻一点 视频| 色综合久久夜色精品国产天堂| 五月久久HDAV| 色妹子A V| 99热久| 亚洲精品成人激情在线| 国产精品制服丝袜清纯唯美| 粉嫩av久久一区二区三区| 亚洲人妻在线精品| 91爱| 亚洲在线a| 操熟女91| 日韩情色一区二区| 在线 欧美 亚洲| 亚洲日韩东京热一区| 国产又大又粗又长视频在线| 爱欲AV| 偷窥自拍亚洲色图| 97视频观看| 欧美日韩m| 大奶啊啊好爽 | 青青青草原| 免费成人在线熟妇网| 成人A片男人的天堂| 嗯嗯嗯不要不要免费视频| 日本久操视频| 欧美一级欧美三级在线观看| 久久超碰97中文字幕| 玖玖爱综合| 久久水蜜臀亚洲AV无码精品| 怡春苑东京热| 亚洲性图91| 久久久久久裸体| 久热精品在线| 超碰97COm中文| 噜噜噜亚洲精| 91精品91久久久久77777俄罗斯老妇姓x| 亚洲图片91| 亚欧成人一级片在线播放| 69一区二区三区| 夜草网站| 免费αⅴ在线观看| 麻豆国产免费影片| 久久精品国产精品亚洲艾通辽熟妇 | 久久9精品网站| 欧美在线干| 精品日日人妻| 欧美精品久久96人妻无码| 亚瑟国产精品久久无码| 久久精品亚洲成a人天堂| 色五月首页| 97人人干| 天天天乱色综合全| 公司1区2区3区精产精| 天堂亚洲欧美| 色屁屁影院www国产| 国产操偷| 国产日本熟女顶级一区二区三区视频 | 夜夜高潮夜夜爽夜夜爱爱一区| 色图综合| 欧美aaaaaaa| 欧美婷婷| 国产中文福利| 伊人九九| 日韩欧美国产一区二区三区四区| 91综合在线| 极品五月天噜噜| av东京热男人的天堂| 易易A毛视频| 国内毛片国产欧美拍| 成人日韩3| 欧美精品999| 国产乱弄免费在线视频。| 欧美色图片欧美色图| 农村女一级毛卡片| 性爱av在线免费观看| 黄片在线免费在线观看| 婷婷三区| 亚欧洲日韩国产精品| 久久欲| 久热无码| 97天天插| av天堂精品久久| 美女超碰978| 人妻喷水| 亚洲中文国际强奸字幕| 色综合加勒比四四季| 校园春色 亚洲| 操逼片国产| 99re6久热只有精品6在线直播| 久9久9久9久9久9久9| 天天操人人操狠狠插| 国产成人亚洲精品自产在线| 中文一区在线日| 综合色欧美| 911粉嫩人妻| 91日产欧美| 国产亚洲日韩欧| 97AV爱| 久久丝袜| www.色五月| 国内成人圈中文字幕无码视频| 两女互慰AV高潮喷水在线观看| 亚洲日本韩国极品一区二区| 欧美一级专区免费大片| 超碰无码加勒比| 超碰97男人| 另类图片综合| 亚洲AV无码天美传媒一区| 凹凸 69堂 在线播放| 天天草天天干天天日| 二三四区精品| 无码137片内射在线影院| 艳美熟妇先锋一二三区| 少好三P| 操逼逼福利视频| 人妻内射一区二区在线视频| 国产自产自拍| 色眯眯av| 少妇干B| 东京热不卡视频| 久久国产免费激情视频| 天天色怡春院| 天天日B夜夜干B时时操B| 97超色| 欧美做爰无码A片视频| 亚洲欧美啪啪| 人人人人插| 中文一区二区| **一级毛片国产| 久久99久久99精品天美传媒棢·纸:. | 精产国品一区二三产品| 午夜福利激情在线视频| 啊啊好多水| 日韩无码三级影院| 亚洲亚洲亚洲天堂天堂| 欧美日韩91| …亚洲黄色厕厕女女在线播…| 99少妇精品视频| 亚洲AV无码秘 蜜桃臀国精产品| 色九九九| 亚洲无码超碰免费| 啊啊啊啊在线播放| 99热成人| 成年无码动漫av片无尽在线 | 久久伊人在线五区| 性色AV蜜色av色欲av| 国产精品高潮久久AV| 无码人妻丰满热妇又大又粗| 欧美情色亚洲| 人妻出轨一区二区三区| 欧洲亚洲国产综合在线| 欧美人妻一区二区| 混色激情av| 国产女同视频在线播放| 超碰在线日韩一区| 中文字幕在线观看第二页| 黄色电影观看久久9| 欧美男人的天堂| 天堂精品在线| 国产宅男宅女在线观看| 综合色久欲| 99无码精品| 人妻丰满熟妇一区二区三| 亚春色色| 欧美日韩国产电影| 日日干夜夜干| 久操凹凸视频| 男人亚洲天堂| 无码九九九九| 婷婷五月天久久精品视频一区二区三区| 亚洲av无码国产精品字幕| 丰满熟女人妻一区二区三五十一路| 大香蕉97久久| 成人性爱全视频观看| 国产一级高清免费观看| 久久影视二区三区行押| 偷拍 亚洲| 天天干天天狼在线视频| 久久久久久久久久久免费精品| 久久九操在线观看| 久久久久久性爱视频| 久久久精品国产亚洲AV无码| 免费一级黄色录像影片| 欧美色欧美| 97欧美精品综合| 精品国产久热在线观看| 日韩人妻有码免费视频| 97欧美| 啊啊啊慢点| av久日| 久久中文色图| 五月婷在线| 人人摸.人人色| 激情综合网亚洲| 欧美色91| 亚欧美综合| 亚拍在线| 一区二区国产视频在线观看| 久久久久成人蜜桃精品| 国产亚洲色婷婷久久99精品91| 超碰97人妻免费在线| 99最新日韩偷拍视频| 先锋音影AV| 伊人久久国产免费观看视频| 黄网在线播放| 国产农村一一级特黄毛片| 国产www色在线观看| 中文字幕一区二区三区字幕| 立川理惠被中出无码| 91无码人妻精品一区二区三区蜜桃| 色欧洲97| 偷拍2020| 夜夜免费视频| 日本天堂在线播放| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 亚洲欧洲成人在线电影| 中文字幕伊人| 欧美九九99久久精品| 老鸭窝亚洲毛片| 婬女免费一二三区A片| 亚洲欧美在线观看2021| 福利社区午夜一区二区| 日韩在线性爱免费视频| 精品视频一区二区| 国产精品成人AV片免费看网站| 日韩BBN| 东北老熟女| 91网站在线播放| 亚洲久久天堂| 99热超碰在线| 久久9视频| 人人爱操| 日本午夜久久电影| 九九久久精品| 欧美色偷拍| 欧洲免费一区二| 夜夜嗷嗷一区二区| 中国的操老妇女| 亚洲色图欧美色图综合| 亚洲无码日韩电影| 农村女一级毛卡片| 人人贴人人摸| 性爱乱伦网址| 人妻久久久久久| 99色| 97久久精品国产| 欧美|91色综合| 熟女色图在线| 天天摸夜夜操视频| 99热日| 欧美姓爱综合网| 欧洲性爱无码区| 免费看国产曰批40分钟怎么下载| 黑人精品成人一区二区三区| 小少妇| 亚洲精品欧洲精品| 在线小视频| 五十路三区在线| 免费一级黄色录像影片| 国产亚洲综合欧美一区| 国产人伦精品一区二区三区 | 青青久久手机线视频| 日韩国产乱子伦App| 成年人黄色小视频网站| 国产精品一区在线播放| 久久久亚洲| 强奸乱伦免费网站| 毛片电影一区二区三区| 天天碰操中国年青熟妇| 91欧洲入口| 欧美岛国精品在线观看| 中文久久爆乳| AV丝袜少妇| 丝袜 中出 制服 人妻 美腿 中文字幕| 男人天堂电影院| 亚欧Av| 亚洲最大的黄色电影网站。 | 91干熟女| 精品四五区| 亚洲交换| 少妇啪啪自拍| 九九RE视频在线精品| 老鸭窝黄色视频网站| 91网站18| 国产激情片在线观看| 丝袜美腿校园春色| 精品人妻一区二区免费蜜桃视频| 国产综合网站在线播放 | 免费福利视频中文字幕| 国产一级αv免费看片| 韩国女主播青草在线| 精品国产乱码久久久久久蜜臀| 欧美一区二区观看在线| 国产AV天美| 亚洲色图欧美色图另类图片| 国产1024在线播放| 久久久精品视频免费观看| 久久色激情一区二区三区| 欧美激情 亚洲色图| 乱伦av.com| 无码操逼视频一下| 日本三级久| 青青草导航在线视频| 亚洲国产欧美另类自拍| 中文字日本乱码| 俄罗斯及免费在线看| 另类小说五月天| 女人18精品一区二区三区| 国产亚洲日韩欧| 91久久精品蜜臀| 婷婷香网站| 97久久超碰亚洲| 无码在线亚洲| 97久久国产亚洲精品超碰热| 久久东京伊人一本到鬼色| 久插综合| 成人影院永久免费观看网址| 亚州乱码中文字幕综合久久久| 亚洲欧美色图| 一二三啪啪专区| 天天影视色香欲综合网小说| 婷婷99| 天天cao在线| 九九碰九九爱97| 欧洲亚洲人妻无码久久三区四区| 免费人成?大片在线播放| 欧美手机在线综合| 极品色www影院| 蜜臀va69| 婷婷五月天激情小说| 大香交| 国产成人综合网| 亚洲国内精品成人不卡| 日韩免费高清大片在线| 久九干| 午夜福利1区2区3区| 精品一区二区麻豆| 乱论91| 成人日本片久久久蜜桃| 欧美九九九九九| 97爱免费插| 日本成人免费一区二区三区| 日韩精品国模| 看一级黄色视频| 亚州性色| 中文字幕亚洲欧美在线不卡| 日韩成人私密一级精品av| 精品视频97| 特级毛片特黄久久免费看| 亚洲久久东京热一二三四五区视频| 亚洲国产欧美中文永久| 老熟女网站| 偷拍色图| www.夜夜操| 亚洲春色欧美激情自拍| 亚州九九九精品视频| 淫妻综合网| 午夜亚洲WWW湿好大| 成人天天爽| 草莓精品视频在线免费观看| …中文字幕亚洲乱,97人妻无码费视…| 天天操天天插| 午夜精品久久久久久久久久蜜桃| 中出20p| 精品一区96| 日本中文字幕不卡视频| 人人澡综合涩| 成人av动漫在线观看| 九九九九热| 人妻社区男人天堂| 中国国产精品一区视频| 国产9l 大屁股| 爱干爱射网啊啊啊| 9久久精品| 久久av一级av少妇av高潮 | 青青草操逼逼视频| se吧提供91精品国产91久久久久久| 超碰在线第一页| 2011国产精品| 日本欧美亚洲高清在线看| 免费无码婬片AAAA片直播色戒| av东京热男人的天堂| 欧美另类色| 国产三级多多影院2022国产AA一级毛片无码 | 国产一线二线三线av| 一区二区国产视频在线观看| 91精品丝袜在线观看| 久久亚洲中文字幕视频| 91操熟女视频| 色九九综合AV| 中文字日本乱码| 亚洲色人妻综合| 欧美 亚洲 偷拍自拍| 男人高清无码一区二区| 国产黄色剧情影片麻豆免费播放| 粉嫩av一区二区三区天美传媒 | 美女刺激久久国产欧美| 人人摸人人摸人人干| 中文字幕天堂在线| 亚洲精品电影| yazhouzaixian| 2017大香蕉国产精品久久| 开心六月色| 91在线|亚| 综合网欧美在线| 无码聚合| 中国国国产一级特黄毛片| 亚洲无吗在线视频| 久久精品福利影院| 情趣丝袜无码操逼视频| 天天澡天天爽日日AV| 中文字幕一区二区三区四五区| 超碰98综合网| 综合激情97| 800zy一区二区| 按摩中文字幕| 久久黄色网址| 五月天大香蕉| 亚洲aV无码成人在线观看| 秋霞视频一区二区| 26uuu国产免费观看| 岛国AB视频| 美女极品一区二区三区| 亚洲一曲日韩精品| 亚洲黄片免费在线播放| 欧美日韩黄片精品在线 | 天堂精品小草| 亚洲日本成人动漫| 先锋精品av色鲁| 天美传媒av 在线| 插入综合网| 成人影 天天操 亚洲| 五月婷婷综合网| 欧美麻豆成人同性GⅤ在线| 中国一区二区亚洲人妻| 99日精品欧美国产| 91婷婷| 大香蕉久| 久久男女激情视频网站| 国内三级自拍小视频在线观看 | 91熟女丨老女人| 国产精品美女| 韩国一级做a久久久久| 精品久久无码午夜福利| 欧美日韩电影成人在线| 久久毛卡| 超碰免费在线| 有码免费观看| 91欧美丝袜| 欧美性第1页| 九九综合九九综合| 人妻少妇久久中文字幕一区二区 麻豆 | 色婷婷影院| 麻豆这里只有精品| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 全国男人天堂网| 蜜臀久久久99久久久久| 日本中文熟女视频| 国产精品久久久久久亚洲色欲| 中文?日韩?免费?精品| 国产 亚洲 一二三四| 欧美经典一区二区三区| 婷婷综合五月天| 伊人影院中文字幕| 97超碰亚洲| 嗯~啊~快点 死我视频免费看网站| 97在线日韩中文字幕| 超碰78| 国产一区二区精品久久99| 黄色工厂这里只有精品| av亚欧| 91足交| AND人妻系列| 操b网站亚洲无码| 国产又粗又长的视频| 激情综合网激情综合| 日韩亚洲精品一区二区| 亚洲另类在线观看| 91日产欧美| 国产视频第二页| 久久久久久国产无码精品| 国产在线视视频有精品| 99国产精品久久久久久久成人热| 久久久久久久久久久久97| 高清国产无码av| 国产按摩一区二区三区| 久色99999| 久9九综合在线| A片A5445444| 美女超碰978| 久久精品成人一区二区三区蜜臀| 亚洲黄色视频在线观看视频| 99在线观看| 男人的天堂无码| 国产91丝袜 在线播放| 日韩电影在线观看网址| **一级毛片国产| 国产白丝在线| 日韩激情无码影院| 婷婷五月天在线观看| 亚洲中亚日激情视频| a片自拍直播视频| 99精品免费| 国产AB视频| 97人人操人人摸人人爱| 狠狠欧美| 日本布卡一区二三区| 亚洲古典另类欧美在线| 大香网伊人久久综合网eew| 精品人妻一区二区三区四区石在线| 久99热| 精品人妻15区| 日韩欧美国产高清视频| 久久一本大香蕉 | 操淫穴亚洲五月丁香| 久热影视| 91色碰| 日韩性色| www.婷婷| 人妻在线大香蕉| a片久久久久久久久久久久| 99热这里只有精品8| 欧洲自拍第一页| 黑人精品成人一区二区三区| 97久久久精品| 国产精品蜜臀久久久久无码AV| 精品大久久| 欧美激情久操网| 大香蕉手机视频| 欧美日综合| 亚洲欧美经典一区二区| 亚欧操逼片在线观看| 囯戸精品高潮呻吟旡码| 欧美亚洲AN| A 在线网址| 老司机久久| 蜜臀操逼黄色视频操的好爽| 精品无码产区一区二| 国产精品自在自拍视频| 久久久91福利姬| 操比国产| 伊人宅男大香蕉 | 国产一区二区在线播放| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 欧美中文狠| 特级毛片特黄久久免费看| 色综合超碰超| 强奸乱伦动态污图免费| 人妻色情天天操| 欧美 亚洲 偷拍自拍| 男人的天堂VA| 一区二区三区 日韩欧美| 高清无码91| 色色热| 亚洲色宗合| 久久久不能久久久久| 三级特黄60分钟播放| 日本 免费 一区二区三区 久久香蕉| 国产乱伦搜索结果91P| 亚洲在高跟鞋自慰久久在色线| 影音先锋视频在线| 天天在线91| 五月丁香六月激情综合| 亚洲高清欧美总合| 久久九七| 日韩欧美俄罗斯A片| 超碰色大香蕉| 亚洲91少妇| 亚洲春色欧美激情自拍| 智利AV在线网| 美女刺激久久国产欧美| 日本成人A片网站| 久久久久久免费电影| 婷婷久草一区二区三区| 国产h小视频在线观看免费| 欧美日韩国产电影| 天天精品| 国产色图乱伦| 97亚洲资源| 国产精品久久伊人| 一区二区三区视频| 欧洲精品人妻| 激情婷婷| 人人操我人人干| 极品人妻少妇综合| 美女露胸露奶头| 八人操人人摸人人看| 91第一页| 九九九九九九九九九九九九九九九女| 日韩精品区二区三区不卡| 国产精品视频播放| 色五月婷婷久久| 国产自产自拍| 日韩97P| 夜夜骑操视频| 色婷婷99| 国产浮力影院第1页| 啊啊啊在线观看| 婷婷激情五月综合| 日本黄色裸日本黄色裸体 | 家庭乱伦麻豆| 蜜桃臀久久| 日本天天人人狠狠在线日美女 | 综合一区二区影视| 97人妻色| 99re国产精品视频| 综合网91| 欧美色交| 伊人亚洲综合| 天堂九九九九九九九九九| 岛园激情| 波多野结衣一级视频| 波多野结衣之双飞调教在线播放 | 最新国产亚洲精品精品国产亚洲综合| 超碰97极品9| 嗯嗯啊啊好大好爽| 四虎免费看黄| 神马视频久久久久久| 久久丁香五月婷婷| 中文字幕av亚洲在线| 小视频国产| yiqicaoav| 亚洲色图欧美色图在线播放| 久久超碰av在线| 91天天综合网,天天综合网| 欧美图片偷拍| 精品视频久久久久九九九九9999| 深夜激情无码| 亚洲1区2区三区高清中文字幕| 91影库| 操婢日韩| 日韩视频精品在线观看| 国产高清自拍| 91殴美| 伊人久久AV诱惑悠悠| 99久久9| 色九九综合AV| 国产视频第2页| 久久鲁夜| 欧美72网页| 另类av天堂| 欧美日韩国第一区| 四虎永久在线精品免费网址| 欧美图片偷拍| 日欧美色| 超碰97男人| 国产丝袜美腿美女麻豆| AV天堂男人的天堂| 91热情品| 亚码人妻| 粉嫩av一区二区三区四季| 日韩97视频| 天天搞欧美| 欧美激情 亚洲色图| 亚洲欧美另类图片| 女性91网站| 国产1024在线播放| 在线观看成人性爱免费小视频| av网站在线观看了| 人人看欧美性爱| 亚洲av影音先锋| 大色综合网| 天天插天天操| 综合久草| 久久久久久久78| 高潮综合网| 黑丝制服中文字幕| 欧美色图欧美| 农村女一级毛卡片| 亚洲精品尤物yw在线影院| 国产AV激情无码久久无码| 两女互慰AV高潮喷水在线观看| 亚洲1区2区三区高清中文字幕| 日韩黄色一区二区三区| 婷婷91| 欧美精品丝袜久久久中文字幕| 久久日本熟妇熟色高清| 91色爽欧美| 久久久91福利姬| 人妻激情偷乱视频一区二区三区 | 欧美啪啪女女|