日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上 上個月幫同事排查一套 Zabbix 監(jiān)控 Nginx 數(shù)據(jù)一直為空的問題。一開始我們都把注意力放在 Zabbix Web 端反復(fù)檢查模板、主機(jī)、宏折騰了一上午。最后才發(fā)現(xiàn)真正斷掉的環(huán)節(jié)是 Nginx 的 stub_status 狀態(tài)頁根本沒有暴露出來agent 自然也就拿不到任何數(shù)據(jù)。更讓我意外的是同事的配置是從一篇兩三年前的教程里抄來的那篇教程里的模板名稱、agent 類型和現(xiàn)在的環(huán)境已經(jīng)對不上。這不是個案。Zabbix 監(jiān)控 Nginx 這件事最常見的坑不是 Zabbix 不會裝而是安裝配置流程里塞滿了舊資料。所以下面我不打算只給一個固定命令序列而是想把 Zabbix 監(jiān)控 Nginx 的鏈路重新拆一遍Nginx 怎么暴露狀態(tài)agent 怎么讀到數(shù)據(jù)模板怎么匹配以及當(dāng)你拿到一臺新機(jī)器時應(yīng)該按什么順序驗(yàn)證。核心判斷只有一句——真正決定這套監(jiān)控能不能跑通的往往不是 Zabbix 本身而是 Nginx 狀態(tài)頁、agent 采集和模板匹配這三個環(huán)節(jié)有沒有全部連上。1. 先想清楚Zabbix 監(jiān)控 Nginx 到底在監(jiān)控什么1.1 表面是進(jìn)程存活本質(zhì)是連接和請求很多入門教程會把 Zabbix 監(jiān)控 Nginx 簡單理解成“Nginx 掛了就報(bào)警”。這個理解不算錯但太單薄。Nginx 是應(yīng)用入口它的價值不在于進(jìn)程起沒起來而在于它當(dāng)前扛了多少連接、請求處理得是否順暢、有沒有異常堆積。Zabbix 之所以能監(jiān)控 Nginx核心不是直接讀進(jìn)程狀態(tài)而是通過 Nginx 自身的狀態(tài)接口或模塊拿到一組結(jié)構(gòu)化指標(biāo)。最常見的數(shù)據(jù)源是 Nginx 官方自帶的 stub_status 模塊。打開狀態(tài)頁后你會看到類似這樣的一小段文本Active connections: 3 server accepts handled requests 12 12 15 Reading: 0 Writing: 1 Waiting: 2這幾個數(shù)字的含義值得記住Active connections當(dāng)前活躍連接數(shù)。acceptsNginx 啟動以來成功接受的連接總數(shù)。handled成功處理的連接總數(shù)。正常情況下 accepts 和 handled 應(yīng)該接近。requests總請求數(shù)。Reading / Writing / Waiting分別表示正在讀請求頭、正在寫響應(yīng)、以及空閑 keep-alive 連接的數(shù)量。這些指標(biāo)能幫你看清什么比如 Reading 長時間很高說明請求堆積在讀取階段背后可能是客戶端沒有把請求發(fā)完整Waiting 大量存在不是壞事只能說明 keep-alive 連接占著資源accepts 和 handled 差距持續(xù)增大則可能說明有連接在中間環(huán)節(jié)被丟掉。1.2 為什么很多“監(jiān)控沒數(shù)據(jù)”其實(shí)和 Zabbix 無關(guān)排查過幾次就會發(fā)現(xiàn)Zabbix 監(jiān)控 Nginx 沒數(shù)據(jù)絕大多數(shù)原因不在 Zabbix要么是 Nginx 狀態(tài)頁沒開啟要么是狀態(tài)頁返回的是 HTML 而不是純文本要么是 agent 訪問不到狀態(tài)頁要么是模板里的宏路徑和實(shí)際路徑不一致。Zabbix 本身只是在按固定周期向 agent 要數(shù)據(jù)agent 再去請求 Nginx 狀態(tài)頁。這一條數(shù)據(jù)鏈上有任何一個環(huán)節(jié)斷了儀表盤就永遠(yuǎn)是空的。所以我建議把這條鏈路拆成三段來理解Nginx 負(fù)責(zé)提供數(shù)據(jù)agent 負(fù)責(zé)搬運(yùn)數(shù)據(jù)Zabbix 負(fù)責(zé)展示和告警。后兩段的問題通常都有日志可查反而是第一段最容易被人忽略。很多“監(jiān)控沒數(shù)據(jù)”的案例其實(shí)和你選的模板、版本的關(guān)聯(lián)沒有想象中那么大問題往往出在數(shù)據(jù)源這一層。2. Nginx 側(cè)的狀態(tài)頁配置先把數(shù)據(jù)源打開2.1 先確認(rèn)模塊再改配置順序不要反Nginx 狀態(tài)頁依賴 http_stub_status_module 這個模塊。問題在于不是所有 Nginx 環(huán)境都默認(rèn)包含它。源碼編譯安裝時如果沒有帶 --with-http_stub_status_module后面想加模塊就得重新編譯發(fā)行版?zhèn)}庫里的 nginx 通常已經(jīng)包含這個模塊但不同發(fā)行版、不同倉庫之間也可能有差異容器鏡像則更不一定一些精簡鏡像會把用不到的模塊裁掉。所以第一步是確認(rèn)模塊存在。常見做法是查看編譯參數(shù)nginx -V 21 | tr \n | grep stub_status如果輸出里能看到 http_stub_status_module說明模塊沒問題。如果什么都沒有就不要繼續(xù)往下配狀態(tài)頁了先解決模塊問題。否則你配置再正確curl 訪問時也只能看到 404。注意有些系統(tǒng)里 nginx 不在 PATH 中可能需要寫全路徑比如/usr/local/nginx/sbin/nginx -V或者先執(zhí)行which nginx確認(rèn)一下。2.2 一個穩(wěn)妥的 stub_status 配置示例確認(rèn)模塊存在后再修改 Nginx 配置。常見的做法是在一個 server 塊里加一個 location只讓狀態(tài)頁從指定路徑訪問server { listen 80; server_name _; location /nginx_status { stub_status; allow 127.0.0.1; allow 192.168.10.0/24; deny all; } }這里有幾個細(xì)節(jié)要說明。location /nginx_status是精確匹配避免掩蓋其他路徑規(guī)則stub_status;是常見寫法如果你看到的舊教程里寫的是stub_status on;通常也能兼容但更推薦按當(dāng)前版本的標(biāo)準(zhǔn)寫法來allow 和 deny 用來限制來源 IP避免狀態(tài)頁暴露到公網(wǎng)。雖然狀態(tài)頁內(nèi)容看起來不敏感但泄露給外界等于給攻擊者多一個信息采集入口沒有理由不做限制。寫完配置后先檢查配置再重載nginx -t nginx -s reload # 如果使用 systemd 管理也可以寫成 systemctl reload nginx然后用 curl 驗(yàn)證curl -s http://127.0.0.1/nginx_status如果能看到開頭那段純文本說明 Nginx 側(cè)已經(jīng)通了。注意curl 的來源 IP 要和 allow 規(guī)則匹配否則你會看到 403。2.3 容器化和非默認(rèn)端口環(huán)境的特殊點(diǎn)如果你的 Nginx 跑在容器里情況會稍微復(fù)雜一點(diǎn)。agent 要么和 Nginx 在同一個容器內(nèi)要么通過容器 IP 或映射端口訪問狀態(tài)頁。容器內(nèi)的 Nginx 如果只監(jiān)聽了容器內(nèi)部端口agent 在宿主機(jī)上直接 curl 127.0.0.1 是拿不到響應(yīng)的。這類問題用 curl 驗(yàn)證時最容易暴露但很多人會誤以為是自己配置寫錯了。另外狀態(tài)頁不一定只能放在 80 端口。有的環(huán)境為了安全和便于管理會把狀態(tài)頁放在 8080 或單獨(dú)一個 server 塊里。這樣的設(shè)計(jì)沒問題但模板里的宏就要跟著改。這里的重點(diǎn)是先想清楚 agent 要從哪個地址訪問 Nginx然后保證這個地址上的 TCP 連通性和 ACL 都允許。不要只在 Zabbix 里把宏改來改去主機(jī)上卻訪問不到。我在很多環(huán)境里見過一種最隱蔽的錯誤狀態(tài)頁本身配置正確但 allow 規(guī)則只放行了 127.0.0.1agent 卻通過內(nèi)網(wǎng) IP 去訪問狀態(tài)頁。agent 請求時Nginx 看到的來源 IP 是內(nèi)網(wǎng)地址命中 deny all于是返回 403監(jiān)控項(xiàng)自然拿不到數(shù)據(jù)。所以配置 allow 時要想著 agent 會從哪個 IP 過來而不是只寫 127.0.0.1。3. Zabbix agent 這一層不是安裝了就行3.1 配置 Server 地址和 Hostname一致性是第一原則Nginx 狀態(tài)頁通了之后才輪到 agent。agent 安裝本身不復(fù)雜麻煩的是配置。以最常見的 zabbix-agent 為例配置文件里幾個關(guān)鍵參數(shù)一定要理解Server192.168.10.20 ServerActive192.168.10.20 Hostnameweb01Server 和 ServerActive 不是一回事。Server 是被動模式下允許從 Zabbix Server 拉取 item 的地址白名單ServerActive 是主動模式下 agent 向哪個 Zabbix Server 或 Proxy 上報(bào)數(shù)據(jù)的地址。如果你只配置了 Serveragent 就會等 Server 來問如果你用了主動模式ServerActive 也要填。很多舊教程只寫一個值換到新環(huán)境就出問題。比這更容易出錯的是 Hostname。Zabbix Web 端添加主機(jī)時填的主機(jī)名必須和 agent 配置里的 Hostname 保持一致。如果 Web 端寫的是 web01agent 里配的是 nginx-web-1那么即使在 Zabbix 里能看到主機(jī)監(jiān)控項(xiàng)也始終是 no data。在新版本 agent 里你還會看到HostnameItemsystem.hostname這樣的配置意思是讓 agent 用系統(tǒng)本身的 hostname 作為上報(bào)名稱。這個機(jī)制可以避免手工維護(hù) Hostname但前提是系統(tǒng) hostname 必須和 Zabbix Web 里的主機(jī)名一致。所以不管用哪種方式原則都是同一個兩邊名字要對上。3.2 agent 與 agent2模板和 key 可能不一樣這里要說一個“和過去不一樣”比較明顯的點(diǎn)現(xiàn)在 Zabbix 官方推薦使用 Zabbix agent 2也就是 agent2。agent2 不僅在采集能力上更豐富還支持一些內(nèi)置插件但對應(yīng)的模板、監(jiān)控項(xiàng) key 和舊 agent 不完全一樣。在 Zabbix Web 里搜索 Nginx 時你可能會看到多個模板有些名字類似 Nginx by HTTP有些類似 Nginx by Zabbix agent 2。如果你在主機(jī)上裝的是 agent2卻鏈接了舊 agent 版本的模板可能會出現(xiàn) unsupported item。反過來也一樣。所以我的建議是在鏈接模板之前先打開模板里的監(jiān)控項(xiàng)預(yù)覽看它使用的采集類型是 Zabbix agent、HTTP agent還是依賴 agent2 插件。確認(rèn)它跟你實(shí)際安裝的 agent 類型對得上再鏈接。這一步只要花兩分鐘卻可以省掉后面一晚上的排查時間。agent 和 agent2 的服務(wù)名也不一樣常見的有 zabbix-agent、zabbix-agent2系統(tǒng)服務(wù)名可能是 zabbix-agentd.service 或 zabbix-agent2.service。啟動服務(wù)后用systemctl status看一下是否 active再看一眼日志路徑常見的是/var/log/zabbix/下面。出現(xiàn)問題時日志里通常直接會告訴你 key 不支持還是連接失敗。3.3 用 zabbix_get 快速驗(yàn)證采集鏈路在 Web 端排查前可以先在 Zabbix Server 上用 zabbix_get 做一次最直接的驗(yàn)證確認(rèn) agent 是否正常工作zabbix_get -s 192.168.10.11 -k agent.ping如果返回 1說明 Server 能連上 agent。如果返回值不是 1就別急著去 Web 端看模板先解決網(wǎng)絡(luò)、端口和 Hostname 問題。agent.ping 是通用探活 key驗(yàn)證通過后再去模板里找到你想測的監(jiān)控項(xiàng) key比如和 Nginx 狀態(tài)頁相關(guān)的 key繼續(xù)用 zabbix_get 測試。不同版本、不同模板的 key 名稱會有差異所以這里不列具體 key但思路是一樣的先用 curl 確認(rèn)狀態(tài)頁存在再用 zabbix_get 確認(rèn) agent 能取到值最后才去 Web 端看圖表。鏈路從底層往上逐層打通比在界面上猜效率高得多。4. 在 Zabbix Web 端鏈接模板別被舊截圖帶偏4.1 模板名稱已經(jīng)變過好幾輪Zabbix 的模板策略在過去幾年變化很大。這次部署里我在模板列表里搜索 nginx出來的已經(jīng)不是早期教程里那張截圖上的名字了。官方模板按采集方式做了拆分有的走 HTTP agent有的走 Zabbix agent有的專門適配 agent2。這本身是好事但如果你照著一個兩三年前的教程去選模板很可能選錯。我的建議是以當(dāng)前 Zabbix 版本實(shí)際加載的模板列表為準(zhǔn)不要憑記憶點(diǎn)。鏈接模板后立刻去“監(jiān)測 – 最新數(shù)據(jù)”里過濾這個主機(jī)等一到兩個更新周期看有沒有數(shù)據(jù)進(jìn)來。如果 Zabbix 的刷新周期是 30 秒或 1 分鐘通常幾分鐘內(nèi)就能看到。另外一個主機(jī)通常只需要鏈接一個對應(yīng)當(dāng)前采集方式的 Nginx 模板不需要把所有 Nginx 模板全鏈接上。鏈接多個模板并不會讓數(shù)據(jù)更豐富反而會讓監(jiān)控項(xiàng)沖突、重復(fù)告警排查起來也更亂。4.2 宏參數(shù)路徑、協(xié)議、端口都是變量模板鏈接后還有一層容易被忽略宏參數(shù)。官方 Nginx 模板里通常會定義一組宏用來告訴 agent 去哪個地址、哪個路徑、用什么協(xié)議獲取狀態(tài)頁。常見宏名可能包括{$NGINX.SCHEME}、{$NGINX.PORT}、{$NGINX.STUB_STATUS.PATH}具體名稱以你當(dāng)前模板為準(zhǔn)。它們的作用就是把狀態(tài)頁的訪問信息從監(jiān)控項(xiàng)中抽出來這樣同一套模板可以復(fù)用在不同的 Nginx 主機(jī)上。如果你的狀態(tài)頁地址不是默認(rèn)值就不用改監(jiān)控項(xiàng)直接在主機(jī)層級覆蓋宏就行。比如狀態(tài)頁路徑是 /nginx_status 而不是 /status就在主機(jī)的宏里把對應(yīng)宏改成實(shí)際路徑。改完后等下一次采集生效再看最新數(shù)據(jù)。要注意的是宏的生效范圍有層級全局宏、模板宏、主機(jī)宏。主機(jī)宏優(yōu)先級最高。如果模板里已經(jīng)定義了默認(rèn)值主機(jī)上沒改也沒關(guān)系但如果狀態(tài)頁地址做了修改一定要記得改對應(yīng)主機(jī)的宏而不是只在模板里改一個默認(rèn)值因?yàn)槟0迥J(rèn)值會影響所有鏈接該模板的主機(jī)。還有一個容易出錯的地方狀態(tài)頁地址如果是 https但宏里用的是 http監(jiān)控項(xiàng)會一直返回錯誤。這種問題在視覺上非常隱蔽因?yàn)?Nginx 和 agent 都正常只有協(xié)議不匹配。4.3 驗(yàn)證模板是否能出數(shù)據(jù)鏈接模板和配好宏之后不要直接離開頁面。花一分鐘做兩件事第一到主機(jī)監(jiān)控項(xiàng)列表里看有沒有出現(xiàn)紅色 error 狀態(tài)的監(jiān)控項(xiàng)第二到最新數(shù)據(jù)里過濾該主機(jī)確認(rèn)有非空數(shù)據(jù)。如果看到 error 狀態(tài)的監(jiān)控項(xiàng)先點(diǎn)擊進(jìn)去看錯誤信息。常見的有 unsupported item key、Cannot connect to [...]: 10060、Connection refused 這類。每一條錯誤信息其實(shí)都指向了數(shù)據(jù)鏈路的具體環(huán)節(jié)比你在外面猜模板要快得多。如果最新數(shù)據(jù)里有值但看起來不對比如 Reading 是 0、Writing 是 0也不要慌先用 curl 手動看一次狀態(tài)頁確認(rèn)源數(shù)據(jù)里就是這些值然后判斷是 Nginx 本身空閑還是采集路徑不對。如果源數(shù)據(jù)是對的Zabbix 只是如實(shí)展示不用改 Zabbix。5. 沒數(shù)據(jù)的排查鏈路按順序查別亂試5.1 四個環(huán)節(jié)從上到下檢查如果你最終面對的是一臺沒數(shù)據(jù)的 Nginx 主機(jī)不要先懷疑 Zabbix更不要反復(fù)重新鏈接模板。按下面的順序逐層排查通常能在十分鐘內(nèi)定位問題。第一層Nginx 狀態(tài)頁是否可訪問。curl -s http://127.0.0.1:80/nginx_status如果 curl 能返回純文本進(jìn)入下一層。如果返回 403、404 或 HTML 頁面問題在 Nginx 側(cè)。第二層agent 能否讀到狀態(tài)頁。注意 agent 的運(yùn)行身份和權(quán)限。你可以切換到 agent 運(yùn)行用戶或者用 sudo 模擬執(zhí)行同樣的 curl 命令確認(rèn) agent 視角下能訪問。如果 agent 在容器里還要確認(rèn)容器網(wǎng)絡(luò)。第三層Server 和 agent 之間是否連通且 Hostname 匹配。zabbix_get -s agent_ip -k agent.ping如果 zabbix_get 返回 1說明網(wǎng)絡(luò)層通。然后再確認(rèn) Web 端主機(jī)名和 agent Hostname 一致。第四層模板宏和監(jiān)控項(xiàng)是否匹配。打開監(jiān)控項(xiàng)列表查看具體監(jiān)控項(xiàng)的 key、宏替換后的實(shí)際地址用測試功能跑一次。如果返回錯誤根據(jù)錯誤信息調(diào)整宏。這個順序的核心思路是先確定是哪一層壞了再決定修哪里。不要在不知道哪一層出問題的時候改配置改來改去只會讓狀態(tài)更亂。5.2 高頻錯誤對照表下面這張表基本覆蓋了 Zabbix 監(jiān)控 Nginx 時最容易遇到的幾類現(xiàn)象現(xiàn)象常見原因處理思路狀態(tài)頁 curl 返回 404沒有配置 location 或模塊缺失先查 nginx -V 里的 stub_status 模塊狀態(tài)頁 curl 返回 403allow/deny 沒有放行 agent 來源 IP調(diào)整 allow 規(guī)則思考 agent 從哪個 IP 訪問監(jiān)控項(xiàng)顯示 unsupported itemagent 版本或模板類型不匹配確認(rèn)是 agent 還是 agent2換對應(yīng)模板或 key最新數(shù)據(jù)一直是空Hostname 不匹配、宏路徑不對、采集周期長檢查主機(jī)名一致性測試宏替換后的地址監(jiān)控項(xiàng)返回 Connection refusedagent 未啟動、端口不通、防火墻攔截systemctl status 看服務(wù)再用 zabbix_get 驗(yàn)證狀態(tài)頁返回的是 HTML 而非純文本location 配置被其他規(guī)則截獲檢查 server 塊順序確認(rèn)精確匹配位置這張表不是讓你背下來而是給你一個參考坐標(biāo)。遇到問題時先看現(xiàn)象再判斷屬于哪一層然后去對應(yīng)位置檢查。5.3 沉淀一個“四層驗(yàn)收清單”最后一個能長期復(fù)用的經(jīng)驗(yàn)把 Zabbix 監(jiān)控 Nginx 的鏈路固定成一張驗(yàn)收清單每次新接入一臺 Nginx 主機(jī)時按順序過一遍。Nginx 狀態(tài)層模塊存在、location 配置正確、curl 返回純文本、allow 已放行 agent 來源 IP。Agent 采集層服務(wù)已啟動、配置了正確的 Server/ServerActive、Hostname 與 Web 端一致、zabbix_get 驗(yàn)證 agent.ping 返回 1。Server 接入層Web 端主機(jī)存在、agent 接口可達(dá)、主機(jī)名匹配。模板匹配層鏈接了適配 agent 類型的 Nginx 模板、宏路徑/協(xié)議/端口正確、最新數(shù)據(jù)出現(xiàn)非空值。這個清單不是固定不變的但它能幫你把一次復(fù)雜的排查變成一次順序的確認(rèn)。以后不管是三臺機(jī)器還是三十臺機(jī)器先讓這種驗(yàn)證順序變成肌肉記憶再談自動化。6. 適用邊界這套方案不是所有 Nginx 環(huán)境都適合6.1 適合誰Zabbix 監(jiān)控 Nginx 這套方案適合的場景其實(shí)很清楚你已經(jīng)在用 Zabbix手里是一批長期存在的虛擬機(jī)或物理機(jī)核心關(guān)注的是連接數(shù)、請求數(shù)、握手狀態(tài)等基礎(chǔ)指標(biāo)。這種情況下引入一套新的監(jiān)控系統(tǒng)成本遠(yuǎn)大于收益直接在 Zabbix 里接 Nginx 模板是最順的路。從我個人經(jīng)驗(yàn)看當(dāng)一個團(tuán)隊(duì)已經(jīng)用 Zabbix 管了幾百臺機(jī)器再為了 Nginx 單獨(dú)部署一套 Prometheus、Grafana反而不劃算。不是因?yàn)?Prometheus 不好而是你的告警、權(quán)限、儀表盤、值班流程都已經(jīng)長在 Zabbix 上了新增一套系統(tǒng)意味著要同時維護(hù)兩套監(jiān)控體系的賬號、存儲和告警規(guī)則。6.2 不適合誰反過來如果你的環(huán)境是大量短生命周期容器Nginx 實(shí)例像 Pod 一樣隨時擴(kuò)縮容Zabbix 這種以主機(jī)為單位的管理模型就會變得很吃力。每來一個新實(shí)例都要創(chuàng)建主機(jī)、鏈接模板、維護(hù) Hostname規(guī)模一大這些動作本身就是運(yùn)維負(fù)擔(dān)。另外如果業(yè)務(wù)需要按 URL、按狀態(tài)碼、按 upstream 做細(xì)粒度 SLA 分析單靠 Zabbix 的 Nginx 狀態(tài)頁數(shù)據(jù)也不夠。狀態(tài)頁給的是連接數(shù)和請求總數(shù)拿不到每個接口的響應(yīng)時間分布。這種需求更適合讓 Nginx 輸出 access log 結(jié)構(gòu)化、再送進(jìn)時序數(shù)據(jù)庫或者日志系統(tǒng)或者直接采用具有服務(wù)發(fā)現(xiàn)能力的監(jiān)控方案。這不是說 Zabbix 不能做擴(kuò)展而是說你要先判斷值不值得。任何方案都有維護(hù)成本Zabbix Nginx 監(jiān)控的優(yōu)勢是簡單直接代價是深度有限。認(rèn)清這個邊界比盲目堆監(jiān)控項(xiàng)更重要。6.3 重要的不是某一個命令而是適應(yīng)變化的能力回到標(biāo)題里那半句“和過去有一點(diǎn)不同”。這句話其實(shí)很適合用來概括這類監(jiān)控方案的常態(tài)Nginx 的編譯參數(shù)在變agent 從舊版走向 agent2模板名稱和宏定義在變安裝方式從裸機(jī)走向容器。過兩年你再回頭看今天這篇文章里的具體配置很可能又有出入。但有一點(diǎn)不會變數(shù)據(jù)從 Nginx 到 agent 再到 Server 這條鏈路的邏輯是穩(wěn)定的。你只要掌握了“先 curl 狀態(tài)頁、再 zabbix_get 探活、最后看模板宏”的驗(yàn)證順序無論版本怎么升級你都能在最短時間內(nèi)判斷出問題出在哪一層。這才是比某一條命令更有價值的東西。所以我的長期建議是不要只收藏某個版本的配置片段而是順手把自己的環(huán)境、模板名稱、宏定義、驗(yàn)證命令寫成一個簡短文檔或腳本。下次再遇到 Nginx 監(jiān)控沒數(shù)據(jù)你不是回去翻舊教程而是打開自己的排查清單?;氐介_頭那個案例。我們最后做的事情其實(shí)很簡單把 stub_status 狀態(tài)頁配置好allow 規(guī)則放行 agent 來源 IP再把 Web 端主機(jī)名和 agent Hostname 改成一致。數(shù)據(jù)在第二個更新周期就出現(xiàn)了。整個過程沒有任何懸案只是之前分散在不同教程里的經(jīng)驗(yàn)沒有串成一條完整的鏈路。Nginx 側(cè)會變、Zabbix 會變、模板會變但驗(yàn)證順序不會變。下次再看到最新數(shù)據(jù)為空時不要急著在界面上反復(fù)點(diǎn)先打開一個終端curl 一下狀態(tài)頁很多時候答案早就寫在響應(yīng)里了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲天堂一区| 天美传媒在线一区| 久久这里只精品免费福利| 欧美熟女妇同| 密桃99999| 日本操逼视频免费| 亚洲天堂美臀在线| 亚洲色图超碰在线| 丝袜色综合| 精品国产乱码久久久久久久久1| 日本精品一级二级三级| 狠狠操狠狠燥| 第45页一区二区| 亚洲天堂,男人| 国产v片在线免费观看| 亚洲影视第一页| 久草精品热视| av大香蕉| 亚洲精品久久久久久久蜜桃臀| 亚洲图片欧美| 超碰超碰超碰超碰的大鸡吧操黑丝袜 | 91性感在线| 97碰碰日本乱偷人妻中文的| 青青草在线成人视频| 日本免费人成视频播放120秒| 久久这里只有精品9| 淫穴高潮色图| 国产精品乱码久久久、久久| 伊人影院在线理论播放| 伊人91| 新婚人妻扶着粗大强行坐下| 7777奇米影视久久| 精品人妻一区二区三区鲁大师| 亚洲综合 欧美| 久久国99999| 精品超碰中文在线| AA丁香综合激情| 国产日逼视频| 91free福利| 国产尤物AV尤物在线观看不卡 | 欧美另类色图片| 成人三一级一片aaa| 久久只有精品| 黄片视频观看| 激情 欧美 亚洲 小说| 男人综合网| 97精品视频在线播放| 超碰碰97| 欧美日本天堂| 亚洲欧美清纯| 欧美天天综合网| 色97欧美| 中文字幕青青草| 日本久久久精品电影| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 国产丝袜一区二区三区| 麻豆传媒一区二区在线观看| 国产外初女出血视频| 欧美性爱第一页久久| 国内毛片欧美香蕉精品| 美女尤物人人操| 午夜超爽| 九九在线视频| 无码heyzo高清一区| 青青操青娱乐| 超碰精品人妻狠狠干| 男人的天堂久久狠| 久久成人东京热人妻| 欧美激情 亚洲色图| 亚洲自拍小说| 97在线免费观看| 一道α片欧美| 国产欧美日本亚洲精品 | 亚洲精品丝袜| 色天欧美| 嫩草黄页| 成人性交免费视频| 欧美性巨大╳╳╳╳╳高跟鞋| 一本大道不卡一二三区| 婷婷五月成人| 青青草伊人久久| 成人欧美日超碰| 超碰综合97在线| 久久97视频| 成 人 A V免费视频在线观看| 澳门黄片一香蕉视频| 夜色AV无码手机在线影院| 91一起操| 长长久久曰曰夜夜成人网| 操九九九九九九| 亚洲91大片| 欧洲视频在线| 欧美亚洲一级在线观看| 熟女精品一区二区三区| 91精品少妇搡搡搡| 成人蜜乳小视频网站| 一级黄色性爱A级片| 伊人女女资源在线观看| 大鸡吧尹人在线| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 国产精品免费视频不卡| 欧美熟妇乱码在线一区| 日本 情色 1区| 国产精品一区二区校花| 熟妇熟女视频一区二区三区| 亚洲一区中文精品| 99这里有精品视频| 欧美综合 站| 欧美精品三级黄片| 婷婷久久五月天| 国产久久久9999| 国产精品夜夜夜| 成人性爱AV在线免费观看| 婷婷五月天影院| 欧美大色交| 精品午夜福利| 久久久一区二区三区四曲免费听| 性爱AV天堂| CCYY草草影院地址入口| 激情网五月天| 欧美色图亚洲色| 人人爱人人操人人性| a人欧美综合天堂麻豆| 97久久超碰亚洲| 亚洲精品国语在线播放| 日本在线一二 | 久久影视二区三区行押| 东北女人操逼| 91精品久久久| 午夜视频久久久久一区| 久久欧美1卡2卡3| 台欧久久精品视频| 青青伊人加勒比海| 欧美综合777| 国产日韩欧美操逼视频| 日本午夜福利视频| 91大神精品长腿在线观看网站| 精品亚洲国产成人精品| 动漫av中文| 国产东北女人在线视频| 免费成人在线熟妇网| 国产最火爆久久国产网站网站| 97资源制服丝袜| 4tube欧美女厕所| 久久久久久AV无码免费网站| 四虎影视精品| 91在线免费观看处女| 女人综合网| 狠狠操狠狠爱| 嫩草影院性色| 日韩欧美麻豆 | 亚洲 日本 不卡| 青青草丝袜在线视频| 人乳av| 欧美人人AAA| 欧美图片校园春色| 九九九九日本| 亚欧无码在线| 天天欲望网| 黑丝少妇麻豆| 岛国毛片手机在线观看| 综合网少妇| 久久天天摸| 亚洲精品人妻在线| 清纯唯美亚洲| 四季av一区二区凹凸精品小说| 黄网色一区二区三区四区精品| 亚洲av资源| 啪啪一区| 日本免费亚洲欧美| 天天上日日上日韩精品| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师 | 色性综合| 韩国一级婬片A片无码天美| 亚洲日韩久久精品一区| 国产性感在线观看| 日韩av乱伦| 成人毛片免费| 97视频免费在线| 99视频只有精品| 另类图片综合| 国产又大又粗又长视频| 插老姨肥穴| 色九九综合| www.亚洲黄色| 久久激情婷婷| 999熟女精品| 久久久工口| 欧美三级中文字幕hd| 亚洲一区二区三区婷婷| 超碰伊人在线| #NAME?| 婷婷情色综合网| 99热这里只有精品地址| 亚洲图片激情综合另类| 18禁无码永久免费无限制| 婷婷探花久久精品一区| 亚洲欧洲久久天堂| 人妻碰碰碰碰碰碰| 97视频在线观看播放与子乱对白在线……| 欧美疯狂做爰xxxx| 欧美午夜一区二区三区| 上海一级黄片| 青草成人免费视频一com| 欧美性五月| 加勒比AV网| 精品久久在线区一区| 亚洲古典另类欧美在线| 成人性爱高清视频免费看| 日本欧美中文字幕| 成人怡红院| 97精品全部| 白嫩妹子国产骚| 欧美日韩另类字幕中文| 骚熟女吞| 国产青青美女玩逼视频| 免费成人在线熟妇网| 国产夜夜操| 日本三级韩三级99久久| 久久精品三级影视| 色色色热| 天天狠| 九九人人操| 欧美性爱在线无码| 色九九综合| 天天色播亚洲综合网站| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 色情五月综合婷婷| 一区二区三区视频在线观看免费| 婷婷九月色| 99精品热| 禁片 高清 在线观看视频网站| 欧美躁死她一区二区| 超碰av在线| 精品区9| 国产不卡精品91| 一本一道人妻久久一区二区三区 | 中文字幕美女91| 久久产精品一区二区三区电影| 精品九九九九| 精品妇女一区二区三区| 少妇99| 免看60秒涩涩视频| 91天天综合日韩欧美| 亚洲黄色AV电影| 搡老女人老91妇女老熟女| 欧美精品,四区。五区| 国产女主播视频在线观看| 尤物视频新赏网鲜网色诱网| 亚洲影院成人| 网页导航五月天免费一二三区| 国产67194| 九九九九九九九精品视频| 久久天天性久久伊人| 成人色女网| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 亚洲男人的天堂网| 色色97爱| 中文字幕一区二区日韩网| 日韩精品 视频一区二区| 丁香九月 婷婷| 国产h片在线观看视频| 欧美劲爆视频一区二区| 青娱乐av在线| 屁股久久久久久久久| 亚洲女人91| 国产第12页| av资源在线观看少妇| 中文字幕视频在线观看一区二区| 美性中文综合网| 亚洲 欧美 日韩另类 麻豆| 色狠狠一区二区三区香蕉| 久久久96| caoni国产亚洲av| 亚洲另类久操网| 97天天插| 亚洲成人日韩小说| 欧美日韩222| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | 九九九精品美女| 在线免费观看日韩一区| 亚洲天堂区| 色网综合网| 91精品人| 欧美九九爱| av日韩中文字幕| 欧美一区二区三区互相| 国产11页| 国语少妇精| 国产视频大全| 亚州综合色| 黄色一区二区秘书性感| 国产天天看| 男人的天堂一区| 91成人久久 | 肉丝无码中文高清| 在线观看高清AV| 中文字幕 一区二区 亚洲无码| 亚洲有薄码区久久在线一区| 亚洲 自拍偷拍 欧美| 蜜桃视频一区二区三区在线观看| 女性91网站| 桃色五月天| 九久9精品| 玖玖视频在线资源一区二区三区| 97这里有精品| 91狠狠综合久久久久久| 色妇综合网| 九九色精品| 国产又粗又长的视频| 看日韩操逼| 亚洲污污网站| 婷婷丁香久久| 国产女人视频三四五区| 97人肏| 91亚.色| 欧美视频一区二区在线| 偷拍亚洲视频一区二区三区四区| 免费看久久久性性| 欧美激情区| 欧美亚洲丝袜人妻制服99| 97免费视频在线| AV色五月天| 丰满精品人妻少妇久久字幕| 国产精品蜜臀久久久久无码AV| 天天爽夜夜欢视| 婷婷丁香九月| 激情啪啪视频| 天天流夜夜操| 日本免费一级AAA大片器| 亚洲精品一卡二卡三卡福利视频网站 | 亚州色综合| 亚洲天堂色图| 丁香九月 婷婷| 婷婷久草| 午夜天堂精品久久久久91| 国产九九九九九九| 午夜呻吟欧美| 亚洲αv一区二区三区| 亚洲素人网| 亚洲欧美经典一区二区| 欧美狠狠干| 欧美日韩国产电影| 大香蕉综合在线| 一起草高清无码| 草久久久| 亚洲欧美精品91| 九九视频黄色片| 中文字幕第95页| 久久天天摸| 隔壁邻居波多野结衣中文字幕| 亚洲国产福利视频| 精品亚洲俞拍视频一区| 色综合婷婷| 色呦呦国产精品免费看| 中精品一区二区三区| 免费看毛片操穴| 一区操逼日比视频| 久久久久久性爱免费视频| 日韩钢筋无码高清啾啾啾| 伊人久久大香大香线蕉中文| 久久精品国产亚洲AV高清演员表| 情色大香蕉| 久久久111| 人妻嗯啊啊在线播放 | 欧美熟女丝袜| 久久99综合| 青椒国产97在线熟女| 美女啊啊啊啊啊啊| 人妻色情天天操| 日韩精品9999| AV 少妇 人妻 偷拍| а√天堂资源官网在线资源| 97久久超碰国产精品| 亚洲官网在线| 色噜噜综合在线| 无码少妇精品一区二区60岁老人| 99热导航| 亚洲视频,小说| 中文字幕在线24| 偷看洗澡一二三区美女| 亚洲av综合色| 一本精品日本在线视频精品 | 国产成人精品亚洲日本| 国产精品免费日韩| 国产欧美精选激情视频| 岛国视频一二三区| 中文字幕乱码人妻二区三区| 久久久精品视频欧州站| 亚洲诱惑| 亚洲熟妇乱女区二区三区| 97精品熟女少妇一区| PMv在线观看| 国产精品香蕉| 麻豆国产97在线| 高清孕妇孕交| 亚洲人成网站7777| 日韩免费中文字幕视频| 欧美人黑A片无码免视费| 欧美综合网在线| 欧美日韩亚洲天堂| 大香蕉78| 国产真实子伦对白| 中文字幕日韩电影人妻| 精品无码久久久久久国产浪潮| 搡老熟女免费视频| 色色网91| 日韩视频啪啪| 国产99热| xxx亚洲午夜天堂| 国产精品久久久视频| 热久久精品| 不卡人妻少妇精品毛片一区23区视频 | 国产自偷自拍一区| 女人双腿搬开让男人桶| 国产日比| 中文字幕在线观看第二页| 日韩少妇丰满亚洲| 2017大香蕉国产精品久久| 欧美中字二区| 伊人视频| 欧洲精品二区| 亚洲欧美色图片| 亚洲人妻中文在线视频| 国产丝袜欧美在线视频| 国产aⅴ无码片毛片一级网站| 国产综合网站在线播放| 九九成人| 熟女中出视频| 大色网久久| 不卡在线观看视频| 91在线视频免费播放| 极品白嫩美女白浆成人福利在线看| 婷婷综合五月天| 乱理日韩中文| 青青草原香蕉日本Ap| 亚洲成人贴图| 91爆操视频| 99色在线| 色欧洲97| 丁香五六月啪啪| 丁香五月激情综合国产| 国产欧美伊人| 青青草原伊人网| 亚洲 小说 欧美 激情 另类| 亚洲图片欧洲图片aⅴ| 欧美亚洲丝袜人妻制服99| 色婷婷综合久久中文字幕雪峰 | 亚洲一区二区在线观看91| 精品国产三级av韩国在线| 日本五十路熟女一区二区| 婷婷五月天网| 97天天在线| 操逼无码操逼| 久久久久久久极品香蕉视频| 久久熟女嫩草成人片免费 | 精品成人动漫一区二区| 天天干2019| 91操熟女视频| 探花激情视频| 台湾佬中文娱乐网久久久久久久久久com | 激情五月综合网| 亚洲国产丝袜在线观看| 狠狠操官网| 精品妇女一区二区三区| 亚洲毛片久久| 五月丁香激情综合| 九色 蝌蚪 熟女自| 333kkkk·亚洲com久久| 99国产精品人妻人伦| 超碰97男女| 偷窥自拍A片| 鸥美极品| 色哟哟511老熟女| 成人综合网 欧美| 屁股久久久久久久| www色色com| 91色伦| 日va操| 少妇内射www在线观看视频| 欧美色www亚洲国产阿娇要播| 青青草视频久久| 91 综合网| 色9999日韩国产| 后入合集| 能看的AV| 亚洲精品97久久| 小少妇| 韩国三级色呦呦| 一级人妻性爱视频| 欧美日韩一干二干| 色欲蜜臀AV| 欧美大色交| 岛国视频一二三区| 中字一区| 久久激情亚洲精品无码?V| 欧美 亚洲 91| 亚洲国产精品无码AV久久| 97综合在线| 国产精品在线免费| 国产亚洲色婷婷久久99精品91| 日本ZZ高免费A级视频| 性交一区二区在线播放| 欧美日韩亚洲少妇寂寞影院正在播放 | 啊啊啊好想要| 天天视频黄| 亚洲av综合色区无码一| 成人综合色网| 在线啊啊啊啊| 亚洲图片视频小说| 日本国产欧美一区三区二区| 亚洲风情在线观看| 九九热三级片| 国产在线综合网| 天天草天天日| 99在线免费视频| 久久五月视频| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 欧美高清第一页| 刺激性视频黄页| 操东北女人| 成人精品一区二区三区| www.色婷婷| 无码直播久久久| 欧美青青草视频| 免费视频无码| 欧美精品久久96人妻无码| 色综合久久夜色精品国产天堂 | 蜜乳av一区二区三区| 午夜120视频在线观看| 伊人宅男大香蕉| 亚洲一区二区三区麻豆传媒| 国人欧美精品一区二区| 夜夜欧美| 中文无线日韩一区| 96免费视频在线| 成功精品影院| 欧美色综合网| 亚洲欧洲第二视频在线观看色图| 人妻熟女午夜精品在线| AA特级绝黄| 三级日本一区二区三区| 亚洲第一男人天堂| 好屌色综合| 男人的天堂日韩| 四虎影视在线| 激情五月天色色| 人人模人人看| 舔人妻中文免费视频| 日本东京热大香蕉a片| 人妻熟女午夜精品在线| 99久久久无码国产精品性男| 飘花国产午夜精品不卡| 欧美爱爱97| 天天舔日美女视频| 国产精品色哟哟| 天天插天天操| 青娱乐国产盛宴视频| 在线视频 亚洲精品| 日韩淫色网| 大香网伊人久久综合网eew| 成人精品在线观看| 97色干| 91操人| 色婷婷视频| 中文字幕一区二区日韩网| 国语精品av| 久久是精品| 91精品免费| 91美女在线视频| 78p欧美| 亚欧美天堂在线| 东京热激情视频一二三区| 久久久久免费少妇| 爽爽淫人网| 精品久久視頻在线| 天天91~综合入口| 怡红院视频在线| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 岛国片国产成人亚洲播放| 久久久久久亚洲Av无码| 亚洲AV色图| 日韩九九九| 激情综合 婷婷五月 红杏| 欧美综合天堂| 97视频免费在线| 欲色综合| 97亚洲综合| 久久久久久久9| 日韩一级欧美一级国产一级台湾| 久96热在线观看视频| 99re久久| 五月丁香黄色网| 亚洲熟女综合| 欧美猛交黑寡妇中文字幕| 嗯~啊~快点 死我视频免费看网站| 亚洲91色在线| 亚洲熟女偷拍在线观看| 91无码人妻精品一区二区三区蜜桃| 蜜臀久久99精品久久久久久成人小说 | 亚洲密乳AV| 综合久久六月久久婷婷| 丁香婷婷啪啪| 2019AV天堂| 97亚洲国产| 亚洲欧美日韩激情不卡| 久久综合国产精品国产| 国产一区二区视频在线播放| 日本特黄f c2| 色女综合| 欧美日韩不卡传媒| 精品人妻一区二区三区四区石在线 | 好吊色在线观看| a男人的天堂| 亚洲综合伊人| 国产无码成人无码| 一级久久性爱视频| 操狠狠| 色婷婷一区二区三区久久午夜| 人人操人人肉久久精品| 久久大香蕉97| 隔壁邻居波多野结衣中文字幕| 岛国片在线观看视频亚洲| 色婷婷综合久久中文字幕雪峰| 精品9999| 成人无码在线视频网站| 久久人妻精品| 97爱b| 激情小说亚洲色图| 国产视频一区二区免费| 亚洲日韩肥臀视频在线观看| 国产又长又大又粗的视频| av毛片aaaaa免费看| 狠狠操综合| 欧美熟女逼久久久久久| 国产精品原创巨作?v网站| 亚洲色五月| 青青草久久| 大JI巴好深好爽又大又粗视频| 国产久久久久影院老熟女| 夜夜爽夜夜操| 一区二区三区视频| 人妻大香蕉| 亚洲伊人a线观看视频| 婷婷啪啪| 狠狠97| 人妻乱仑一区二区三区| 国产久久久9999| 澳门色噜噜色噜噜色噜噜色噜噜色噜噜| 高清国产成人无码| 97玖玖超碰| 综合影院永久入口国产| 口爆欧美91| 久久精品国产亚洲AV先锋| 夜夜操2028| 白丝AV| 日日碰狠狠添天天爽超| daxiangjiao你懂的 | 日韩人妻操B| 婷婷爽人人婷婷爽视频| 国产一区二区三区中文字幕| 亚洲黄色电影| 日本在线一二| 好色综合| 欧美天天综| 日韩操p| 上床不卡网站| 人妻中文字幕日韩电影| 亚洲自拍青操视频| 巨爆乳肉感一区二区三区竹菊影视 | 97热视频在线观看| 操逼网免费无码视频| 欧日韩一二三f区| 九九色精品| 热热色中文无码| 国产欧美美女免费观看视频| 欧美国产精品久久九九| 亚洲AO在线| 欧美激情性爱视频网站| 密臀AV在线| 伊人色综合网电影| 好吊色综合| 麻豆久久久久久久久丝袜| 亚洲蜜乳av| 日本亚欧爱爱| 欧美日韩高潮喷水91| 在线岛国新天堂8| 久久妇| 欧美激情综合色综合啪啪五月| 亚洲无码精品AV久久久| 人妻 欧美 中文| 亚欧高清在线| 麻豆国产97在线| 91国内外在线| 日韩三级一区 | 国产精品熟女乱伦| 亚洲图片欧美色| 国产亚洲色婷婷99精品91| 影音先锋国产精品| 一级性爱视频免费观看| 999九九九九国产动| 日韩av一级黄片| 日躁天天爽爽| 爱妻综合网| 伊人91| 国产日韩区| 亚洲综合色图欧美| 啊啊啊啊啊在线视频| 色呦呦呦在线观看视频| 97天堂| 2019亚洲男人天堂| 欧美亚洲国内自拍| 岛国视频免费在线观看| 九九九久久久| 日韩97视频| 91在线视频免费中出| 亚洲 欧美 手机在线观看| 男人天堂资源| 亚州大图综合色图| 中文字幕日韩精品一区二区三区| 亚洲无吗在线视频| 国产福利合集| 久久97视频| 亚洲中文电影| 超碰人人乐97| 99色色网| 国产成人在线观看网址| 亚洲国产午夜真人一级片中文字幕精品黄网站 | 欧美综合色| 白 大 人妻 区 在线| 校园春色制服丝袜中文字亚洲| 久久高清欧美国产| 亚洲91在线| 亚洲欧美综合网| 99在线啪| 是还免费视频1727我| 天天综合香 ld视频| 婷婷五月天成人| 久久九九综合| 日韩AC| 欧美老妇曰批的视频| 国产综合在线视频网站| 日本一道在线播放高清| 久久午夜神马| 超碰97 线线 在现| 伦在线97| 91天天综合网,天天综合网| 欧美久久婷| 超碰爽人妻熟女Av| 女色视频社区| 久久夜色一区二区| 99re这里只有精品3| 无码抄逼网| 亚洲欧美精品国产一区二区| 一个国产在线综合网站| 精品国产三级av韩国在线| 亚洲小说视频| 91爱| 国模久久在线| 久久久天美| 久久精品日韩专区免费观看| 国产91丝袜在线播放蜜月| 国产性爱欧美性爱在线| 美女91av| 色偷偷综合91久久噜噜| 久久有码视频| 国产区在线| 色欲久久99国产精品久久久久久| 96超碰网| 免费操逼91| 天天做天天爱夜夜爽毛片试看| 思思热免费在线视频| 欧美精品日韩久久久九| 在线无码操| 成人 日韩欧美一区| 麻豆天美电影一区二区| 大香蕉 222| 人妻激情在线视频| 日韩日韩日韩-国产乱码精品一区二区| 久久久九精品| 欧美色图校园春色| 视频国产成人精品日本亚洲18 | 国产精品久久久蜜臀| 欧美综合骚| 亚洲五区熟女| 国产风韵犹存熟妇三区| 国产成人主播| 欧美 亚洲精品首页| 日本欧美中文字幕| 欧日a| 看日韩美女二区三区免费操逼视频| 色性荡荡荡荡视频| 天操天操夜操夜月操月年年操操| 超碰色图| 中文人妻av高清一区| 国产三区免费在线观看| 很很干很很操| 欧美成人综合| 色97干| 十八禁av无码免费网站APP| 国产性爱在线视频一区二区| 国产JDAV无码视频在线观看| 丝袜美腿制服人妻二区中文字幕| 一区二区三区欧美激情| 色婷婷婷五月天激情四射| 久啪视频| 国产区91柔拿会所技师| 午夜精品久久久久久久男人的天堂| 国产日韩精品一区二区三区| 国产91丝袜在线播放蜜月| 呦呦一区| 亚洲精品三| 97久久精品国产| 韩日欧亚a级| 综合久久少妇中文字幕| 亚洲一本色道中文无码aV天美| 国产11页| 果冻传媒A片麻豆熟妇人妻| 少妇人妻好深太紧了vr91| 99热思思| 日韩91网| 国人欧美精品一区二区| 美女高潮视频91| 亚洲精品九九九| 中文字幕亚洲在线一区| 乱色老一区二区三区的观看方式 | 韩国黄片aaaa| 综合网欧| 亚洲一区二区在线观看91| 丁香五月久久| 99国内熟女露脸视频| 欧美色www亚洲国产阿娇要播| 亚洲天堂,男人| 欧美九一精品久久久熟妇| 久久久久久久9| 欧美 亚洲 偷拍自拍| 欧美综合 站| 中文字幕亚洲热播人妻| 国产丰满少妇久久久精品影院| 久操免费在线| 国产女上位好爽在线| 99re6在线视频播放免费精品| 中文字幕91页| 欧色性第一页| 亚洲欧美日韩免费电影| 日本三级小说中文字幕| 亚洲美女AV无码| 天天日日日射| 国产精品爆乳懂色蜜乳| 久久综合18p| 乱伦一二三| 青青草吊丝| 人人艹亚洲| 麻豆精品天美| 丰满岳乱妇一区二区三区| 亚洲天堂电影网| 丁香五六月啪啪| 大香蕉一人在线| 成人日韩3| 久久婷婷欧美| 日韩一区二区三区四区五区| 欧美日韩美女精品久草一区二区三区| 一级久久性爱视频| 国产男女边吃边摸视频网站| 欧美大香蕉97| 成人网站 免费观看| 熟女熟妇伦久久影院毛片一区二区| 色牛牛AV| 91精品国产91熟女| 狠狠 91| 无码 黑人一区二区三区| 少妇蜜汁| 日韩欧无码一区二区三区免费不卡| 少妇一区二区三区在线观看| 欧美一区二区三区互相| 精品无码久久久久| 亚洲欧美日韩精品久久久一区二区| 欧美日韩97在线| 丁香六月综合激情| 久久黄人人爽视频| 99热精品青草在线| 国产对白刺激视频| 九九热午夜欧亚国产视频| 欧美亚洲综合色| 大香蕉乱级| 久久久成人精品| 操碰97| 亚洲 小说 欧美 激情 另类| 久久人妻无码毛片A片麻豆| 深田咏美亚洲精品福利社| 无码不卡亚洲成?人片| 夜夜騷av、一區二區| 亚洲美女自拍偷拍视频| 精品人妻一区二区三区鲁大师| 91在线限制级| 色区久久| 五月婷亚洲精品天堂| 免费看污网址| 一品道视频一区二区三区| 先锋激情∨在线视频播放| 少妇蹲下买菜露大唇0| 欧美熟妇视频 | 久久久久久69国产一区二区| www.acm成人黄色毛片| 欧美美女自慰一区二区三区| 日人妻视频91| 91综合在线| 人人摸人人舔一区二区| 蜜桃久久久久久久| 色噜噜婷婷| 影音先锋视频在线| 亚洲久久久久| 日本亚欧爱爱| 丁香婷婷激情五月天无毒不卡| 天天日少妇逼AV| 亚洲AV无码AV吞精久久久久| 国产精品不卡一区二区三区av| 大干人妻| 伊人久久大香大香线蕉中文| 欧美性爱日韩性爱| 久久久久亚洲熟妇熟女| 女生久久网| 久久是精品| 久久国产999| 久久天天躁日日躁狠狠躁 | 日han少妇无码| 在线观看高清AV| 日韩免费a级毛片无码a∨| 久久熟女嫩草成人片免费| 夜夜操91744565| 吻戏激情性巴克| 中文字幕 国产 精品| 亚洲国产一区二区日韩专区| 天久久久噜噜噜久久国产精品爽爽 | 快播电影网日韩新片| 好舒服视频| 欧美后入视频| 91色黑人少妇| 超碰av在线| 国产成人无码高清| 天堂无码精品国产久| 台湾成人无码AV| 日本人妻中文字幕精品| yaouchengrenav| 精品九九| 91成人18| 激情小说亚洲| 色悠久| 国产91亚洲精品一区二区三区| 九九九九久久久久| 九九无码| 九九九热| 懂色中文一区二区三区| 麻豆天美久久91| 久久久久久久少妇| 久久久久无码| 熟妇高潮一区二区免费视频| 秋霞男人网| 看黑丝美女操逼青青网站| 91视频成人福利网站在线一区| 青青草国产亚洲精品久久| 啊啊啊快操我视频| 欧美性综合| 亚洲 欧美 第一页| 亚洲视频精选| 中文字幕一区二区免费在线| 国产成人自拍视频视频| 麻花豆传媒剧国产MV出差| 亚洲欧美日韩制服另类| 日韩欧美成人午夜福利| 久久亚洲国产成人| 无码丰满熟妇一区二区浪潮AV| 欧美久久伊人| 婷婷五月成人| 1区2区3区中文字幕日韩| 自拍视频大全亚洲专媒视频/一区二区三区 | 国产成人主播| 加勒比av网| 欧美综合自拍| 免费观看国产小粉嫩喷水精品午| 亚洲一区中文字幕一区| 黑丝少妇| 97爱爱影院| 97欧美久久久久久久| 亚洲美女AV无码| 亚洲三区视频| 大香蕉欧美| 婷婷视频在线免费观看| 99热精品在线| 久久综合av| 国产9l 大屁股| 日本操逼无码| 亚洲最大的综合性av| 国产九九久久久精品| 蜜桃久久久久久久久久久久| 超碰97综合网| 黑人免费福利视频| 综合色图区| 五月天春色激情网| 亚热日本熟女| www亚洲欧美| 视频国产欧美在线播放| 精品亚洲国产成人AV制服丝袜| 蜜臀久久99精品久久久老,,| 日本东京热大香蕉a片| 日韩天天综合| 懂色av色欲av蜜臀av| 婷婷五月天伊人| 搡老女人老91妇女熟女| 成人线上超碰| 丁香五月婷婷啪啪| 亚洲诱惑| 100啪啪视频大全| 最新av中文字幕高清| 丁香九月激情| 后入式视频国产自| 欧美性爱无码一区二区三区| 熟妇熟女视频一区二区三区| 久久久久9| 欧美人与动性人交a| 精品久久一区二区三区四区五区| 蜜桃丰满熟妇av无码区不卡| 好吊色青靑草| 在线观看精品国产免费| 乱欲一区二区| 日韩精品熟妇| 国产综合久久久麻桃个| 欧日a| 99抽插| ,成人免费啪啪视频| 亚洲性综合9| 天天肏天天干| 亚洲国产日韩欧美熟妇在线| 精品人妻一区| 福利偷拍视频-中文字幕2019国语完整视频大全-S91AV | 中文字幕天天操| 蜜臀中文字幕| 99热欧美| 最新制服中文第一页| 免费啪啪啪网站18岁| 欧美96交| 亚洲色图欧美视频| 青青草导航在线视频| 高清无码 国产精品| 亚洲欧美综合网站| 啪啪AV导航| 东北女人| 无码免费在线观看黄色片| 欧美性爱一区二区三区四区| 91被操| 97色色,97综合| 国产第12页| 97免费视频在线观看视频| 91精品国产日韩欧美综合| 91AV天美在线视频| 3d成人精品一区二区| 97在线无精品| 欧美亚洲尤物久久| 欧洲色综合| 婷婷综合在线| av黄图片在线观看| 2025亚洲男人天堂| 日韩国产欧美伦理在线| 伊人 俄罗斯 a v| 黄色毛片A片| 一本大道久| 国产亚洲精品美女久久久m| 九九九九97| 91狠狠色丁香婷婷综合久久| 亚洲综合嫩| 国产性感骚丝袜在线| 亚洲区 欧美区| 欧美制服另类丝袜| 在线毛片片免费观看| 精品乱码在线观看| 日本九九九九| 国产亚洲色停停久久99精品91| 国产亚洲人妻综合日韩 久久| 三级日韩一区二区三区| 亚洲污污网站| 精品国产肉丝袜在线拍国语| 日韩无码极品| 高潮嗯啊性感美女久久久| 亚洲欧美一区二区三区一猛片| 精品人妻一区二区三区蜜桃视频| 大稥蕉免费视频这里只有精品| 91国产操逼视频| 国产第11页| 99热在线观看| 国产操逼视频在线观看| 中文字幕精品三级久久久| 99r九九| 97日韩| 日本三级韩国三级美三级91| 婷婷99狠狠躁天天躁| 久久久亚洲Av| 色九九九九九九| 天天插天天舔舔天天干| 亚洲91在线播放影院| 精人妻一区二区三区| 欲香欲色天天天综合和网| 国产欧美一区激情交| 国产一级特黄大片处女| 亚洲自拍欧美色综合| 天天看天天综合成人网| 白天啪啪晚上啪啪视频| 香蕉精品二区二区| 欧美婷婷久久| 九九久久精品| 偷拍偷窥与盗摄视频专区| 最新av在线| 女性喷水高潮在线观看| 超碰人妻天天干| 日韩有码中文字幕女同性恋 | 久久鲁干| 视频国产成人精品日本亚洲18| 后入福利| 九九性爱网| 岛国网址国产| 波多野结衣之双飞调教在线播放| 精品人妻视频一区二区在线播放 | 围产精品一区二区三区视频播放| 丝袜人妻av一区二区| 伊人五月天婷婷| www.av不卡中文字幕| 午夜激情床戏激情| 欧美特大黄一级片片免费| 成全在线观看免费观看| 久久男人的天堂| 日韩十八禁| 日日黄色三级网站| 亚洲图片 91| 五月丁香婷婷综合网| 日韩欧美成人性爱在线| 人人弄人人摸| 色汉综合| 亚洲在线91| 香蕉免费一区二区三区不读| 欧美性爱一区二区三区四区| 免费啪啪啪网站18岁| 国产精品探花在线| a v网站在线播放| 高潮的A片激情扒开一区| 五月丁香黄色网| 97视频免费播放| 色逼综合| 少妇精品| 97天天操| 亚洲激情av| 在线观看黄色电话| 久久精品一区二区三区蜜桃臀| 日韩精品在线放| 久久伊人在线五区| 100啪啪视频大全| 91丝袜美女| 超碰97人妻自拍| 亚洲天堂男人在线| 淫荡网址| 久久久久78| 久久日韩毛|