日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上 上個月幫同事排查一套 Zabbix 監(jiān)控 Nginx 數(shù)據(jù)一直為空的問題。一開始我們都把注意力放在 Zabbix Web 端反復(fù)檢查模板、主機(jī)、宏折騰了一上午。最后才發(fā)現(xiàn)真正斷掉的環(huán)節(jié)是 Nginx 的 stub_status 狀態(tài)頁根本沒有暴露出來agent 自然也就拿不到任何數(shù)據(jù)。更讓我意外的是同事的配置是從一篇兩三年前的教程里抄來的那篇教程里的模板名稱、agent 類型和現(xiàn)在的環(huán)境已經(jīng)對不上。這不是個案。Zabbix 監(jiān)控 Nginx 這件事最常見的坑不是 Zabbix 不會裝而是安裝配置流程里塞滿了舊資料。所以下面我不打算只給一個固定命令序列而是想把 Zabbix 監(jiān)控 Nginx 的鏈路重新拆一遍Nginx 怎么暴露狀態(tài)agent 怎么讀到數(shù)據(jù)模板怎么匹配以及當(dāng)你拿到一臺新機(jī)器時應(yīng)該按什么順序驗(yàn)證。核心判斷只有一句——真正決定這套監(jiān)控能不能跑通的往往不是 Zabbix 本身而是 Nginx 狀態(tài)頁、agent 采集和模板匹配這三個環(huán)節(jié)有沒有全部連上。1. 先想清楚Zabbix 監(jiān)控 Nginx 到底在監(jiān)控什么1.1 表面是進(jìn)程存活本質(zhì)是連接和請求很多入門教程會把 Zabbix 監(jiān)控 Nginx 簡單理解成“Nginx 掛了就報(bào)警”。這個理解不算錯但太單薄。Nginx 是應(yīng)用入口它的價值不在于進(jìn)程起沒起來而在于它當(dāng)前扛了多少連接、請求處理得是否順暢、有沒有異常堆積。Zabbix 之所以能監(jiān)控 Nginx核心不是直接讀進(jìn)程狀態(tài)而是通過 Nginx 自身的狀態(tài)接口或模塊拿到一組結(jié)構(gòu)化指標(biāo)。最常見的數(shù)據(jù)源是 Nginx 官方自帶的 stub_status 模塊。打開狀態(tài)頁后你會看到類似這樣的一小段文本Active connections: 3 server accepts handled requests 12 12 15 Reading: 0 Writing: 1 Waiting: 2這幾個數(shù)字的含義值得記住Active connections當(dāng)前活躍連接數(shù)。acceptsNginx 啟動以來成功接受的連接總數(shù)。handled成功處理的連接總數(shù)。正常情況下 accepts 和 handled 應(yīng)該接近。requests總請求數(shù)。Reading / Writing / Waiting分別表示正在讀請求頭、正在寫響應(yīng)、以及空閑 keep-alive 連接的數(shù)量。這些指標(biāo)能幫你看清什么比如 Reading 長時間很高說明請求堆積在讀取階段背后可能是客戶端沒有把請求發(fā)完整Waiting 大量存在不是壞事只能說明 keep-alive 連接占著資源accepts 和 handled 差距持續(xù)增大則可能說明有連接在中間環(huán)節(jié)被丟掉。1.2 為什么很多“監(jiān)控沒數(shù)據(jù)”其實(shí)和 Zabbix 無關(guān)排查過幾次就會發(fā)現(xiàn)Zabbix 監(jiān)控 Nginx 沒數(shù)據(jù)絕大多數(shù)原因不在 Zabbix要么是 Nginx 狀態(tài)頁沒開啟要么是狀態(tài)頁返回的是 HTML 而不是純文本要么是 agent 訪問不到狀態(tài)頁要么是模板里的宏路徑和實(shí)際路徑不一致。Zabbix 本身只是在按固定周期向 agent 要數(shù)據(jù)agent 再去請求 Nginx 狀態(tài)頁。這一條數(shù)據(jù)鏈上有任何一個環(huán)節(jié)斷了儀表盤就永遠(yuǎn)是空的。所以我建議把這條鏈路拆成三段來理解Nginx 負(fù)責(zé)提供數(shù)據(jù)agent 負(fù)責(zé)搬運(yùn)數(shù)據(jù)Zabbix 負(fù)責(zé)展示和告警。后兩段的問題通常都有日志可查反而是第一段最容易被人忽略。很多“監(jiān)控沒數(shù)據(jù)”的案例其實(shí)和你選的模板、版本的關(guān)聯(lián)沒有想象中那么大問題往往出在數(shù)據(jù)源這一層。2. Nginx 側(cè)的狀態(tài)頁配置先把數(shù)據(jù)源打開2.1 先確認(rèn)模塊再改配置順序不要反Nginx 狀態(tài)頁依賴 http_stub_status_module 這個模塊。問題在于不是所有 Nginx 環(huán)境都默認(rèn)包含它。源碼編譯安裝時如果沒有帶 --with-http_stub_status_module后面想加模塊就得重新編譯發(fā)行版?zhèn)}庫里的 nginx 通常已經(jīng)包含這個模塊但不同發(fā)行版、不同倉庫之間也可能有差異容器鏡像則更不一定一些精簡鏡像會把用不到的模塊裁掉。所以第一步是確認(rèn)模塊存在。常見做法是查看編譯參數(shù)nginx -V 21 | tr \n | grep stub_status如果輸出里能看到 http_stub_status_module說明模塊沒問題。如果什么都沒有就不要繼續(xù)往下配狀態(tài)頁了先解決模塊問題。否則你配置再正確curl 訪問時也只能看到 404。注意有些系統(tǒng)里 nginx 不在 PATH 中可能需要寫全路徑比如/usr/local/nginx/sbin/nginx -V或者先執(zhí)行which nginx確認(rèn)一下。2.2 一個穩(wěn)妥的 stub_status 配置示例確認(rèn)模塊存在后再修改 Nginx 配置。常見的做法是在一個 server 塊里加一個 location只讓狀態(tài)頁從指定路徑訪問server { listen 80; server_name _; location /nginx_status { stub_status; allow 127.0.0.1; allow 192.168.10.0/24; deny all; } }這里有幾個細(xì)節(jié)要說明。location /nginx_status是精確匹配避免掩蓋其他路徑規(guī)則stub_status;是常見寫法如果你看到的舊教程里寫的是stub_status on;通常也能兼容但更推薦按當(dāng)前版本的標(biāo)準(zhǔn)寫法來allow 和 deny 用來限制來源 IP避免狀態(tài)頁暴露到公網(wǎng)。雖然狀態(tài)頁內(nèi)容看起來不敏感但泄露給外界等于給攻擊者多一個信息采集入口沒有理由不做限制。寫完配置后先檢查配置再重載nginx -t nginx -s reload # 如果使用 systemd 管理也可以寫成 systemctl reload nginx然后用 curl 驗(yàn)證curl -s http://127.0.0.1/nginx_status如果能看到開頭那段純文本說明 Nginx 側(cè)已經(jīng)通了。注意curl 的來源 IP 要和 allow 規(guī)則匹配否則你會看到 403。2.3 容器化和非默認(rèn)端口環(huán)境的特殊點(diǎn)如果你的 Nginx 跑在容器里情況會稍微復(fù)雜一點(diǎn)。agent 要么和 Nginx 在同一個容器內(nèi)要么通過容器 IP 或映射端口訪問狀態(tài)頁。容器內(nèi)的 Nginx 如果只監(jiān)聽了容器內(nèi)部端口agent 在宿主機(jī)上直接 curl 127.0.0.1 是拿不到響應(yīng)的。這類問題用 curl 驗(yàn)證時最容易暴露但很多人會誤以為是自己配置寫錯了。另外狀態(tài)頁不一定只能放在 80 端口。有的環(huán)境為了安全和便于管理會把狀態(tài)頁放在 8080 或單獨(dú)一個 server 塊里。這樣的設(shè)計(jì)沒問題但模板里的宏就要跟著改。這里的重點(diǎn)是先想清楚 agent 要從哪個地址訪問 Nginx然后保證這個地址上的 TCP 連通性和 ACL 都允許。不要只在 Zabbix 里把宏改來改去主機(jī)上卻訪問不到。我在很多環(huán)境里見過一種最隱蔽的錯誤狀態(tài)頁本身配置正確但 allow 規(guī)則只放行了 127.0.0.1agent 卻通過內(nèi)網(wǎng) IP 去訪問狀態(tài)頁。agent 請求時Nginx 看到的來源 IP 是內(nèi)網(wǎng)地址命中 deny all于是返回 403監(jiān)控項(xiàng)自然拿不到數(shù)據(jù)。所以配置 allow 時要想著 agent 會從哪個 IP 過來而不是只寫 127.0.0.1。3. Zabbix agent 這一層不是安裝了就行3.1 配置 Server 地址和 Hostname一致性是第一原則Nginx 狀態(tài)頁通了之后才輪到 agent。agent 安裝本身不復(fù)雜麻煩的是配置。以最常見的 zabbix-agent 為例配置文件里幾個關(guān)鍵參數(shù)一定要理解Server192.168.10.20 ServerActive192.168.10.20 Hostnameweb01Server 和 ServerActive 不是一回事。Server 是被動模式下允許從 Zabbix Server 拉取 item 的地址白名單ServerActive 是主動模式下 agent 向哪個 Zabbix Server 或 Proxy 上報(bào)數(shù)據(jù)的地址。如果你只配置了 Serveragent 就會等 Server 來問如果你用了主動模式ServerActive 也要填。很多舊教程只寫一個值換到新環(huán)境就出問題。比這更容易出錯的是 Hostname。Zabbix Web 端添加主機(jī)時填的主機(jī)名必須和 agent 配置里的 Hostname 保持一致。如果 Web 端寫的是 web01agent 里配的是 nginx-web-1那么即使在 Zabbix 里能看到主機(jī)監(jiān)控項(xiàng)也始終是 no data。在新版本 agent 里你還會看到HostnameItemsystem.hostname這樣的配置意思是讓 agent 用系統(tǒng)本身的 hostname 作為上報(bào)名稱。這個機(jī)制可以避免手工維護(hù) Hostname但前提是系統(tǒng) hostname 必須和 Zabbix Web 里的主機(jī)名一致。所以不管用哪種方式原則都是同一個兩邊名字要對上。3.2 agent 與 agent2模板和 key 可能不一樣這里要說一個“和過去不一樣”比較明顯的點(diǎn)現(xiàn)在 Zabbix 官方推薦使用 Zabbix agent 2也就是 agent2。agent2 不僅在采集能力上更豐富還支持一些內(nèi)置插件但對應(yīng)的模板、監(jiān)控項(xiàng) key 和舊 agent 不完全一樣。在 Zabbix Web 里搜索 Nginx 時你可能會看到多個模板有些名字類似 Nginx by HTTP有些類似 Nginx by Zabbix agent 2。如果你在主機(jī)上裝的是 agent2卻鏈接了舊 agent 版本的模板可能會出現(xiàn) unsupported item。反過來也一樣。所以我的建議是在鏈接模板之前先打開模板里的監(jiān)控項(xiàng)預(yù)覽看它使用的采集類型是 Zabbix agent、HTTP agent還是依賴 agent2 插件。確認(rèn)它跟你實(shí)際安裝的 agent 類型對得上再鏈接。這一步只要花兩分鐘卻可以省掉后面一晚上的排查時間。agent 和 agent2 的服務(wù)名也不一樣常見的有 zabbix-agent、zabbix-agent2系統(tǒng)服務(wù)名可能是 zabbix-agentd.service 或 zabbix-agent2.service。啟動服務(wù)后用systemctl status看一下是否 active再看一眼日志路徑常見的是/var/log/zabbix/下面。出現(xiàn)問題時日志里通常直接會告訴你 key 不支持還是連接失敗。3.3 用 zabbix_get 快速驗(yàn)證采集鏈路在 Web 端排查前可以先在 Zabbix Server 上用 zabbix_get 做一次最直接的驗(yàn)證確認(rèn) agent 是否正常工作zabbix_get -s 192.168.10.11 -k agent.ping如果返回 1說明 Server 能連上 agent。如果返回值不是 1就別急著去 Web 端看模板先解決網(wǎng)絡(luò)、端口和 Hostname 問題。agent.ping 是通用探活 key驗(yàn)證通過后再去模板里找到你想測的監(jiān)控項(xiàng) key比如和 Nginx 狀態(tài)頁相關(guān)的 key繼續(xù)用 zabbix_get 測試。不同版本、不同模板的 key 名稱會有差異所以這里不列具體 key但思路是一樣的先用 curl 確認(rèn)狀態(tài)頁存在再用 zabbix_get 確認(rèn) agent 能取到值最后才去 Web 端看圖表。鏈路從底層往上逐層打通比在界面上猜效率高得多。4. 在 Zabbix Web 端鏈接模板別被舊截圖帶偏4.1 模板名稱已經(jīng)變過好幾輪Zabbix 的模板策略在過去幾年變化很大。這次部署里我在模板列表里搜索 nginx出來的已經(jīng)不是早期教程里那張截圖上的名字了。官方模板按采集方式做了拆分有的走 HTTP agent有的走 Zabbix agent有的專門適配 agent2。這本身是好事但如果你照著一個兩三年前的教程去選模板很可能選錯。我的建議是以當(dāng)前 Zabbix 版本實(shí)際加載的模板列表為準(zhǔn)不要憑記憶點(diǎn)。鏈接模板后立刻去“監(jiān)測 – 最新數(shù)據(jù)”里過濾這個主機(jī)等一到兩個更新周期看有沒有數(shù)據(jù)進(jìn)來。如果 Zabbix 的刷新周期是 30 秒或 1 分鐘通常幾分鐘內(nèi)就能看到。另外一個主機(jī)通常只需要鏈接一個對應(yīng)當(dāng)前采集方式的 Nginx 模板不需要把所有 Nginx 模板全鏈接上。鏈接多個模板并不會讓數(shù)據(jù)更豐富反而會讓監(jiān)控項(xiàng)沖突、重復(fù)告警排查起來也更亂。4.2 宏參數(shù)路徑、協(xié)議、端口都是變量模板鏈接后還有一層容易被忽略宏參數(shù)。官方 Nginx 模板里通常會定義一組宏用來告訴 agent 去哪個地址、哪個路徑、用什么協(xié)議獲取狀態(tài)頁。常見宏名可能包括{$NGINX.SCHEME}、{$NGINX.PORT}、{$NGINX.STUB_STATUS.PATH}具體名稱以你當(dāng)前模板為準(zhǔn)。它們的作用就是把狀態(tài)頁的訪問信息從監(jiān)控項(xiàng)中抽出來這樣同一套模板可以復(fù)用在不同的 Nginx 主機(jī)上。如果你的狀態(tài)頁地址不是默認(rèn)值就不用改監(jiān)控項(xiàng)直接在主機(jī)層級覆蓋宏就行。比如狀態(tài)頁路徑是 /nginx_status 而不是 /status就在主機(jī)的宏里把對應(yīng)宏改成實(shí)際路徑。改完后等下一次采集生效再看最新數(shù)據(jù)。要注意的是宏的生效范圍有層級全局宏、模板宏、主機(jī)宏。主機(jī)宏優(yōu)先級最高。如果模板里已經(jīng)定義了默認(rèn)值主機(jī)上沒改也沒關(guān)系但如果狀態(tài)頁地址做了修改一定要記得改對應(yīng)主機(jī)的宏而不是只在模板里改一個默認(rèn)值因?yàn)槟0迥J(rèn)值會影響所有鏈接該模板的主機(jī)。還有一個容易出錯的地方狀態(tài)頁地址如果是 https但宏里用的是 http監(jiān)控項(xiàng)會一直返回錯誤。這種問題在視覺上非常隱蔽因?yàn)?Nginx 和 agent 都正常只有協(xié)議不匹配。4.3 驗(yàn)證模板是否能出數(shù)據(jù)鏈接模板和配好宏之后不要直接離開頁面。花一分鐘做兩件事第一到主機(jī)監(jiān)控項(xiàng)列表里看有沒有出現(xiàn)紅色 error 狀態(tài)的監(jiān)控項(xiàng)第二到最新數(shù)據(jù)里過濾該主機(jī)確認(rèn)有非空數(shù)據(jù)。如果看到 error 狀態(tài)的監(jiān)控項(xiàng)先點(diǎn)擊進(jìn)去看錯誤信息。常見的有 unsupported item key、Cannot connect to [...]: 10060、Connection refused 這類。每一條錯誤信息其實(shí)都指向了數(shù)據(jù)鏈路的具體環(huán)節(jié)比你在外面猜模板要快得多。如果最新數(shù)據(jù)里有值但看起來不對比如 Reading 是 0、Writing 是 0也不要慌先用 curl 手動看一次狀態(tài)頁確認(rèn)源數(shù)據(jù)里就是這些值然后判斷是 Nginx 本身空閑還是采集路徑不對。如果源數(shù)據(jù)是對的Zabbix 只是如實(shí)展示不用改 Zabbix。5. 沒數(shù)據(jù)的排查鏈路按順序查別亂試5.1 四個環(huán)節(jié)從上到下檢查如果你最終面對的是一臺沒數(shù)據(jù)的 Nginx 主機(jī)不要先懷疑 Zabbix更不要反復(fù)重新鏈接模板。按下面的順序逐層排查通常能在十分鐘內(nèi)定位問題。第一層Nginx 狀態(tài)頁是否可訪問。curl -s http://127.0.0.1:80/nginx_status如果 curl 能返回純文本進(jìn)入下一層。如果返回 403、404 或 HTML 頁面問題在 Nginx 側(cè)。第二層agent 能否讀到狀態(tài)頁。注意 agent 的運(yùn)行身份和權(quán)限。你可以切換到 agent 運(yùn)行用戶或者用 sudo 模擬執(zhí)行同樣的 curl 命令確認(rèn) agent 視角下能訪問。如果 agent 在容器里還要確認(rèn)容器網(wǎng)絡(luò)。第三層Server 和 agent 之間是否連通且 Hostname 匹配。zabbix_get -s agent_ip -k agent.ping如果 zabbix_get 返回 1說明網(wǎng)絡(luò)層通。然后再確認(rèn) Web 端主機(jī)名和 agent Hostname 一致。第四層模板宏和監(jiān)控項(xiàng)是否匹配。打開監(jiān)控項(xiàng)列表查看具體監(jiān)控項(xiàng)的 key、宏替換后的實(shí)際地址用測試功能跑一次。如果返回錯誤根據(jù)錯誤信息調(diào)整宏。這個順序的核心思路是先確定是哪一層壞了再決定修哪里。不要在不知道哪一層出問題的時候改配置改來改去只會讓狀態(tài)更亂。5.2 高頻錯誤對照表下面這張表基本覆蓋了 Zabbix 監(jiān)控 Nginx 時最容易遇到的幾類現(xiàn)象現(xiàn)象常見原因處理思路狀態(tài)頁 curl 返回 404沒有配置 location 或模塊缺失先查 nginx -V 里的 stub_status 模塊狀態(tài)頁 curl 返回 403allow/deny 沒有放行 agent 來源 IP調(diào)整 allow 規(guī)則思考 agent 從哪個 IP 訪問監(jiān)控項(xiàng)顯示 unsupported itemagent 版本或模板類型不匹配確認(rèn)是 agent 還是 agent2換對應(yīng)模板或 key最新數(shù)據(jù)一直是空Hostname 不匹配、宏路徑不對、采集周期長檢查主機(jī)名一致性測試宏替換后的地址監(jiān)控項(xiàng)返回 Connection refusedagent 未啟動、端口不通、防火墻攔截systemctl status 看服務(wù)再用 zabbix_get 驗(yàn)證狀態(tài)頁返回的是 HTML 而非純文本location 配置被其他規(guī)則截獲檢查 server 塊順序確認(rèn)精確匹配位置這張表不是讓你背下來而是給你一個參考坐標(biāo)。遇到問題時先看現(xiàn)象再判斷屬于哪一層然后去對應(yīng)位置檢查。5.3 沉淀一個“四層驗(yàn)收清單”最后一個能長期復(fù)用的經(jīng)驗(yàn)把 Zabbix 監(jiān)控 Nginx 的鏈路固定成一張驗(yàn)收清單每次新接入一臺 Nginx 主機(jī)時按順序過一遍。Nginx 狀態(tài)層模塊存在、location 配置正確、curl 返回純文本、allow 已放行 agent 來源 IP。Agent 采集層服務(wù)已啟動、配置了正確的 Server/ServerActive、Hostname 與 Web 端一致、zabbix_get 驗(yàn)證 agent.ping 返回 1。Server 接入層Web 端主機(jī)存在、agent 接口可達(dá)、主機(jī)名匹配。模板匹配層鏈接了適配 agent 類型的 Nginx 模板、宏路徑/協(xié)議/端口正確、最新數(shù)據(jù)出現(xiàn)非空值。這個清單不是固定不變的但它能幫你把一次復(fù)雜的排查變成一次順序的確認(rèn)。以后不管是三臺機(jī)器還是三十臺機(jī)器先讓這種驗(yàn)證順序變成肌肉記憶再談自動化。6. 適用邊界這套方案不是所有 Nginx 環(huán)境都適合6.1 適合誰Zabbix 監(jiān)控 Nginx 這套方案適合的場景其實(shí)很清楚你已經(jīng)在用 Zabbix手里是一批長期存在的虛擬機(jī)或物理機(jī)核心關(guān)注的是連接數(shù)、請求數(shù)、握手狀態(tài)等基礎(chǔ)指標(biāo)。這種情況下引入一套新的監(jiān)控系統(tǒng)成本遠(yuǎn)大于收益直接在 Zabbix 里接 Nginx 模板是最順的路。從我個人經(jīng)驗(yàn)看當(dāng)一個團(tuán)隊(duì)已經(jīng)用 Zabbix 管了幾百臺機(jī)器再為了 Nginx 單獨(dú)部署一套 Prometheus、Grafana反而不劃算。不是因?yàn)?Prometheus 不好而是你的告警、權(quán)限、儀表盤、值班流程都已經(jīng)長在 Zabbix 上了新增一套系統(tǒng)意味著要同時維護(hù)兩套監(jiān)控體系的賬號、存儲和告警規(guī)則。6.2 不適合誰反過來如果你的環(huán)境是大量短生命周期容器Nginx 實(shí)例像 Pod 一樣隨時擴(kuò)縮容Zabbix 這種以主機(jī)為單位的管理模型就會變得很吃力。每來一個新實(shí)例都要創(chuàng)建主機(jī)、鏈接模板、維護(hù) Hostname規(guī)模一大這些動作本身就是運(yùn)維負(fù)擔(dān)。另外如果業(yè)務(wù)需要按 URL、按狀態(tài)碼、按 upstream 做細(xì)粒度 SLA 分析單靠 Zabbix 的 Nginx 狀態(tài)頁數(shù)據(jù)也不夠。狀態(tài)頁給的是連接數(shù)和請求總數(shù)拿不到每個接口的響應(yīng)時間分布。這種需求更適合讓 Nginx 輸出 access log 結(jié)構(gòu)化、再送進(jìn)時序數(shù)據(jù)庫或者日志系統(tǒng)或者直接采用具有服務(wù)發(fā)現(xiàn)能力的監(jiān)控方案。這不是說 Zabbix 不能做擴(kuò)展而是說你要先判斷值不值得。任何方案都有維護(hù)成本Zabbix Nginx 監(jiān)控的優(yōu)勢是簡單直接代價是深度有限。認(rèn)清這個邊界比盲目堆監(jiān)控項(xiàng)更重要。6.3 重要的不是某一個命令而是適應(yīng)變化的能力回到標(biāo)題里那半句“和過去有一點(diǎn)不同”。這句話其實(shí)很適合用來概括這類監(jiān)控方案的常態(tài)Nginx 的編譯參數(shù)在變agent 從舊版走向 agent2模板名稱和宏定義在變安裝方式從裸機(jī)走向容器。過兩年你再回頭看今天這篇文章里的具體配置很可能又有出入。但有一點(diǎn)不會變數(shù)據(jù)從 Nginx 到 agent 再到 Server 這條鏈路的邏輯是穩(wěn)定的。你只要掌握了“先 curl 狀態(tài)頁、再 zabbix_get 探活、最后看模板宏”的驗(yàn)證順序無論版本怎么升級你都能在最短時間內(nèi)判斷出問題出在哪一層。這才是比某一條命令更有價值的東西。所以我的長期建議是不要只收藏某個版本的配置片段而是順手把自己的環(huán)境、模板名稱、宏定義、驗(yàn)證命令寫成一個簡短文檔或腳本。下次再遇到 Nginx 監(jiān)控沒數(shù)據(jù)你不是回去翻舊教程而是打開自己的排查清單?;氐介_頭那個案例。我們最后做的事情其實(shí)很簡單把 stub_status 狀態(tài)頁配置好allow 規(guī)則放行 agent 來源 IP再把 Web 端主機(jī)名和 agent Hostname 改成一致。數(shù)據(jù)在第二個更新周期就出現(xiàn)了。整個過程沒有任何懸案只是之前分散在不同教程里的經(jīng)驗(yàn)沒有串成一條完整的鏈路。Nginx 側(cè)會變、Zabbix 會變、模板會變但驗(yàn)證順序不會變。下次再看到最新數(shù)據(jù)為空時不要急著在界面上反復(fù)點(diǎn)先打開一個終端curl 一下狀態(tài)頁很多時候答案早就寫在響應(yīng)里了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
麻豆久久精品亚洲精品88| 色牛牛AV| 中文字幕av片| 国产风韵犹存熟妇三区| 久久老子无码午夜伦不卡| 亚洲欧美国产其他二区| 亚洲人在线| 成人影院永久免费观看网址| 天美传媒婬乱在| 亚洲第一色页夜| 99色在线视频| 乳欲人妻办公室奶水| 欧洲精品在线播放| 超碰91在线| 亚欧无码线免费观看视频| 黄色视频特级毛片| 中文久久一区| 久久精品| 偷拍亚洲视频一区二区三区四区| 75大香蕉| 日本一区二区三区欧美日韩中文字幕| AV九九| 伊人国产视频| 色婷婷香蕉| 99re热有精品视频国产| 久久色精品视频在线| 日日嗷| 青青操综合网| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 国产A v无码专区| 亚洲色图在线视频| 久久婷婷电影网| 欧美日韩m| 97色亚洲| 一区二区三区四区五区高清无码永久视频| 日韩av无码网站| 吻戏激情性巴克| 久久久天堂| 91操碰| 亚洲猛交| 伊人国产视频| 超碰到97情色| 日亚韩精品视频二区三| 国产福利一区二| 极品五月天噜噜| 国产一区二区在线播放| 香蕉免费一区二区三区不读| 超碰91在线| 性色综合网| 婷婷情色综合网| 欧美精品精品一区二区| 天天插天天操天天摸天天射天天看| 波多野结衣被操50分钟免费视频| 超碰久久网| 国产乱码久久久| 嗯嗯啊在线视频| 欧美日韩在线视频网站| 一区,二区,三区视频| 天天操夜夜嗨| 欧美懂色综合网| 青娱乐 成人娱乐在线| 九九久久一区二区伦理| 69少妇一区二区| 欧美日本国产日韩激情视频| 久久久免费一级黄片| 亚洲免费成人在线高清无码视频| 久久香蕉国产线看观看亚洲女人 | 日本成人A片免费看| 天天舔天天| 国产999精品久久久久久| 久久精品视-一级做a爰片性色毛片16美国-中国女与老外在线精品 | 快灬快灬 一下爽蜜桃在线观看| A V少妇特黄三级| 黄色污污污污污污网站| 日韩人体偷拍| 91熟女综合| #NAME?| 久久久久久久少妇| 亚洲精品天天影视综合网 | 性做久久久久久免费观看软件| av九九| 久久这里精品国产99丫e6| 丝袜视频一区二区在线播放国产中文 | 黄页网站成人免费| 日韩免费簧片| 操逼逼福利视频| 免费一级视频特黄色大片| 天天做天天爱| 超碰在线1234区| 久久久一区二区三区四区五区| 欧美18老人禁| 强奸a片网| 亚洲熟女乱色| 天天综合色图| 亚洲第一黄色av网站| 五月天婷婷欧美三区| 10000部十八禁看电影| 国产精品97超碰| 色臀AV| 思思热国产在线视频| 丁香六月啪啪| 欧美96交| 桃花色涩综合影院| 国产丝袜美腿美女麻豆| 亚洲97在线观看| 久久成人午夜精品影院| 99热18这里只有精品| 婷婷久月| 婷婷五月天网| 操逼短片| 国产精品日韩在线一区| 美女高潮视频91| 久久久精精精| 无码国产精品午夜不卡(| 色诱avtt| 岛国免费视频在线| 久久秀这里有精品| 天天久久久久久| 欧美成人AⅤ大片在线观看| 九热大香蕉| 亚洲中文字幕av| 亚洲精品成人激情在线| V A在线| 欧美色亚洲色| 淫荡熟女乱伦网| 欧美啪啪天堂| 天天操夜夜操| 欧美亚洲系列| 九月婷婷久久| 干B网| 午夜男人一级A片7777| 国产丰满少妇久久久精品影院| 啊啊啊啊啊好多水| 能看的AV| 中文字幕一二三| 精品人妻一区二区蜜桃视频 | 欧美成人一级麻豆| AV 少妇 人妻 偷拍| 久久亚洲天堂| 国产一级黄色片在线观看| 精品视频专区| 思思热在线cao| 99爱爱| 韩国一级做A片免费的| 噜噜噜亚洲精品| 精品久久无码午夜福利| 亚洲日韩XXX| 日本一级性爱| 97在线免费看视频| 国产又粗又大硬免费色网视频| 亚洲日韩AV视色| 日韩一级二级三级免费看完整版| 婷婷综合在线观看| 日韩av一级黄片| 久久久久921| A片 AV一级在线播放观看免费| 国产精品一级二级在线| 婷婷综合在线| 久久综合九色综合欧洲98| 妇女视频网站| 人人操人人大香蕉| 少妇熟女一区二区三区| 日本一区二区电影网站| 全免费a敌肛交毛片免费| 中文字幕免费在线观看 | 午夜福利在线合集| 色色色综合网| 伊人网青青| 亚洲色图综合网| 91丨九色丨43老版熟女| 强奸乱伦中文字幕AV| 99热一区二区三区四区| 91熟女综合| 国产真实野战在线视频| 亚洲第一页第二页激情| 成人天天爽| 成人看片网站| 午夜爽爽爽在线观看永久入口姬片| 欧美线天码中字| 成人综合久久精品色婷婷| 狠狠91| 1000午夜黄色| 高清不卡国产| 91狼人| 蜜乳中文字幕a在线| 亚洲宗合网| 日韩欧美麻豆大片| av大香蕉| 曰韩av中文字幕专区| 国产成人欧美精品在线| 蜜桃色院一区久久| 日本 免费 一区二区三区 久久香蕉| 亚洲欧美国产成人综合不卡| 被男人吃奶很爽的毛片| 欧美一区二区| 天天操妹子| 欧美78| 色香色香欲天天天影视综合网| 亚洲欧洲无码bt精品合集| 香蕉免费一区二区三区不读| 炮色五月| 伊人色综合超碰| 婷婷九月| 久热大香蕉| 日韩一性一交一A片俄罗斯| 精品视频一区二区| 综合久久97| 高清视频一区| 夜夜久久| 欧美亚男人的天堂| 久久久999网站| 国产一区二区三区影片| 免费久久精品麻豆一区二区av| 操操逼视频| 91精品国产91久久青草| 美女被啪到深处抽搐视频| 伊人麻豆传媒| 东北熟女91| 色色97爱| 青青草国产欧美非洲黑人| 久久亚洲日韩熟女精品| 国产9熟妇视频网站| 中文字幕熟女人妻丝袜丝| 龙兴卡官方查询| 熟妇激情| 欧色网址| av网站免费看| 天天干天天燥| 欧美日韩大香蕉| 在线播放成人高清免费视频| 八戒午夜福利理论片| 欧美日韩性爱电影在线| 在线岛国新天堂8| 波多野42部激情无码喷潮| 尤物网站91| 欧美在线永久天堂| 小情侣高清国产在线视频| 强歼乱伦资源网| 午夜理论片在线观看免费| 亚洲中文一区二区三区| 九九黄色网| 天无日色综合| 天天日天天屌天天操| 天操老女人| 欧美淫乱视频| 精品国产一区探花在线观看| 交换娇妻呻吟声不停中文字幕| 欧美aaaaaaa| 美女黄频a美女大全免费皮| 99啪啪| 天堂岛av| 国产精品久久久久久久久久久久久久久久久久| 91麻豆一二三区| 超碰色美女| 亚洲天天操| 高潮毛片无遮挡高清免费| 秋霞蝌科网日本一区| 欧美精品999| 亚洲AV免费在线观看| 久久骚少妇| 久久后入制服| 超碰精品国产无码| 婷婷综合网| 九九久久久九九| 在线中文AV| 日韩少妇无码| 日人妻视频91| 91人人看| 久久久亚洲熟妇资源| 亚洲无 码A片在线观看麻豆| 搡老女人911熟妇老熟女| 成人性爱视频在线看| 国产福利精品最新在线| 天美传媒av 在线| 免费超碰97久久| 人妻精品一区一区三区蜜桃91| 啊啊啊在线观看| 熟女人妻一区二区三区| 天天干天天中出av| 久久区| 人人插人人搞人人操| 亚洲色9| 成人国产二区三区在线,男女精品。| 日本爽爽爽爽爽爽免费视频| 激情五月天色色| 小骚逼被操的爽不爽| 精品国产Av无码久久久伦古装| 老司机老司机午夜影院| 动漫片子网站3黄| 欧美综合亚洲| 亚洲砖码砖专无区2023| 色香伊人| 国产精点久久久成人| 天天日日日射| 亚洲图片色图欧美另类| 亚洲蜜臀懂色| 色黄污美女啪啪啪免费网站| 91人人看| 秋霞网—男女啪啪亚洲免费体验区 | 强奸国产在线| 97久久久精品| 国产精品美女久久久久AⅤ国产馆| 久久久久久性爱片| 亚洲熟妇一,二,三期| 亚洲色啪| 中文字幕在线免费观看 | 久久首页| 色九九九综合| 国产无马视频| 丝袜色综合| 日韩亚洲国产视频| 亚洲欧洲无码一区夜| 一级二级在线观看| 中文高清一区二区的| 国产精品成人午夜福利| 欧美拳交在线播放| 蜜臀在线视频| 99精品网站| 精品人妻一区二区三区四区石在线| 日本亚洲vr欧美不卡高清专区| 天天操天天舔| 特级大荫道BBwBBwBBW| 国产精品成人AV片免费看网站| AV九九| 久久这里只| 午夜精品久久久久久久男人的天堂| 97视频免费播放| 97午夜剧场日韩| 国产精品人妻无码久久久老鸭窝| 香蕉一区二区三区在线视频| а√天堂资源官网在线资源| 五十路人妻在线| 色综合久久88色综合久久天天| 亚洲骚男同com| 99久久久久| 91老女人| 97就爱干| 色999人与兽| 肏逼视频日本| 天天躁狠狠躁av| 婷色五月| 国产精品白丝在线播放 | 亚洲97资源| 亚州精人品大香蕉| 亚洲精品乱码线路中文字幕| 青青草女人天天干| 少妇毛片久久| 亚洲少妇中文字幕网址| 日韩无码人妻| 怡红院亚洲怡春院av| 久久欧美按摩999| www..com操老师| 蜜臀99久久国产| 五月婷婷hd| 国产做?爰片久久毛片?片美国| 91老女人| 九热超碰| 日本视频在线中文字幕| 亚洲吊色| 精品国产少妇高潮视频| 国产精品自在自拍视频| 国产黄色影片在线观看| 亚洲激情片| 人妻美腿丝袜日韩| 青娱乐999| 色欧洲97| 欧美在线视频播放| 91色黑人少妇| 91狠婷| 亚洲一区二区三区欧美日韩| 丰满人妻一区二区三区免费| 啊啊啊啊啊啊啊啊啊在线观看| 69人妻精品一区二区绯色| 免费黄色片。| 清纯唯美第一页| 男人 天堂 日 亚洲| 午夜男人天堂| 开心激情站| 在线色导航| 91超碰在线| 97久久综合网| 国产综合久| 久久久性少妇| 蜜臀99久| 国产精品自在自拍视频| 亚洲在线网站| 色老汉玖玖爱| 久久久久久久97| 天天在线91| 蜜臀无码一区二区| 日韩性爱啪啪视频| 麻豆尤物视频网| 东京热大香焦| 亚洲熟女偷拍在线观看| 国产熟女二区| 国产精品大屁股999| 大香蕉综合在线| 日韩精品人妻中文字幕久久久| 色色色色色色色色色色色色色色综合| 亚洲综合在线视频| 精品少妇后入一区二区三区四区人妻巨乳 | 亚洲开心网| 欧美色宗合| 日韩激情毛片一级久久久| 成人无遮挡毛片免费看| 欧美78| 伊人国产视频| 91美女视频电影| 国产三级中文字幕粉嫩 | 99精品无码| 亚洲情色五月天 | 亚洲国产欧美一区二区潘金莲| 成人97人人超碰人人| 亚洲精品无码久久AV| 无码精品蜜桃一区二区三区ww| 97国产成人精品免费视频| 天天躁日日躁AAAXX| 偷拍伦理视频| 超碰碰激情97+久| av橘色网站| 国产一区二区二区按摩精品啪视频| 中文字幕精品探花视频| 思思热免费视频观看| 91色欧美| 成全动漫视频观看免费下载| 3P乱轮视频| 亚洲五月天激情| 亚洲AO在线| 欧美日韩美女精品久草一区二区三区| 亚洲天堂资源在线| 情趣丝袜无码操逼视频| 亚洲日本韩国在线| 久久鲁夜| 羞涩视频| 婷婷色播婷婷| 国产精品国产| 综合久久久久久久久91| 伊人99热| 97av,com| 日韩免费高清大片在线| 中文字幕一区二区三区四五区| 爱爱动态60秒| 久久露脸国产老熟女| 久草资源在线视频官方总站日韩丝袜美腿 | 综合网亚| 蜜臀久久99精品久久久久久酒店| 美女午夜福利免费视频| 二对二中文字幕。| 三久久久四久久久久| 国产亚洲日本精品在线| 中文字幕第23区| 十八禁啪啪视频| 精品久热| 欧美欧美少妇| 操逼网站视频漫画国产| 精品一二三区女同| 17c在线成人免费A片观看| 91 手机在线播放 绯色| 97亚洲综合在线| 高跟丝袜AV专区国产| 97这里都是精品| 97色综合中文网| 亚洲色欲天天人妻无码系列专区| 无毛精品| 午夜寂寞欧美| 国产日韩精品人妻久久久久色欲网站| 色五91| 麻豆亚洲AV成人无码久久精品| 国产亚洲禁久一区二区 | 影音先锋日本乱伦| 欧洲免费一区二| 久久97| 色精品极品| www国产精品| 狠狠综合| 亚洲男人的天堂va亚洲男人社| 日韩无码专区| 亚洲91色| 成人日本精品九区| 亚洲欧洲中文日韩女优乱码| 麻豆性爱视频在线播放| 人妻啪| 欧美91精彩| 日本精品无码三级网站| 久久精品91| 色小视频蜜乳| 69一区二区三区| 精品人妻一区二区三区-国产| 色综合av综合久久| 磁力99AV| 333kkkk·亚洲com久久| 日韩本不卡视频在线观看| 日本97久久| 欧美精品自慰系列寂寞少妇| 中国少妇啪啪视频| 中日无幕一二三四区| 狠狠婷婷亚洲中文综合久久| 精彩国产视频播放1区2区| 亚洲啪AⅤ永久无码| 日韩精品大香蕉伊人在线| 国产高清精品福利| 亚洲 欧美 色图| 激情露脸爱| 2021久久国产综合精品青草| 天堂性色| 美骚妇av高清在线| 成人短视频在线观看| 久久久新亚洲AV| 亚洲情色一区二区三区| 色色五月婷| 欧美成年人性爱视频免费观看| 久久精品国产99国产精品亚洲| 多乙久久久久久| 后入国产| 亚洲天堂资源| 男人的天堂在线2| 久久av成人无码免费| 日本大香蕉综合网| 国产91专区| 日本精品网站在线中文| 黄色一区三区| 日韩影片中文字幕一区二区三区| aaaa少妇高潮大片| 九九热AV| 高清无码学生妹高潮| 亚洲男人的天堂V| 图片区小说区| 精品国产一区二区三区香蕉欧美| 另类欧美色| 97超碰在线资源网站| 蜜臀少妇一区二区| 日本www操操操| 热思思免费视频| 正宗无毛一线天嫩逼| 日逼五月天| 人妻久久久久久久久久久久久久久 | 久久超碰日韩精品| 亚洲综合69| 9999伦理视频| 好吊色在线观看| 女人爽到高潮潮喷18禁网站| 成人av影院在线观看| 99中文字幕| 四虎av在线| 日韩av情韩国爱禁区av一区二区| 亚欧中文字幕在线视频| 日本不卡码黄色| 黄页大片在线观看| 少妇超碰在线| 天堂精品在线| 五月激情综合网| 婬女免费一二三区A片| 秋霞久久亚洲精品成人| 自拍偷拍国产欧美日韩韩| 久久精品—区二区三区内射| 天堂亚洲精品| 色亚洲欧美| 美女天天干| 舔舔啊| 9997se| 欧美激情亚洲情色| 蜜桃臀一区二区aV | 久久av成人无码免费| 男人的天堂午夜av| 天天操夜夜嗨| 强奸乱伦麻豆| 亚洲AV无码成人精品久久| 亚洲一卡2卡3卡4卡乱码网站 | 五月天久久综合网| 欧 美 自 拍 偷 拍| 嫩草美女久久| 亚洲小电影免费涩涩成人在线高清| 日韩精品字幕| 色在线亚洲视频www| 国产中文大片资源中文字幕| 自拍偷拍 高清无码| 嫩草影院在线观看精品| 亚洲强奸乱伦影视网| 亚洲欧美日韩夜夜| 婷婷在线播放| 日韩天堂av电影在线观看| 欧美激情超碰777| 夜夜人妻爽| 性感美女啊啊啊在线| yazhouzaixian| 超碰97男女| 综合国产97| 热久日综合| 人妻大香蕉| 999久久久九九九九| 12一15性XXXX粉嫩国产| 天天懆天天日| 91粉嫩萝控精品福利网站_精品影音先锋国 | 中文字幕丰满人妻日本| 7777奇米影视久久| 一区二区三区欧美激情| 人妻久热在线| 久久久久久久久久久久欧美日| 久久精品操| 亚洲自拍偷拍视频在线| 亚洲国产精品无码AV在线| 久热9| 欧美性暴力猛交XXXX| 亚洲天天精品| 人人操,人人液| h无码动漫在线观看| 91校园春色长篇| 小明看看网址| 97视频在线播放| h无码动漫在线观看| 污啪啪啪视频| 欧美成人国产精品| 精品国产三级av韩国在线| 日本国产高清色www视频在线| 神马久久久久久久久久久久| 岛国大片在线观看网站入口| 日韩无限资源| 99re在线| 色欧美天天| 激情五月丁香五月| 黄片qw| 青娱乐淫乱1314| 亚洲第一男人天堂| 一卡二卡三卡| 四色永久成人网站| 天天狂操夜夜狂日| 青青草啪啪网| 欧美不卡在线美女| 在线观看午夜婷婷久久久久清性观看| 玖玖婷婷五月天| 夜夜草我| 人人妻人人操人人乐| 国产成人五月天丁香花| 久久久一区二区三区四曲免费听| 超碰在线欧美性爱激情| 欧美亚洲国内自拍| 国产高清自拍| 啊啊啊轻点在线观看| 国产少妇与亚洲av| 免费看片黄| 成人精品无码| 青女偷拍网| 神马久久久久久久久久久久| 九九国产| 9色在线| 亚洲一区二区麻豆影院| 无码九九| 亚洲一区二区三区欧美日韩| 亚州高清色综合| 狠狠中文字幕| 9999九九九久久久| 黄色AAAAA欧美| 久久久专区| 亚洲天堂AV在线播放| 大香蕉国产中文自拍| 蜜臀久久99精品久久久久| **一级毛片国产| 国产精品对白自产拍| 国产视频一区二区免费| 亚州精品人妻一二三区| 黄色av一区二区在线| 骚熟女AV网| 日韩成人综合网| 九九九九精品视频| 欧美色棕合| 久久精品一区二区三区四区五区| 欧美制服网站美腿丝袜| 国产品精品自在在线午夜免费| 亚洲天天艹| 亚洲 中文字幕 精品| 日日黄色三级网站| 日韩 欧美 另类 人妻| 中文字幕欧美日本乱码一线二线 | 国产性刺激| 午夜福利无毒不卡| 好爽要喷了| 婷婷中文字幕| 国产成久久综合片| 亚洲熟女偷拍在线观看| 无码自拍SM| 啊啊啊好多水| 9精品久久| 一区二区娱乐网站| 亚洲欧美综合| 天天躁狠狠躁av| 激情久久久| 强奸抽插av| yazhouzaixian| 大香蕉97久久| 亚洲欧美日韩二区视频| 东京热,男人的天堂| 江都AV在线| 午夜理论片在线观看免费| 天天日夜干| 久久久久密臀一区二区| 九九99精品视频在线观看| 成人国产视频在线观看| 色妇91| 日本在线不卡123| 51久久夜色精品国产麻豆| 中出在线视频| 精品久久久久瑟瑟| 亚洲av影院在线观看| 99人妻| 一区二区三区在线日韩影院观看| 999日韩中文精品观看视频。| 国产一区二区三区白丝| 九九九九热只有精品| 伊人网在线观看| 亚洲欧美中文日韩视频中国语| 91天天| 久久国产999| 96久久科窝| 老司机射| 以及麻豆国产入口在线观看免费| 超碰人人干天天射| 99日免费视频中文字幕| 亚洲最大无码中文字幕网站| 无码高清少妇久久| 亚洲自拍97| 中出在线视频| 精品美女在线视频| 婷婷亚洲中文字幕在线| 99re国产中文字幕| 伊人五月天激情| 亚洲欧美国产中文视频| 亚洲综合网91| 人妻激情视频| 欧美偷偷网| 天天天天做夜夜夜夜做| 午夜性| 性色乱AV一区二区| 97爱爱爱综合| 色色五月天婷婷| 欧美精品999| 麻豆国产免费影片| 色综合久| 99热只有这里有精品| 亚洲精品无码久久AV| 99人妻碰碰碰久久久久禁片| 好爽免费视频| 青青青青操国内视频在线| 中文字幕免费在线观看| 欧美青青草视频| 激情婷婷丁香| 人人操人人精品影片| 俺也射| 亚洲少妇免费视频\| 91麻豆一二三区| 国产精品久久久777| 91亚洲欧美色图| 富二代亚洲精品99| 亚洲人在线| 亚洲情色图片区| 欧美日韩亚洲五月天婷婷| 欧美老妇女内射网址| 亚洲欧洲无码97久久精品| 啊啊啊啊操死我了| 学生妹天天看| 18禁久久| 丰满人妻一区二区三区免费| 外国免费性情大片| 久艹日日日| 极品综合| 国产美女mm131爽爽爽爽| 国产精品无套内谢| 亚洲色综合| 中文字幕国产精品1区| 天天日少妇逼AV| 久久精品视-一级做a爰片性色毛片16美国-中国女与老外在线精品 | 热思思免费视频| 无码一区二区精品视频久久久春药| 精品视频久久区| 怡春院久久| 四虎国产精品永久在线囯在线| 黄色香蕉视频网站一区| 操逼www.| 色哟哟511老熟女| 国产欧美日韩在线不卡第一页| 天天弄天天操| 九九热这里只有在线精品视 伊人草 成人菠萝蜜视频在线观看 | 亚洲 欧美 另类 日韩 人妻一区| 日韩人妻精品| 国产又粗又长视频| 日本成熟少妇A∨网站| 国产精品亚洲天堂网址| 九九久久99| 九九热免费国产视频婷婷伊人五月 | 精品人体无圣光凹凸| 五月丁香综合啪啪| 欧美 传媒 麻豆 日韩 偷拍| 一区二区三区色综合| 91欧美网| 3d成人精品一区二区| 久久久九97| 欧美少妇色综合| 91亚洲网| 亚洲aV无码成人在线观看| 欧美熟妇精品黑人巨大一二三区| Aa东京男人的天堂| 亚洲一区在线观看欧洲| 日本岛国黄色网址| 久久 亚洲 日韩 人妻| 午夜一区| 免费在线观看国内色片网站网址| 91 亚洲 欧洲| 五月天AV资源| 国产福利在线视频网站| 九九九久千久久激情蜜桃在线看 | 欧州一区二区三区四区| 国产精品99久久久www| www.99热在线只有精品| 啊啊啊无码| 在线观看国产黄色| 艳尻美人妻| 一区二区乱码福利| 天天干天天拍| 无卡一区=区| 亚洲天堂中文字| 看黑丝美女操逼青青网站| 日本男人天堂| 亚洲天堂无码| 97av,com| 精品人体无圣光凹凸| 色噜噜人妻丝袜AV资源| 欧美 亚洲 第一页| 狠狠干综合| 骚货操死你| 日韩乱插| 五十路人妻在线| 视频国产精品未满十八禁止在线观看| av情色影音| 久久永久无码人妻视频| 99热这里只有精品9| 日日嗷| 亚洲综合中文字幕有码| 东京热不卡视频| 另类小说综合网| 91l欧美在线| 国产av强奸美女| 91日产欧美| 国产欧美一级在线观看| 天天摸天天舔天天操| 一区二区三区黄色片a| 蜜屁Av| 日韩欧美中文| 中文字幕日韩情色| 97色色婷婷| 熟女少妇视频| 国产按摩一区二区三区| 色欧洲| 亚洲精品819| 死我十八禁| 久久久九九网站| 天天影视综合色| 99在线观看| 欧美色就是色| 青娱乐亚洲热| 亚洲av无码成电影在线播放| 久久国产对白激情浪潮| 蜜乳AV.COM| 啊啊啊久久久视频| 人人 操人人 操人人| 激情小说亚洲视频| 超碰在线99| 色综91| 亚洲自拍欧美国产首页网曝| 久久久久久久伊人精品| 青青草狠狠撸| 五月天婷婷久久| 午夜超碰| 丝袜综合| 日本五十路熟女一区二区| 成人九九| 国内黄色精品| 国产专区第一页| 人伦四五区| 荡小穴在线观看| 免费看黄视频亚洲网站| 日韩少妇丰满亚洲| 日韩 欧美 另类 人妻| 亚洲黄色电影| 99re不伦| 99日精品欧美国产| 啊啊啊啊网站| 熟妇视频一区二区三区在线观看| 乱性AV| 久久久久国产精品人妻aⅴ天堂| 丁香五月天堂网| 亚洲欧洲自拍图片专区满春格| 中文子幕一二三| 夜夜夜久久| 东北丰满熟女国产一区 | 91九九| 人妻免费观看| 亚洲宅男天堂| 蜜乳AV.COM| 97在线播放 | 三级特黄60分钟播放| 一本色道久久综合精品婷婷| 国产成人AV麻豆| 嫖老熟女A片一二三区| 精品视频在线观看| 无码九九| 爱啪精品一区| 婷婷五月天激情网| 免费黄色片。| 97资源久久| 5252色欧美在线男人的天堂| 啊啊啊不要好爽日韩无码一区| 午夜福利免费精品视频| 国产Av超碰| 色图综合网| 老鸭窝在线视频播放| 亚洲欧美精品久| 97久久久久久久精| 久久免费精彩视频| 国产伦乱91| 午夜乱轮操逼视频免费看| 限制级中的三级片中的黑粗大屌屌日人妻熟女 | 伊人久久大香蕉线AV五月天| 久久久A∨| 手机看片1024你懂的国产| 五月丁香六月综合缴清无码| 天美传媒AV在线播放| 亚洲天堂少妇| 成人在线午夜视频一区| 国模不卡一本二本三电影| 亚洲精品乱码久久久久久蜜桃麻豆| 久久久精品91八戒| 999久久久免费精品国产牛牛| 日韩精品亚洲一二三| 丰满欧美放荡少妇在线| 风月影院男女十八禁| 一区| 中文字幕88av在线| 英伦大奶子熟妇吊带| 国产不卡片| 青青欧美在线| 91N欧美| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 欧洲亚洲综合| 男人的天堂无码| 99热国产| 亚洲AV无码乱码| 人人弄人人摸| 国产第12页| 国产福利视频精品视频| 一级AV性爱| 一二三四视频中文字幕在线看| 国产呦精品系列在线观看| WWW.操逼.COM| 香港澳门日本三级网站| 操人人| 久草免费福利在线播放| 免费无码国产精品v片在线观看| 宅男影院久久久,99| 日欧亚洲二三区大片不卡| 久久亚洲AV无码专区首页| 操操逼视频| 欧美伊人久久综合网| 中文字幕一区电影在线观看| 天天视频综合在线观看视频| 久久夜黄色无码A级大片| 成人七区| 亚洲免费人妻在| 激情五月天色色| 中文字幕一区二区三区蜜臀| 91偷拍欧美亚洲| 欧美性生活内射| 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 蜜桃视频啊啊啊啊| 日韩精品大香蕉伊人在线| 一区二区无码视频| 97在线观看免费视频| 欧美性爱日韩高清| 777奇米影视777四色| 91日韩在线| 高清不卡国产| 九九九九九九九| 在线观看中文字幕| 欧亚日韩中文在线| 天天激情综合站| 91九色精品熟女内射| 精品熟女一区=区三区| 人妻少妇精品久久久| 久久欧美1卡2卡3| 国产乱码精品久久久久久| 99热在线只有精品| 日韩熟女无码| 久久HD| 日韩 人妻 精品| 欧美青青草视频| 日韩精品资源专区二区| 天天干天天狼在线视频| 欧美熟妇视频 | 免费人成在线观看网站品爱网| 色五月丁香五月| 97人人夜夜精品视频| 精品国产乱码久久久久久口爆网站| 天天看综合网| 亚洲九九爱| 国产精品视频内谢女人| 人妻精品视频一区二区| 1区2区3区中文字幕日韩| 婷婷五月天色网| 人人么人人操| 色99视频| 久久久久网站-538在线视频-欧美永久乱码| 啪啪啪综合| 亚洲女毛多水多21P| 亚洲aw毛茸茸在线| 欧美宗合色| 91在线无码精品秘 软件| 欧美成不卡网| 东京热毛片177b2viP| 午夜精品探花| 大香蕉啪啪啪啪在线| 国产女同在线观看视频| 国内外色色色色色成人视频| 国产第二页| 免费a级毛片av无码久久精品中文字幕| 国产精品亚洲美女久久久久| 97色论| 男啪女色黄无遮挡免费观看| 欧美久热| 久久久久96| 91高清无码下载| 久神马| 国产精品嫩草影院午夜两性| 91久久精品国产| 国产91 丝袜在线播放00-百度| 国产精品视频白浆免费| 少妇色综合| h4610国产人妻| 欧美一二在线| 欧美熟爽综合| 一二三四区电影| 人妻偷拍一区二区三区| 日韩欧美麻豆大片| 97久久国产精品女不卡| av资源在线播放天堂| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师 | 欧美国产有色电影| 在线人成亚洲视频免费观看| 超碰性爱97| 成人性爱AV在线免费观看| 国产精品熟女AV中文字幕在线播放| 亚洲色人| 97超碰69| 亚洲精品久久久久毛片A片拉屎| 玖玖人人爱| 日本成熟少妇A∨网站| 在线国产探花| 色网亚洲人| 激情五月综合网| 亚洲无992tv| 蜜桃传媒一区二区亚洲| 男女啪啪网站免费视频| 黄色高清久久无码依人| 欧美人人操人人插| 射丝袜大香蕉| 怡红院一区二区熟女人妻| 午夜120视频在线观看| 黑人干亚洲| 丁香五月天社区| 啊啊啊好舒服视频| 亚州色交| 国产福利一区二| 91丝袜激情在线| 中文字幕在线观看永久| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 伦激情人妻另类人妻| 国产久久男人天堂| 日操粉逼逼| 中文字幕三四五区| 精品无吗久久| 超碰免费97| 免费的黄片有限公司| 四虎在线免费视频| 五月天色五月| 家庭乱伦国产精品| 四虎免费视频| 欧美亚性天堂| 黄色大片免费在线| 91模特在线观看| 亚洲国产剧情少妇激情| 国产高清MV操逼视频| 自拍六区| 久久久久一本一区二区青青蜜月| 国产三级中文有码在线视频| 亚洲同性aV综合| 亚洲一区二区专区-国产丝袜精品丝袜-成人AV| 强奸乱伦日韩AV| 2017天天操| 级品肉射| 亚洲图片欧美91N| 日韩精品1区2区中文字幕| 人人妻人人爽一区二区三区| 久久一二三四不卡 | 亚洲成人在线高清| 欧美亚洲中文字幕| 久草在| 欧美熟女操屄| 乱伦熟女专区| 91制服丝袜中文字幕| 久污| 夜夜爽妓女| 欧美日韩999| 日韩在线一区高清在线| 激情婷婷丁香网| 国产成人AV麻豆| 99热亚洲天堂| 亚洲午夜av| 亚洲囯产精品女人久久久| 91痴汉| 学生妹天天看| 丝袜无码a片| av中文字幕在线熟女| 91GD.COM| 日韩免费看黄片| 亚洲一区日韩精品| 97干在线视频| 精品免费成人久久| 啊啊啊不要嗯嗯在线观看| 91在线视频国产网站| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | 91在线/欧洲| 九九九九欧美| 一区二区三区四区色图| 97国产高清视频在线观看| 操东北女人| 天天做天天爽| 亚洲色图大香| 色鬼在线综合| 日韩电影天堂视频一区二区| 青青草字幕AV| 亚洲区小说| 婷婷久月| 亚洲无码精品AV久久久| 亚洲精品国产无码高清| 色久桃花影院在线观看| 日韩少妇一区二区三区| 免费看日本操逼视频| 亚洲男人天堂Av| 神马午夜久久久| 综合天天。| 大香蕉中文201| 国产精品网站免费| 九九色热| 国产精品一区av在线| 中文精品一区二去| 亚洲一区二区三区中文字幕| 中文字幕精品一区欧美| 俺去啦俺来也久久综合| 国产成人超碰在线| 久久久久久久伊人精品| 人人 操人人 操人人| 无码精品久久| 在线欧美69V免费观看视频|