日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上 上個月幫同事排查一套 Zabbix 監(jiān)控 Nginx 數(shù)據(jù)一直為空的問題。一開始我們都把注意力放在 Zabbix Web 端反復(fù)檢查模板、主機(jī)、宏折騰了一上午。最后才發(fā)現(xiàn)真正斷掉的環(huán)節(jié)是 Nginx 的 stub_status 狀態(tài)頁根本沒有暴露出來agent 自然也就拿不到任何數(shù)據(jù)。更讓我意外的是同事的配置是從一篇兩三年前的教程里抄來的那篇教程里的模板名稱、agent 類型和現(xiàn)在的環(huán)境已經(jīng)對不上。這不是個案。Zabbix 監(jiān)控 Nginx 這件事最常見的坑不是 Zabbix 不會裝而是安裝配置流程里塞滿了舊資料。所以下面我不打算只給一個固定命令序列而是想把 Zabbix 監(jiān)控 Nginx 的鏈路重新拆一遍Nginx 怎么暴露狀態(tài)agent 怎么讀到數(shù)據(jù)模板怎么匹配以及當(dāng)你拿到一臺新機(jī)器時應(yīng)該按什么順序驗(yàn)證。核心判斷只有一句——真正決定這套監(jiān)控能不能跑通的往往不是 Zabbix 本身而是 Nginx 狀態(tài)頁、agent 采集和模板匹配這三個環(huán)節(jié)有沒有全部連上。1. 先想清楚Zabbix 監(jiān)控 Nginx 到底在監(jiān)控什么1.1 表面是進(jìn)程存活本質(zhì)是連接和請求很多入門教程會把 Zabbix 監(jiān)控 Nginx 簡單理解成“Nginx 掛了就報(bào)警”。這個理解不算錯但太單薄。Nginx 是應(yīng)用入口它的價值不在于進(jìn)程起沒起來而在于它當(dāng)前扛了多少連接、請求處理得是否順暢、有沒有異常堆積。Zabbix 之所以能監(jiān)控 Nginx核心不是直接讀進(jìn)程狀態(tài)而是通過 Nginx 自身的狀態(tài)接口或模塊拿到一組結(jié)構(gòu)化指標(biāo)。最常見的數(shù)據(jù)源是 Nginx 官方自帶的 stub_status 模塊。打開狀態(tài)頁后你會看到類似這樣的一小段文本Active connections: 3 server accepts handled requests 12 12 15 Reading: 0 Writing: 1 Waiting: 2這幾個數(shù)字的含義值得記住Active connections當(dāng)前活躍連接數(shù)。acceptsNginx 啟動以來成功接受的連接總數(shù)。handled成功處理的連接總數(shù)。正常情況下 accepts 和 handled 應(yīng)該接近。requests總請求數(shù)。Reading / Writing / Waiting分別表示正在讀請求頭、正在寫響應(yīng)、以及空閑 keep-alive 連接的數(shù)量。這些指標(biāo)能幫你看清什么比如 Reading 長時間很高說明請求堆積在讀取階段背后可能是客戶端沒有把請求發(fā)完整Waiting 大量存在不是壞事只能說明 keep-alive 連接占著資源accepts 和 handled 差距持續(xù)增大則可能說明有連接在中間環(huán)節(jié)被丟掉。1.2 為什么很多“監(jiān)控沒數(shù)據(jù)”其實(shí)和 Zabbix 無關(guān)排查過幾次就會發(fā)現(xiàn)Zabbix 監(jiān)控 Nginx 沒數(shù)據(jù)絕大多數(shù)原因不在 Zabbix要么是 Nginx 狀態(tài)頁沒開啟要么是狀態(tài)頁返回的是 HTML 而不是純文本要么是 agent 訪問不到狀態(tài)頁要么是模板里的宏路徑和實(shí)際路徑不一致。Zabbix 本身只是在按固定周期向 agent 要數(shù)據(jù)agent 再去請求 Nginx 狀態(tài)頁。這一條數(shù)據(jù)鏈上有任何一個環(huán)節(jié)斷了儀表盤就永遠(yuǎn)是空的。所以我建議把這條鏈路拆成三段來理解Nginx 負(fù)責(zé)提供數(shù)據(jù)agent 負(fù)責(zé)搬運(yùn)數(shù)據(jù)Zabbix 負(fù)責(zé)展示和告警。后兩段的問題通常都有日志可查反而是第一段最容易被人忽略。很多“監(jiān)控沒數(shù)據(jù)”的案例其實(shí)和你選的模板、版本的關(guān)聯(lián)沒有想象中那么大問題往往出在數(shù)據(jù)源這一層。2. Nginx 側(cè)的狀態(tài)頁配置先把數(shù)據(jù)源打開2.1 先確認(rèn)模塊再改配置順序不要反Nginx 狀態(tài)頁依賴 http_stub_status_module 這個模塊。問題在于不是所有 Nginx 環(huán)境都默認(rèn)包含它。源碼編譯安裝時如果沒有帶 --with-http_stub_status_module后面想加模塊就得重新編譯發(fā)行版?zhèn)}庫里的 nginx 通常已經(jīng)包含這個模塊但不同發(fā)行版、不同倉庫之間也可能有差異容器鏡像則更不一定一些精簡鏡像會把用不到的模塊裁掉。所以第一步是確認(rèn)模塊存在。常見做法是查看編譯參數(shù)nginx -V 21 | tr \n | grep stub_status如果輸出里能看到 http_stub_status_module說明模塊沒問題。如果什么都沒有就不要繼續(xù)往下配狀態(tài)頁了先解決模塊問題。否則你配置再正確curl 訪問時也只能看到 404。注意有些系統(tǒng)里 nginx 不在 PATH 中可能需要寫全路徑比如/usr/local/nginx/sbin/nginx -V或者先執(zhí)行which nginx確認(rèn)一下。2.2 一個穩(wěn)妥的 stub_status 配置示例確認(rèn)模塊存在后再修改 Nginx 配置。常見的做法是在一個 server 塊里加一個 location只讓狀態(tài)頁從指定路徑訪問server { listen 80; server_name _; location /nginx_status { stub_status; allow 127.0.0.1; allow 192.168.10.0/24; deny all; } }這里有幾個細(xì)節(jié)要說明。location /nginx_status是精確匹配避免掩蓋其他路徑規(guī)則stub_status;是常見寫法如果你看到的舊教程里寫的是stub_status on;通常也能兼容但更推薦按當(dāng)前版本的標(biāo)準(zhǔn)寫法來allow 和 deny 用來限制來源 IP避免狀態(tài)頁暴露到公網(wǎng)。雖然狀態(tài)頁內(nèi)容看起來不敏感但泄露給外界等于給攻擊者多一個信息采集入口沒有理由不做限制。寫完配置后先檢查配置再重載nginx -t nginx -s reload # 如果使用 systemd 管理也可以寫成 systemctl reload nginx然后用 curl 驗(yàn)證curl -s http://127.0.0.1/nginx_status如果能看到開頭那段純文本說明 Nginx 側(cè)已經(jīng)通了。注意curl 的來源 IP 要和 allow 規(guī)則匹配否則你會看到 403。2.3 容器化和非默認(rèn)端口環(huán)境的特殊點(diǎn)如果你的 Nginx 跑在容器里情況會稍微復(fù)雜一點(diǎn)。agent 要么和 Nginx 在同一個容器內(nèi)要么通過容器 IP 或映射端口訪問狀態(tài)頁。容器內(nèi)的 Nginx 如果只監(jiān)聽了容器內(nèi)部端口agent 在宿主機(jī)上直接 curl 127.0.0.1 是拿不到響應(yīng)的。這類問題用 curl 驗(yàn)證時最容易暴露但很多人會誤以為是自己配置寫錯了。另外狀態(tài)頁不一定只能放在 80 端口。有的環(huán)境為了安全和便于管理會把狀態(tài)頁放在 8080 或單獨(dú)一個 server 塊里。這樣的設(shè)計(jì)沒問題但模板里的宏就要跟著改。這里的重點(diǎn)是先想清楚 agent 要從哪個地址訪問 Nginx然后保證這個地址上的 TCP 連通性和 ACL 都允許。不要只在 Zabbix 里把宏改來改去主機(jī)上卻訪問不到。我在很多環(huán)境里見過一種最隱蔽的錯誤狀態(tài)頁本身配置正確但 allow 規(guī)則只放行了 127.0.0.1agent 卻通過內(nèi)網(wǎng) IP 去訪問狀態(tài)頁。agent 請求時Nginx 看到的來源 IP 是內(nèi)網(wǎng)地址命中 deny all于是返回 403監(jiān)控項(xiàng)自然拿不到數(shù)據(jù)。所以配置 allow 時要想著 agent 會從哪個 IP 過來而不是只寫 127.0.0.1。3. Zabbix agent 這一層不是安裝了就行3.1 配置 Server 地址和 Hostname一致性是第一原則Nginx 狀態(tài)頁通了之后才輪到 agent。agent 安裝本身不復(fù)雜麻煩的是配置。以最常見的 zabbix-agent 為例配置文件里幾個關(guān)鍵參數(shù)一定要理解Server192.168.10.20 ServerActive192.168.10.20 Hostnameweb01Server 和 ServerActive 不是一回事。Server 是被動模式下允許從 Zabbix Server 拉取 item 的地址白名單ServerActive 是主動模式下 agent 向哪個 Zabbix Server 或 Proxy 上報(bào)數(shù)據(jù)的地址。如果你只配置了 Serveragent 就會等 Server 來問如果你用了主動模式ServerActive 也要填。很多舊教程只寫一個值換到新環(huán)境就出問題。比這更容易出錯的是 Hostname。Zabbix Web 端添加主機(jī)時填的主機(jī)名必須和 agent 配置里的 Hostname 保持一致。如果 Web 端寫的是 web01agent 里配的是 nginx-web-1那么即使在 Zabbix 里能看到主機(jī)監(jiān)控項(xiàng)也始終是 no data。在新版本 agent 里你還會看到HostnameItemsystem.hostname這樣的配置意思是讓 agent 用系統(tǒng)本身的 hostname 作為上報(bào)名稱。這個機(jī)制可以避免手工維護(hù) Hostname但前提是系統(tǒng) hostname 必須和 Zabbix Web 里的主機(jī)名一致。所以不管用哪種方式原則都是同一個兩邊名字要對上。3.2 agent 與 agent2模板和 key 可能不一樣這里要說一個“和過去不一樣”比較明顯的點(diǎn)現(xiàn)在 Zabbix 官方推薦使用 Zabbix agent 2也就是 agent2。agent2 不僅在采集能力上更豐富還支持一些內(nèi)置插件但對應(yīng)的模板、監(jiān)控項(xiàng) key 和舊 agent 不完全一樣。在 Zabbix Web 里搜索 Nginx 時你可能會看到多個模板有些名字類似 Nginx by HTTP有些類似 Nginx by Zabbix agent 2。如果你在主機(jī)上裝的是 agent2卻鏈接了舊 agent 版本的模板可能會出現(xiàn) unsupported item。反過來也一樣。所以我的建議是在鏈接模板之前先打開模板里的監(jiān)控項(xiàng)預(yù)覽看它使用的采集類型是 Zabbix agent、HTTP agent還是依賴 agent2 插件。確認(rèn)它跟你實(shí)際安裝的 agent 類型對得上再鏈接。這一步只要花兩分鐘卻可以省掉后面一晚上的排查時間。agent 和 agent2 的服務(wù)名也不一樣常見的有 zabbix-agent、zabbix-agent2系統(tǒng)服務(wù)名可能是 zabbix-agentd.service 或 zabbix-agent2.service。啟動服務(wù)后用systemctl status看一下是否 active再看一眼日志路徑常見的是/var/log/zabbix/下面。出現(xiàn)問題時日志里通常直接會告訴你 key 不支持還是連接失敗。3.3 用 zabbix_get 快速驗(yàn)證采集鏈路在 Web 端排查前可以先在 Zabbix Server 上用 zabbix_get 做一次最直接的驗(yàn)證確認(rèn) agent 是否正常工作zabbix_get -s 192.168.10.11 -k agent.ping如果返回 1說明 Server 能連上 agent。如果返回值不是 1就別急著去 Web 端看模板先解決網(wǎng)絡(luò)、端口和 Hostname 問題。agent.ping 是通用探活 key驗(yàn)證通過后再去模板里找到你想測的監(jiān)控項(xiàng) key比如和 Nginx 狀態(tài)頁相關(guān)的 key繼續(xù)用 zabbix_get 測試。不同版本、不同模板的 key 名稱會有差異所以這里不列具體 key但思路是一樣的先用 curl 確認(rèn)狀態(tài)頁存在再用 zabbix_get 確認(rèn) agent 能取到值最后才去 Web 端看圖表。鏈路從底層往上逐層打通比在界面上猜效率高得多。4. 在 Zabbix Web 端鏈接模板別被舊截圖帶偏4.1 模板名稱已經(jīng)變過好幾輪Zabbix 的模板策略在過去幾年變化很大。這次部署里我在模板列表里搜索 nginx出來的已經(jīng)不是早期教程里那張截圖上的名字了。官方模板按采集方式做了拆分有的走 HTTP agent有的走 Zabbix agent有的專門適配 agent2。這本身是好事但如果你照著一個兩三年前的教程去選模板很可能選錯。我的建議是以當(dāng)前 Zabbix 版本實(shí)際加載的模板列表為準(zhǔn)不要憑記憶點(diǎn)。鏈接模板后立刻去“監(jiān)測 – 最新數(shù)據(jù)”里過濾這個主機(jī)等一到兩個更新周期看有沒有數(shù)據(jù)進(jìn)來。如果 Zabbix 的刷新周期是 30 秒或 1 分鐘通常幾分鐘內(nèi)就能看到。另外一個主機(jī)通常只需要鏈接一個對應(yīng)當(dāng)前采集方式的 Nginx 模板不需要把所有 Nginx 模板全鏈接上。鏈接多個模板并不會讓數(shù)據(jù)更豐富反而會讓監(jiān)控項(xiàng)沖突、重復(fù)告警排查起來也更亂。4.2 宏參數(shù)路徑、協(xié)議、端口都是變量模板鏈接后還有一層容易被忽略宏參數(shù)。官方 Nginx 模板里通常會定義一組宏用來告訴 agent 去哪個地址、哪個路徑、用什么協(xié)議獲取狀態(tài)頁。常見宏名可能包括{$NGINX.SCHEME}、{$NGINX.PORT}、{$NGINX.STUB_STATUS.PATH}具體名稱以你當(dāng)前模板為準(zhǔn)。它們的作用就是把狀態(tài)頁的訪問信息從監(jiān)控項(xiàng)中抽出來這樣同一套模板可以復(fù)用在不同的 Nginx 主機(jī)上。如果你的狀態(tài)頁地址不是默認(rèn)值就不用改監(jiān)控項(xiàng)直接在主機(jī)層級覆蓋宏就行。比如狀態(tài)頁路徑是 /nginx_status 而不是 /status就在主機(jī)的宏里把對應(yīng)宏改成實(shí)際路徑。改完后等下一次采集生效再看最新數(shù)據(jù)。要注意的是宏的生效范圍有層級全局宏、模板宏、主機(jī)宏。主機(jī)宏優(yōu)先級最高。如果模板里已經(jīng)定義了默認(rèn)值主機(jī)上沒改也沒關(guān)系但如果狀態(tài)頁地址做了修改一定要記得改對應(yīng)主機(jī)的宏而不是只在模板里改一個默認(rèn)值因?yàn)槟0迥J(rèn)值會影響所有鏈接該模板的主機(jī)。還有一個容易出錯的地方狀態(tài)頁地址如果是 https但宏里用的是 http監(jiān)控項(xiàng)會一直返回錯誤。這種問題在視覺上非常隱蔽因?yàn)?Nginx 和 agent 都正常只有協(xié)議不匹配。4.3 驗(yàn)證模板是否能出數(shù)據(jù)鏈接模板和配好宏之后不要直接離開頁面。花一分鐘做兩件事第一到主機(jī)監(jiān)控項(xiàng)列表里看有沒有出現(xiàn)紅色 error 狀態(tài)的監(jiān)控項(xiàng)第二到最新數(shù)據(jù)里過濾該主機(jī)確認(rèn)有非空數(shù)據(jù)。如果看到 error 狀態(tài)的監(jiān)控項(xiàng)先點(diǎn)擊進(jìn)去看錯誤信息。常見的有 unsupported item key、Cannot connect to [...]: 10060、Connection refused 這類。每一條錯誤信息其實(shí)都指向了數(shù)據(jù)鏈路的具體環(huán)節(jié)比你在外面猜模板要快得多。如果最新數(shù)據(jù)里有值但看起來不對比如 Reading 是 0、Writing 是 0也不要慌先用 curl 手動看一次狀態(tài)頁確認(rèn)源數(shù)據(jù)里就是這些值然后判斷是 Nginx 本身空閑還是采集路徑不對。如果源數(shù)據(jù)是對的Zabbix 只是如實(shí)展示不用改 Zabbix。5. 沒數(shù)據(jù)的排查鏈路按順序查別亂試5.1 四個環(huán)節(jié)從上到下檢查如果你最終面對的是一臺沒數(shù)據(jù)的 Nginx 主機(jī)不要先懷疑 Zabbix更不要反復(fù)重新鏈接模板。按下面的順序逐層排查通常能在十分鐘內(nèi)定位問題。第一層Nginx 狀態(tài)頁是否可訪問。curl -s http://127.0.0.1:80/nginx_status如果 curl 能返回純文本進(jìn)入下一層。如果返回 403、404 或 HTML 頁面問題在 Nginx 側(cè)。第二層agent 能否讀到狀態(tài)頁。注意 agent 的運(yùn)行身份和權(quán)限。你可以切換到 agent 運(yùn)行用戶或者用 sudo 模擬執(zhí)行同樣的 curl 命令確認(rèn) agent 視角下能訪問。如果 agent 在容器里還要確認(rèn)容器網(wǎng)絡(luò)。第三層Server 和 agent 之間是否連通且 Hostname 匹配。zabbix_get -s agent_ip -k agent.ping如果 zabbix_get 返回 1說明網(wǎng)絡(luò)層通。然后再確認(rèn) Web 端主機(jī)名和 agent Hostname 一致。第四層模板宏和監(jiān)控項(xiàng)是否匹配。打開監(jiān)控項(xiàng)列表查看具體監(jiān)控項(xiàng)的 key、宏替換后的實(shí)際地址用測試功能跑一次。如果返回錯誤根據(jù)錯誤信息調(diào)整宏。這個順序的核心思路是先確定是哪一層壞了再決定修哪里。不要在不知道哪一層出問題的時候改配置改來改去只會讓狀態(tài)更亂。5.2 高頻錯誤對照表下面這張表基本覆蓋了 Zabbix 監(jiān)控 Nginx 時最容易遇到的幾類現(xiàn)象現(xiàn)象常見原因處理思路狀態(tài)頁 curl 返回 404沒有配置 location 或模塊缺失先查 nginx -V 里的 stub_status 模塊狀態(tài)頁 curl 返回 403allow/deny 沒有放行 agent 來源 IP調(diào)整 allow 規(guī)則思考 agent 從哪個 IP 訪問監(jiān)控項(xiàng)顯示 unsupported itemagent 版本或模板類型不匹配確認(rèn)是 agent 還是 agent2換對應(yīng)模板或 key最新數(shù)據(jù)一直是空Hostname 不匹配、宏路徑不對、采集周期長檢查主機(jī)名一致性測試宏替換后的地址監(jiān)控項(xiàng)返回 Connection refusedagent 未啟動、端口不通、防火墻攔截systemctl status 看服務(wù)再用 zabbix_get 驗(yàn)證狀態(tài)頁返回的是 HTML 而非純文本location 配置被其他規(guī)則截獲檢查 server 塊順序確認(rèn)精確匹配位置這張表不是讓你背下來而是給你一個參考坐標(biāo)。遇到問題時先看現(xiàn)象再判斷屬于哪一層然后去對應(yīng)位置檢查。5.3 沉淀一個“四層驗(yàn)收清單”最后一個能長期復(fù)用的經(jīng)驗(yàn)把 Zabbix 監(jiān)控 Nginx 的鏈路固定成一張驗(yàn)收清單每次新接入一臺 Nginx 主機(jī)時按順序過一遍。Nginx 狀態(tài)層模塊存在、location 配置正確、curl 返回純文本、allow 已放行 agent 來源 IP。Agent 采集層服務(wù)已啟動、配置了正確的 Server/ServerActive、Hostname 與 Web 端一致、zabbix_get 驗(yàn)證 agent.ping 返回 1。Server 接入層Web 端主機(jī)存在、agent 接口可達(dá)、主機(jī)名匹配。模板匹配層鏈接了適配 agent 類型的 Nginx 模板、宏路徑/協(xié)議/端口正確、最新數(shù)據(jù)出現(xiàn)非空值。這個清單不是固定不變的但它能幫你把一次復(fù)雜的排查變成一次順序的確認(rèn)。以后不管是三臺機(jī)器還是三十臺機(jī)器先讓這種驗(yàn)證順序變成肌肉記憶再談自動化。6. 適用邊界這套方案不是所有 Nginx 環(huán)境都適合6.1 適合誰Zabbix 監(jiān)控 Nginx 這套方案適合的場景其實(shí)很清楚你已經(jīng)在用 Zabbix手里是一批長期存在的虛擬機(jī)或物理機(jī)核心關(guān)注的是連接數(shù)、請求數(shù)、握手狀態(tài)等基礎(chǔ)指標(biāo)。這種情況下引入一套新的監(jiān)控系統(tǒng)成本遠(yuǎn)大于收益直接在 Zabbix 里接 Nginx 模板是最順的路。從我個人經(jīng)驗(yàn)看當(dāng)一個團(tuán)隊(duì)已經(jīng)用 Zabbix 管了幾百臺機(jī)器再為了 Nginx 單獨(dú)部署一套 Prometheus、Grafana反而不劃算。不是因?yàn)?Prometheus 不好而是你的告警、權(quán)限、儀表盤、值班流程都已經(jīng)長在 Zabbix 上了新增一套系統(tǒng)意味著要同時維護(hù)兩套監(jiān)控體系的賬號、存儲和告警規(guī)則。6.2 不適合誰反過來如果你的環(huán)境是大量短生命周期容器Nginx 實(shí)例像 Pod 一樣隨時擴(kuò)縮容Zabbix 這種以主機(jī)為單位的管理模型就會變得很吃力。每來一個新實(shí)例都要創(chuàng)建主機(jī)、鏈接模板、維護(hù) Hostname規(guī)模一大這些動作本身就是運(yùn)維負(fù)擔(dān)。另外如果業(yè)務(wù)需要按 URL、按狀態(tài)碼、按 upstream 做細(xì)粒度 SLA 分析單靠 Zabbix 的 Nginx 狀態(tài)頁數(shù)據(jù)也不夠。狀態(tài)頁給的是連接數(shù)和請求總數(shù)拿不到每個接口的響應(yīng)時間分布。這種需求更適合讓 Nginx 輸出 access log 結(jié)構(gòu)化、再送進(jìn)時序數(shù)據(jù)庫或者日志系統(tǒng)或者直接采用具有服務(wù)發(fā)現(xiàn)能力的監(jiān)控方案。這不是說 Zabbix 不能做擴(kuò)展而是說你要先判斷值不值得。任何方案都有維護(hù)成本Zabbix Nginx 監(jiān)控的優(yōu)勢是簡單直接代價是深度有限。認(rèn)清這個邊界比盲目堆監(jiān)控項(xiàng)更重要。6.3 重要的不是某一個命令而是適應(yīng)變化的能力回到標(biāo)題里那半句“和過去有一點(diǎn)不同”。這句話其實(shí)很適合用來概括這類監(jiān)控方案的常態(tài)Nginx 的編譯參數(shù)在變agent 從舊版走向 agent2模板名稱和宏定義在變安裝方式從裸機(jī)走向容器。過兩年你再回頭看今天這篇文章里的具體配置很可能又有出入。但有一點(diǎn)不會變數(shù)據(jù)從 Nginx 到 agent 再到 Server 這條鏈路的邏輯是穩(wěn)定的。你只要掌握了“先 curl 狀態(tài)頁、再 zabbix_get 探活、最后看模板宏”的驗(yàn)證順序無論版本怎么升級你都能在最短時間內(nèi)判斷出問題出在哪一層。這才是比某一條命令更有價值的東西。所以我的長期建議是不要只收藏某個版本的配置片段而是順手把自己的環(huán)境、模板名稱、宏定義、驗(yàn)證命令寫成一個簡短文檔或腳本。下次再遇到 Nginx 監(jiān)控沒數(shù)據(jù)你不是回去翻舊教程而是打開自己的排查清單?;氐介_頭那個案例。我們最后做的事情其實(shí)很簡單把 stub_status 狀態(tài)頁配置好allow 規(guī)則放行 agent 來源 IP再把 Web 端主機(jī)名和 agent Hostname 改成一致。數(shù)據(jù)在第二個更新周期就出現(xiàn)了。整個過程沒有任何懸案只是之前分散在不同教程里的經(jīng)驗(yàn)沒有串成一條完整的鏈路。Nginx 側(cè)會變、Zabbix 會變、模板會變但驗(yàn)證順序不會變。下次再看到最新數(shù)據(jù)為空時不要急著在界面上反復(fù)點(diǎn)先打開一個終端curl 一下狀態(tài)頁很多時候答案早就寫在響應(yīng)里了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色色婷婷丁香| 亚洲天堂男人网| 日本三级黄页| 午夜福利精品| 亚洲欧美国产中文视频| 欧美激情 一区| 亚洲五区熟女| 久久伊人大香蕉| 国产成久久综合片| #NAME?| 97色视频在线| 青青操97| 99在线观看| 欧美一级国产一级| V A在线| 欧美综合色图网| 一区| 精品人妻一区二区三区-国产| 色久桃花影院在线观看| 久久久99免费| 日欧操屄| 家庭乱伦国产精品| 久久久久久久强迫| 一级一性爱免费视频| 精品一区二区2| 精品一久久久| 日韩9999| 久久久久9999妇女| 久久亚洲人妻| 夜夜福利| 天堂射| 青娱乐av在线| 自拍丝袜美腿人妻| 欧洲无码一区二区| 国产有码一区| 久久大精品乱码视频人妻熟女| 2020中文字幕| 久久久久中出| 中 文字幕一区二区三四 五 区日 日 骚 | 国产后入精品| 一区二区三区蜜桃成人撸久久东京热| 97超碰热线| 亚洲不卡av在线| 丝袜AV一二三区| 男人天堂一区二区| 思思99热| 久久免费看高潮毛片韩国| 伊人五月天青青草婷婷| 欧美天堂日韩三级国产传媒| 日韩 欧美 校园一区| 精品一区96| 天天天乱色综合全| 久久久91福利姬| 色五月激情AV在线| 少妇精品久久| 免费久久一级毛片大黄| 女人被男人桶爽视频网站| 国产成人精品必看 | 99综合网| 亚洲色图国产另类| 久久久久婷婷精品av电影| 亚洲国产中文字幕| 精品人妻一区二区三区视频在线| 91精品国产91久久青草| av在线播放国产一区| 内射老妇BBWX0C0CK| WWW啪啪的com| 久久精品一区| 台湾佬中文娱乐网久久久久久久久久com | 超碰成人人人爽人人爽| 日韩欧美中文日韩欧美色| 韩日性爱av| 六月色色| 有码色中文字幕在线观看| 人妻素股| 欧美影院一区二区三区| 99视频内射三四| 精品97精品97| 天天操妹子| 中文字幕高清精品一区| 伊人久久婷婷| 超碰97玖玖爱| 91狠狠综| 国产黄色av大片网站| 久久极品一区二区| 久久精品国产久精国产| 免费视频在线一区二区不卡| 国模精品娜娜一二三区| 亚洲。日韩。欧美| 国产精品久久久午夜夜伦鲁鲁| 日韩一二三区| 99久久婷婷国产综合| 91女神在线视频| 后入日本1234| 日韩av免费一级电影| 99久久综合网| 国产又长又大又粗的视频| 翔田千里无码一区| 久久天天躁日日躁狠狠躁 | 亚洲999综合| 日韩十八禁| 大香蕉一线视频| 国产精品国产自产拍高清AV| 国产精品乱码久久久| 午夜激情成人在线观看| 男人下部插入女人下部| 凌辱美少妇久久aV| 超碰人人干| 日本淫穴在线| 日本黄色精品专区网站| 国产亚洲色婷婷99精品91| 精品国产乱子伦一区二区三区,精品一 | 国产美女销魂在线观看不卡| 99久热精品99re6热| 精品一区二区三区麻豆| 丁香五月激情网| 无码人妻毛片丰满熟妇精品区| 精品成人亚洲午夜电影| 懂色AV中文| 51久久夜色精品国产麻豆| 91色情黑丝搞鸡在线观看一区二区三区三州| 天天看高清麻豆| A 天堂| 日日干日日操五月天伦理视频| 国产传媒日韩| 欧美超碰9798| 成人性爱AV在线免费观看| 96AV精品| 99re视频在线观看这里只有精品| 五十路熟女在线不卡观看一区二区| 久久久久久99AV无码免费网站| 91久久久久免| se吧提供国产乱老熟视频胖女人 | 91精产一区二区三区| A级毛片在线看免费| 亚洲永久永久永久永久一级一级一级精品| 国产精品日韩在线一区| 激情视频一二三| 亚洲国产ⅴ高清在线观看| 亚洲自拍欧美国产首页网曝| se吧提供91精品国产91久久久久久 | 精品久久視頻在线| 国产在线能看的你懂的| 亚洲文学偷乱拍啪啪啪啪| 入口操逼网站| 91N综合网| 天天做天天爱| TS人妖另类精品视频系列| 韩日男人的天堂| 综合伊人激情| 人妻大香蕉| 婷婷色色五月天| 天美91| 亚洲影院小综合| 岛国福利在线精品播放| 亚州九九九精品视频| 夜嗨影院| 中文字幕欧美丝袜07资源| 欧美性后入| 欧美午夜一区二区三区| 亚洲丝袜少妇在线| 久久人妇| 人人色97| 亚洲一区二区三区欧美日韩| 91色综合| 校园春色美腿丝袜 | 国产精品久久久久久久久久二区三区| 天天操天天插| 成人麻豆av电影网站| 伊人网一本| 国产视频三区四区| 欧美在线观看综合国产| 欧美在线播放| 漂亮人妻被强中文字幕hd| 动漫片子网站3黄| 国产精品视频一区二区三区八戒| 性猛交| 丰满人妻一区| 五月婷婷hd| 激情五月天色色网| www.91理论| 97碰久久| 93人人操人人| 伊人五月天婷婷| 东京热熟女亚洲视频网站| www欧美91| 69丨亚洲丨精品丨入口免费播放| 青青青在线高清视频在线一二三四区| 啊啊啊啊视频免费| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 污色区网站| 妇女乱色二区| 99热99re6国产在线播放| 欧美亚洲激情小说| 激情婷婷丁香| 五月婷婷基地| 亚洲av淫乱| 亚洲av无码国产精品字幕| 国产精品不卡少妇白| 日本顶级天天操狠狠操夜夜操中文字幕| 婷婷五月天成人| 玖玖资源综合在线视频| 国产操逼逼网| 欧美一级久久久久久久大片动画| 日韩无码视频黄色| 一区二区三区探花在线观看| 国产综合在线视频网站| 日韩免费簧片| 欧美性爱日韩高清| 人人操人人爽人人操人人| 97K超碰在线| 欧美色九九| 少妇激情AV| 国产91专区| 免费日韩黄片| 亚洲熟女性高潮久久久| 成全在线观看免费观看| 亚洲蜜乳av| 日韩欧美成人综合在线| 国产精品自拍欧美在线| 日本亚洲熟女视频| 97人肏| 国产视频一区二区在线| 夜夜高潮夜夜爽高清视频一| 久久超碰免费的| 青青草视频在线观看一区二区| 蜜桃久久久久久| 色五月69夫妻| 久久伊人青青草| AV色图| 久久天堂网| 国内外毛片在线观看| 黄站在线免费观看| 天堂成人网| 亚洲色人| 97精品熟女少妇一区| 在线观看色视频| 色五月综合网| 97色97好| 精品视频久久| 欧美亚洲国产91在线| 午夜超爽| 中文字日本乱码| 日韩午夜国产| 蜜臀久久99精品久久久久久成人小说 | 亚洲欧美97| J?P?NESEHD熟女熟妇伦| 亚乱色| 大香蕉九九| 欧美性色综合网| 亚洲drav色图| 97aiaiai| 日本三级R| 国产乱码久久| 久久视频少妇美女| 国产亚洲精品A在线观看下载| 人人看欧美性爱| 韩日精品四区| 天堂亚洲精品久久老牛| 欧美一级A一级a爱片久久| 乱伦1色页| 九月丁香| 精品九九淫乱男| 色97干| 亚洲自拍天堂| 在线天堂999| 老鸭窝在线视频播放| 成年人黄色视频免费| 亚洲欧美日韩综合在线尤物| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 久草草一二三四区久久| 91精品91久久久久77777俄罗斯老妇姓x| 成人26uuu| 激情久久久| 精品无码人妻一区二区免费蜜桃| 亚洲一二三四区| 色情乱伦AV| AV高清一区| 伊香蕉综合久久久久久久噜噜噜| 国产女人极品高潮毛片| 97天天做| 中字幕人妻一区二区三区| 久久草大香蕉| 欧美色图自拍| 日韩一区二区高清在线观看的| 97色色色综合网站| 黄色无码高清黄色无码网站| 丁香五月大香蕉| 人妻大香蕉| 在线观看免费视频国产| 金典av| 亚洲欧洲自拍图片专区满春格 | 欧综合网| 九九在线视频| 久久久久久综合久久伊人蜜月| 国产精品制服丝袜清纯唯美| 九九热在线精品视频| 国产精品久久久啊| 人妻夜夜爽天天爽麻豆三区网站| 天天射日日干| 国产性感骚丝袜在线| 亚洲国产97| 六月婷婷色综合| 玖日综合网| 久久香蕉国产线看观看猫咪av| 97频视在线| 飘花国产午夜精品不卡| 午夜天堂网| 黑人精品XXX一区一二区| 日韩一区二区精品视频| 色图综合网| 69AV女优男人的天堂| 美女天天干| 综合网亚| 多毛小伙内射老太婆| 北条麻妃性愛视频| 中文字幕交换人妻| 日日摸日日碰夜夜爽视频| 大香蕉97久久| 家庭乱伦国产精品| 日韩操呦呦影院在线观看| 国模不卡| 超碰久超碰久| 精品人妻一区二区三区-国产精品| 91免费看一区二区三区| 夜草欧美| 不卡啪啪视频| 精品久久无码午夜福利 | 91成人久久 | 国产和美国毛片| 欧美做爰无码A片视频| 精品国产乱码久久久| 又黑又大又粗| 乱伦av国产| 99色热| 手机av天堂久久久久| 欧美探花网| 视频在线97| 99re这里只有精品中心播放| 日本激情免费大片| 校园春色综合网| 后入式在线免费观看60秒| 日本欧美国内在线| 一级性爱视频免费观看 | 伊人大香蕉在线| 密乳无码| 超碰95| 国产自产自拍| 国内毛片热久久思思热| 亚洲欧洲综合| 99少妇| 久久久性爱视频| 极品色www影院| 97超碰人人模人人拍人人| 欧美综合自拍亚洲综合图| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 三级日本一区二区三区| 欧美,日韩,中文,另类| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 婷婷久久综合| 中文字幕亚韩| xxx0国产在线播放| 久久国产在线一区二区| 超碰色97| 欧美色图97| 殴美日韩m| 99性爱| 99久久e免费热视| 日日干天天干夜夜爽| 日本熟妇人妻一区二区三区| 91九色丰满高潮| 99热 按摩 日韩| 亚洲熟妇乱女区二区三区| 日韩不卡毛片Av免费高清| 91大神精品长腿在线观看网站| 四虎AV在线播放| 国产精品大屁股999| 欧美页片| 女人的天堂大香蕉网| 一区麻豆 高清中文字幕| 中文字幕乱妇免费视频| 在线 欧美 亚洲| 久久骚| 嗯嗯啊啊好大好爽| 日日做夜狠狠爱欧美黑人| 性欧美体内射精| 欧美日韩性感| 2020中文字幕| 九九玖玖精品| 麻豆人妻少妇在线免费观看| 一区二区三区四区五区高清无码永久视频 | 操逼视频免费日韩无码| 欧美精品久久久久久久久88| 淫荡少妇免费| 黄片aaaaa一区| 中文字幕一区二区韩| 精品国产丝袜一区二区三区乱码| 东北丰满熟女国产一区| 性爱av在线免费观看| 蜜臀AV网站| 免费一级欧美片片线观看| 韩国黄色片精品久久久| 欧美色图天堂在线| 青青爽| 欧美亚洲丝袜美女电影| 人妻少妇久久中文| 97亚洲色图| 久久亚洲中文字幕视频| 亚洲三区视频| 99综合| 国产精品经典一卡久久久 | 欧美激情另类一区二区| 91精品丝袜在线观看| 久久人妻办公室视频| 视频一区二区免费在线| a级成人毛片免费视频高清| 伊人久久大香大香线蕉中文| 操少妇很爽av| 亚洲日韩久久精品一区| 伦理第一页| 翔田千里Av在线| yellow网站免费观看日韩高清无码| 国产一级αv免费看片| 日本福利社| 国产丰满熟夫69mpp| 综合性视频99| 少妇被c 黄 免费观看| 99久久婷婷丁香| 一本久道久久综合狠狠爱| 青青操在线亚洲视频观看欧美在线| 中文字幕一区二区三四五区日日骚| 91制服丝袜| 日韩熟女操逼| 亚洲av在线免费观看| 91国产美女丝袜足交精品视频| 另类欧美综合| 欧美人妻一区| 日韩美女高潮喷水视频| 美女诱惑一区| 日韩欧美经典在线观看| 欧美72网页| 五月情色天| 国产av美女被艹的乱叫| 国产精品亚洲四五区在线观看| 色婷婷日韩精品一区二区三区| 日韩激情电影中文字幕| 久久黄黄| 99少妇| 久久成人国产| 白丝少妇一区二区| 中文字幕第9页萱萱影音先锋 | 99这里只有精品| gogogo免费高清看中国国语| 精品免费1| 中文字幕神马久久| ,成人免费啪啪视频| 色五月综合网| 亚洲欧美一区二区三区在钱蜜桃| 人妖欧美一区二区| 国产精品久久久久久久AV大片 | 国产精品不卡一区二区电影| 综合网,亚洲,欧美| 欧美淫乱视频| 国产av强奸美女| 久久伊人网视频一区二区三区| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 欧美大战久久久伊人| 三四中文字幕| 色婷婷色99国产综合精品| 亚洲亚洲亚洲天堂天堂| 国产女同视频在线播放| 亚洲精品久久久久久久久豆丁网| 97射欧美| 国产日韩在线播放| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 嗯嗯啊啊操我| 婷婷香蕉欧美在线一区二区三区 | 中文字幕日韩人妻视频一区二区三区| 强奸少妇AV导航网| 97视频在线播放| 混色激情av| 啊啊啊啊免费视频| 另类小说五月天| 久久久久9999妇女| 亚洲97久久精品亚洲| 欧美夜夜骑视频| 妇女性内射冈站HDWWWCOM| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 日韩av免费一级电影| 欧美性爱97超碰| 一区二区三区麻豆| 91精品无码人妻系列| 亚洲综合色图欧美| 99精品视频在线观看| 欧美日韩亚洲少妇寂寞影院正在播放 | 日韩AC| 91麻豆天美传媒HD| 欧美日韩国产三级黄色| 亚洲视频二区| 亚洲最新a在线观看| 国产91美女视频| 香蕉综合网| 天天干18禁| 国产污视频麻豆传媒一区二区| 久久久久久网址| 青青草在线视频人人想人人上| 中文字幕高清精品一区| 蜜臀久久久国产| 亚洲一区二区三区播放在线| 亚洲中文字幕av | 久久久爆乳翘臀一线天伦理视频| 97精品久久| 东京热不卡视频| 偷看洗澡一二三区美女| 国产 日韩 欧美 人妻 熟女 中文| 97色亚洲| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 中国国国产一级特黄毛片| 久久久精品一区二区| 亚洲欧美国产日本一区二区三区| 中文久久久| 青娱乐蜜桃臀AV色婷| 3028国产精品| 久一区久久蜜桃| 啊啊啊97视频| 天天射网| 久久性爱大全| 日本 色 导航| 葡萄牙性视频一二区| 欧美性暴力猛交XXXX| 激情四射五月天| 亚洲午夜未满十八勿入网站日本又色又爽又黄 | 乱人伦 国语对白:视频直接看| 精品国产无码中文| 性欧美第一页| 午夜精品久久久久久久99热影院| 亚洲精品视频在线| 中国一区二区亚洲人妻| 2019精品国产无码成人| 精品国产乱子伦一区二区三区,精品一| 久久亚洲熟妇在线视频| 免费观看的av| 亚洲最大成人a毛毛片| 日韩97| 夜夜嗨一区二区三区三州加勒比 | 福利天堂| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 性九九九九九九| 日少妇亚洲版| 日日狠狠久久偷偷色综合免费| 精品区国产区一区二区三区| 亚洲欧洲无码bt精品合集| www.国产高潮精品| 秋霞午夜视频一区二区| 亚洲少妇视频| 一区二区三区四区姦女| 在线看免费无码AV天堂的| 亚洲A曰本VA欧美VA视频| 久久夜夜| 91亚洲人| 懂色av中文字幕| 91男同| 国产小炒后入式| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 丁香六月婷婷| 三级三久久线久久99久目本WW| WWW操逼| 一本久道久久综合狠狠爱一密臀精 | 人妻天堂网| 白嫩妹子国产骚| 日韩精彩视频| 超碰在线综合97| 欧美变态激情网| 国产精品熟妇一区二区三| 啊啊啊啊啊在线观看网址| 综合色色婷婷| 亚洲五月丁香花狠狠干一区二区三区| 果冻国产精品麻豆成人av| 国产真乱mangent| 襙一襙| 中文字幕丰满子伦无码专区在线视频最新 | 在线五区| 东京热99999| 91久久国产综合精品| 色综合99999| 午夜精品久久久久| 伊人网在线观看| 999 久久久| 欧美色日本| 嗯嗯啊在线视频| 久久久久免费少妇| 992这里有精品| 天美国产精品| 2025年A片视频精品| AAAA欧美日韩| 国产黄色 A 片免费看| 日韩国产乱子伦App| 日本视频在线观看污污污| 91碰碰碰| 久久9精品视频| 91人妻丝袜无码| 麻豆精品三区视频| 国产91专区| 激情婷婷黑人91| 天天综合网网欲色| 亚欧免费| 亚洲无套久久嗯嗯| 97一本大道亚洲一区| 麻豆区久久久久亚| 精品一区二区三区免费古装毛片香港三级日本三级人妇 | 免费网色网站| 友优传媒精品在线一区二区| 人人操人人插人人摸人人干| 婷婷五月天av| 97 九色| 9久久久久| 亚洲精品xxx| 国产精品色色| 亚洲91综合| 97精品视频| 欧美顶级黄片AAAAA在线免费看| 久久久久成人蜜桃精品| 91丨精品丨国产丨丝袜| 百度百度日本操逼| 国产精选三级在线观看| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 美骚妇av高清在线| 中文不卡视频| 亚欧国产无码精品在线| 色爱欲亚洲| 久久春色| 欧美日日人人天天| 一级人妻性爱视频| 亚洲中文制服诱惑| 四虎av在线| 99re超碰| 偷拍 精品另类 凸凹了四区| 色偷偷超碰亚洲| 欧美大的香蕉有线电视视频| 国产高清在线观看欧美| 色老汉色| 男人的午夜天堂| 国产原创自拍| 99这里只有精品| 在线看免费无码AV天堂的| 欧洲乱码视频| 日韩av情韩国爱禁区av一区二区| 伊人网免费视频| 天天淫人人妻日日色| 午夜操一视频一区| 亚洲国产高清福利视频| 人人搡人人肉久久精品| 天天肏天天干| 97人人草| AV女资源| 亚洲激情网| 狠狠入| 国产热RE99久久6国产精品首 | 97国产超碰| 99热婷婷| 91精片| 国产少妇与亚洲av| 热热色91| 一区久久久二区| 人妻少妇久久中文字幕一区二区 麻豆| 日本三级韩国三级99| AV色女综合| 婷婷大香蕉| 精品人妻一区二区免费蜜桃视频| 国产九月婷婷| 国产99999| 第四色亚洲色图| 91久久九九精品国产综合| 美日韩在线不卡人妻| 欧 美 自 拍 偷 拍| 欧美视频激情久久久久久| 这里只有精品视频在线观看麻豆| 亚洲欧美日韩电影网站一区 | 日韩99999| 激情自拍 校园春色| 欧美精品69性爱| 无码人妻丰满熟妇奶水区毛片| 久久性爱视频免费看| 欧美少妇高潮久久91| 色yeye成人免费视频| 色爱天堂| 中文字幕天天天天天| 日韩黄片影院| 情色五月天就去干| 天天影视网综合少妇| 欧美日韩免费性爱| 青青草国产一区二区三区| 国产成人精品亚洲日本| 肉动漫无遮挡h在线观看| 91撸色网 玖玖网 欧美| 亚洲精品三| 999精品久久久久久久| 1234区中文字幕在线观看_青青草国产在线_日韩一区二区 | 天天操人人操狠狠插| 亚洲自拍欧美色综合| 被体育老师抱着c到高潮| 久久久新亚洲AV| 欧美aⅴ99久久黑人专区| 免费黄色片子| 超碰在线欧美性爱激情| 亚洲熟女少妇免费视频| 欧美成人亚洲精品| 激情久久久| 国产精品爱欲| 国产丁香精品露脸视频| 亚洲,欧美,春色,另类| 琪琪精品免费一区二区三区 | 成人精品在线观看| 极品综合| 久久精品熟妇丰满人妻99| 亚洲人妖网| 精品夜夜澡人妻无码| 密乳无码| 97爱综合| 亚洲资源吧| 最新精品久久蜜桃| 色月天AV导航| 欧美很很操视频| 少妇熟女1区2区3区| 91亚洲欧美激情| 欧美激情色婷婷花野真衣一区二区| 超碰97欧美在线| 日本理论在线| 蜜乳AV.COM| 玖玖爱综合网| 日韩 欧美 校园一区| 91美女视屏| 中文字幕日本久久| 成人小说另类在线| 大香蕉综合网| 国产99999| 精品人妻视频一区二区在线播放| 青青草大香蕉在线视频| 国产丝袜美腿美女麻豆| 天天日日本| 亚洲人精| 久久久久久久久久久久久久久乱码| 97在线免费看| 91爽啪| 久久国产99精品72福利| 91色艳| 五月天激情网图片| 激情综合五| 色九月| 欧美亚州手机在线| 亚洲天堂电影精品一区| 伊色综合天堂色97| 性爱久久| 91色女| 日韩在线人妻网站| 欧美黑人与女人91~| 亚洲欧洲精品成人| 久久熟女人| 99超碰色| 淫乱图区| 操淫穴亚洲五月丁香| 精产国品一区二三产品| 久久精品一区| 神马久久久久久久久久| 亚洲宗合网| 久久精品中文| 蜜臀99久久精品| 青青草五月份天| 欧美色图20p| 九久精品| 亚洲另类天堂| 熟女这里只有精品6| 丁香六月激情| 超碰免费人人| 少妇高潮99p| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 黑丝自慰喷水网站| 强奸乱伦av电影| 99综合| 久热伊人99re| 国偷自 一区二区| 91在线一起| 大鸡巴久久| 日本人妻伦在线中文字幕| 手机午夜电影神马久久| 中国一区二区亚洲人妻| 欧综合网| 欧美日韩黄片精品在线| 嫩草影院在线观看精品| 欧美成人9797| 国产成人主播| 老司机福利社视频在线观看| 激情婷婷综合久久| 日韩卡一卡二卡三在线| 黑操B| 久久內射| 九九九精品美女| 91视频精品| 亚洲天堂 视频你懂的| 91蜜臀熟女| 97一区二区三区视频| 超碰地址久久| 中文字幕AV乱伦| 国产成人亚洲精品自产在线 | 校园春色综合香蕉| 久久久96| 国内毛片国产专区二| 91色综合激情| 就去色综合| 黑人白女精品一区| 狠狠干综合| 乱欲性色| 欧美日韩午夜精品一区二区三区| 久久久久国产一区二| 丁香婷婷激情五月天无毒不卡 | 无码人妻系列少妇| 3PAV乱伦视频| 超碰99在线| 和协影院中文字幕三区| av三级电影在线播放| 丝袜熟女一区二区三区| 在线啊啊啊啊| 欧美日韩中文字幕不卡| 色在线亚洲视频www| 中文字幕一区二区三区蜜臀| 免费男人的天堂| 色噜噜精品一区二区三| 欧美日韩国第一区| 夜夜嗨视频| 成人AV在线电影| 亚州黄站| 男人高清无码一区二区| 大香蕉欧美国产日韩高潮| 久久久蜜桃臀无码视频| 亚洲欧美大香蕉| 中文字幕一二三av| 色小视频蜜乳| 大屁股熟女一区二区三区| 国产极品粉嫩馒头一线天av| 精品人妻夜夜草| 国产91 丝袜在线播放00-百度| 99综合视频| 国产精品毛片| 午夜色婷婷| 青青草久久| 欧亚在线视频| 超碰碰小说97| 91超级碰| 婷婷精品久久av影视| 午夜男人一级A片7777| 尤物视频网 刘玥| 秋霞曰韩R级| 在线情色电影 91大| 亚洲加勒比久久日本道| 丰满翘臀美女影院视频| 偷拍综合网| 成人久久无码www| 秋霞怕怕片| 97亚洲国产影视| 欧美精品23| 精品小视频在线| 精品一啪| 91亚.色| 天天日天天操心| 91老司机在线| 免费人人搞97| www.久久制服糖| 校园春色家庭伦理欧美激情| 久久久亚洲欧美综合| 好湿好紧视频| 激情五月激情综合网| 伊人热综合| 亚州综合色图| 99综合免费视频| 青娱乐啪啪视频| 91成人国产综合久久精品蜜月| 国产精品ⅴ无码大片在线看.| 久久久久婷婷精品av电影| 天天看,天天做| 日韩肏逼视频| 亚州色图欧美| 五月综合视频| 久久精品国产亚洲AV清纯| 欧美在线中M| 成人电影一区| 亚洲h片在线免费观看| 加勒比性爱成人在线| 999日韩中文精品观看视频。| 天天干天天舔| 国产又粗又长的视频| 丝袜六区| 久久精品三级影视| 亚洲精品九九九| 欧美黑人168页欧美黑人167| 人妻熟女一区在| 3d成人精品一区二区| 欧美激情亚洲| 欧美天堂亚洲电影院一区在线播放 | 欧美性爱中文字幕无线码| 天天天肏屄肏屄肏屄欧美欧美| 看看小穴| 婷婷五月色| 欧美精品精品一区二区| 色噜噜日韩精品| 67194无码不卡| 99视频精品| 欧美人人曰人人操人人射射| 人妻天堂三区| 欧美成人综合| 久久侵犯人妻爽爽爽| 欧美日韩国产高清在线一二三区 | 日B操| 夜色91| 天天干1区2区在线| 亚洲欧洲日产国产综合网| 色五月丁香五月| 亚洲乱码国产乱码精网站| 亚洲美腿丝袜香蕉影视欧美成人| 婷婷另类小说| 亚洲丝袜色| 色色婷婷丁香| 国产高清吃奶免费视频网站| 啪啪啪综合网| 亚州精品人妻一二三区| 亚洲色图加勒比| 啊啊啊com| 国产精选三级在线观看| 男女激情黄色网址| 2019精品国产无码成人| 天天日天天操天天射河南省| 99re欧美| 大香蕉线| 少妇色欲综合网2| 97国产精品在线观看| 天天综合网1| 欧美色图成人网一区二区 | 人妻少妇精品久久久| 绯色AV粉色AV蜜臀AV| 东京热激情视频一二三区| 国产精品色| 亚洲欧洲综合视频在线| 国产成人久久久精品免费AV| 四虎国产精品永久地址入口| 日韩精品资源专区二区| 边做饭边操逼逼| 91九九| 亚洲乱码精品一区二区| 日本精品999| 婷婷久久五月综合激情| 亚洲欧美黄| 性天堂| 精品黄色电影| 热思思免费视频| 亚洲欧美综合| 精品成人无码| 亚洲无码成人精品| 欧美另类精品xxxx| 日韩丰满熟妇| 国产色精品午夜大片| 青青草丝袜在线视频| 90后性网国产欧美| 床上啊啊啊一区二区三区| 99啪啪视频| 欧亚综合一卡二卡中文字幕| 东京热激情视频一二三区| 久久久久精| 女人妻一区| 91N综合在线| 日日骚精品视频| 人妻熟女一区二区三区视频| 97欧美综合网| 日本天天人人狠狠在线日美女 | 2017天天插| 久9re热视频这里只有精品| 高清视频一区| 日韩视频精品在线观看| 日美免费黄片| 国模精品娜娜一二三区| 狠狠狠一区二区三区| 第四色色综合91| 欧美最大综合网| 暴力av在线| 亚洲无码国产探花在线观看| 日日日日做夜夜夜夜无码| 日本网色| 99国产精品人妻人伦| 欧美综合网1| 好吊色综合| 国产黄色视频久久| 色香色欲天天综合网天天来吧| 色玖玖| 蜜臀久久99精品| 人人妻人人色一区二区三区| 中文操逼字幕| 手机在线视频国内精品| 国语人妻精彩刺激| 男人天堂.AB| 偷拍亚洲视频一区二区三区四区| 牛牛AV人人夜夜澡人人爽| 99色热国产视频精品| 花野真衣| 国产精品午夜福利视频| 欧美天天性| 国产精品一二三在线看| 97操97色| 97露脸精品丝袜| 日韩在线电影| 国产视频不卡在线观看| 超碰日本97美女人妻人人玩人人爱| 欧美激情色婷婷花野真衣一区二区| 91久久久久| 国产女人极品高潮毛片| 东京热亚洲一区二区| 天天操狠狠日夜夜干超大胆开放com大香蕉视频在线观看 | 99国产精品久久久在线播放| 操久久久久| 人妻中文字幕日韩电影| 热天堂一区二区| 亚洲黄色AV电影| 日韩亚洲中文字幕在线| 啊啊啊啊啊啊啊好爽不要| 99热线麻豆| 操日韩第| 91网站18在线| 欧美色狠| 国模限制级电影| 后入式999| 日本高清_区二区三区 | 乱伦熟女论坛| 久久,精品一二三| 婷婷久草| 亚洲最新中文字幕免费| 在线 亚洲 网爆 自拍| 精品九九九九| 91精品丝袜在线观看| 狠狠操狠狠燥| 欧亚性爱视频免费看| 免费一级精品啪啪视频| 欧美中文字幕一区 | 国产色精品午夜大片| 国产美女91视频| 浓厚中出中文字幕在线| 久悠悠av| 麻豆久久精品亚洲精品88| 香蕉综合网| 久草综合网| 99久久九九| 国产自偷| 丁香五月综合| 蜜臀中文无码午夜| 九九色逼| 97手机日韩| 亚洲色五月| 69麻豆天美| 亚洲一区二区麻豆影院| 在线亚洲欧美| 天美一二三在线观看Av| 日韩精品资源专区二区| 日韩精品熟妇| 成人av毛片在线观看| 白丝少妇一区二区| 综合免费无码中文| 激情五月天校园春色网| 尤物一级在线免费观看| 天美传媒精品一区二区三区| 久久97| 女性喷水高潮在线观看| juliaann精品熟女一区| 思思视频免费看网站| 91夜色chaopeng| 国产久久av| 欧美人妻制服| 欧美制服网站美腿丝袜| 国产乱伦性爱区| se,,,亚洲欧美| AV综合中文字幕干| 成人毛片免费| 夜夜嗷嗷一区二区| 天天色播亚洲综合网站| 成人AV在线网站| 97综合久第一页| 亚洲国产精品V?在线播放| 99re8超碰| japan日本高清乱xxxx| 一本色道熟妇| www.97在线| 国产成人欧美一区二区三区的国产| 狠狠2050在线观看| 色婷婷99| 亚洲图片色图欧美另类| 欧美熟女逼久久久久久| 天天色香欲综合网| 激情小说日韩无码| 成人情色综合网| 精品无吗久久| 福利视频一区二区微拍| 九热中文字幕| 91爱综合| 性爱乱伦一区| 欧亚无码视频| 青草视频人妻在线观看| 超碰超碰95| 日本人人操人人操| 丰满熟女一区二区三区在线播放| 色九九综合AV| 九九AV| 18禁网站在线播放| J?P?NESEHD熟女熟妇伦| 日韩精品怡红院| 日韩pv中文| 亚洲成av人片色午夜乱码| 国产精品懂色tv影视免费观看| 久久风骚城市| 日韩欧亚太美不卡| 任你艹| 人妻中文字幕日韩电影| 亚洲欧美黄| 精品无人区麻豆乱码1区2区图片| 91黑丝美女| 天天干天天干天天干| 日韩精品黄片免费观看| 九九九只有精品| 操婢日韩| 97色亚洲| 蜜臀在线看片| 亚洲无限观看| 亚洲视频一二区| 一区二区三区在线资源| 天天天天天干夜夜夜夜夜操| 蜜桃视频成a人v在线| 日韩无码一区二区三区| 亚洲天天自拍| 伊人991| 1区2区3区中文字幕日韩| 99精品丰满人妻无| 亚洲午夜福利视频| 少妇高潮特黄A片| 免费精品人妻一区二区三| 亚州91| 97天天摸天天爽| 青青久久艹| 玖日综合网| 99精品在线| 超碰色美女| 欧美日韩亚洲电影| 超碰免费欧美7| juliaann精品熟女一区| 天天插天天干| 碰碰在线视频| 亚洲国产精品有声| 国产熟女完整版中字| 亚洲成人日韩小说| 日韩在线欧美精品一区二区| 一区二区三区免费视频入口| 国产无码精品久久久久久| 日韩情色一区二区| 九热中文字幕| 国产日韩精品suv| 国产白丝精品在线观看| 蜜乳中文字幕a在线|