日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

網(wǎng)絡(luò)協(xié)議棧實戰(zhàn)指南:從分層原理到問題排查

網(wǎng)絡(luò)協(xié)議棧實戰(zhàn)指南:從分層原理到問題排查 1. 從考研到實戰(zhàn)為什么我們需要重新認(rèn)識網(wǎng)絡(luò)協(xié)議棧提到“408計算機網(wǎng)絡(luò)”很多人的第一反應(yīng)就是考研。沒錯作為計算機專業(yè)考研的“統(tǒng)考科目”408里的計算機網(wǎng)絡(luò)部分是無數(shù)考生必須啃下的硬骨頭。但如果你認(rèn)為協(xié)議分層、TCP/IP模型這些知識僅僅是為了應(yīng)付試卷上的選擇題和綜合題那可就大錯特錯了。我見過太多剛?cè)胄械拈_發(fā)一遇到“Connection reset”、“TIME_WAIT過多”或者“HTTP 408請求超時”這類問題就頭皮發(fā)麻本質(zhì)上就是因為對網(wǎng)絡(luò)協(xié)議的理解還停留在“背八股文”的階段。網(wǎng)絡(luò)協(xié)議是互聯(lián)網(wǎng)世界的“憲法”和“交通規(guī)則”。從你手機刷短視頻到工廠里的PLC通過Modbus RTU控制機械臂再到數(shù)據(jù)中心里成千上萬服務(wù)器通過TCP/IP通信底層全是協(xié)議在干活。所謂“408各層協(xié)議”其實就是用一套系統(tǒng)化的框架OSI七層或TCP/IP四層把紛繁復(fù)雜的網(wǎng)絡(luò)通信過程給拆解明白了。理解它不是為了考試而是為了讓你在遇到“我們的系統(tǒng)檢測到您的計算機網(wǎng)絡(luò)中存在異常流量”這種莫名提示時能知道該從哪一層開始排查是為了讓你在調(diào)試STM32通過IAP升級失敗時能分清是Ymodem協(xié)議本身的問題還是底層UART/USB驅(qū)動的問題更是為了讓你在設(shè)計一個微服務(wù)接口時能清楚地知道數(shù)據(jù)是如何從你的應(yīng)用層代碼一路拆包、封裝、經(jīng)過路由、最終抵達(dá)對端又被重新組裝起來的。這篇文章我們就拋開考研真題的標(biāo)準(zhǔn)答案從一個一線開發(fā)者和問題排查者的視角重新走一遍這經(jīng)典的網(wǎng)絡(luò)協(xié)議棧。我們會看到每一層協(xié)議都不是枯燥的定義而是解決特定實際問題的一組合約和工具。你會發(fā)現(xiàn)無論是古老的Modbus、工業(yè)級的CAN/J1939還是現(xiàn)代的HTTP/2、QUIC它們都逃不出這個分層模型的框架。理解這個框架你就擁有了透視網(wǎng)絡(luò)問題的“X光眼”。2. 協(xié)議分層不止于OSI與TCP/IP的“地圖”當(dāng)我們打開任何一本計算機網(wǎng)絡(luò)教材開篇必然是兩個模型OSI七層模型和TCP/IP四層模型。很多人在這里就陷入了概念背誦的泥潭“物理層、數(shù)據(jù)鏈路層、網(wǎng)絡(luò)層、傳輸層、會話層、表示層、應(yīng)用層”…… 背是背下來了但到底為啥要這么分TCP/IP為啥又把會話層、表示層給合并了在實際工作中我?guī)缀鯊奈粗苯硬僮鬟^“會話層”或“表示層”的獨立協(xié)議這是不是說明它們沒用2.1 分層思想的本質(zhì)關(guān)注點分離與協(xié)作契約分層設(shè)計的核心思想是“關(guān)注點分離”和“定義清晰的接口”。想象一下造車。發(fā)動機部門只關(guān)心如何把燃油轉(zhuǎn)化成動力底盤部門只關(guān)心如何承載和轉(zhuǎn)向電氣部門只關(guān)心線路和控制系統(tǒng)。它們之間通過標(biāo)準(zhǔn)化的接口如發(fā)動機輸出軸規(guī)格、電氣接頭定義協(xié)作但彼此內(nèi)部實現(xiàn)可以獨立演進(jìn)。網(wǎng)絡(luò)協(xié)議分層也是同理。物理層解決的是“信號如何在線路上跑”的問題。它關(guān)心電壓高低、光信號閃滅、頻率調(diào)制。比如你用的網(wǎng)線是Cat5e還是Cat6涉及頻率和抗干擾你的Wi-Fi路由器工作在2.4GHz還是5GHz頻段都屬于這一層。這一層的協(xié)議或規(guī)范定義了硬件的電氣、機械、功能和規(guī)程特性。當(dāng)你用示波器去測量網(wǎng)線接口的波形時你就是在觀察物理層。數(shù)據(jù)鏈路層解決的是“在同一個局部網(wǎng)絡(luò)內(nèi)如何準(zhǔn)確地找到一臺設(shè)備并可靠地傳輸一段數(shù)據(jù)”的問題。它管理的是“一跳”之內(nèi)的通信。這一層引入了“MAC地址”作為設(shè)備的物理標(biāo)識并定義了“幀”的結(jié)構(gòu)。最常見的協(xié)議就是以太網(wǎng)協(xié)議Ethernet。交換機Switch就是典型的數(shù)據(jù)鏈路層設(shè)備它通過MAC地址表進(jìn)行數(shù)據(jù)幀的轉(zhuǎn)發(fā)。當(dāng)你抓包看到“以太網(wǎng)頭”里面包含源MAC和目的MAC這就是數(shù)據(jù)鏈路層的功勞。網(wǎng)絡(luò)層解決的是“如何跨越多個不同的網(wǎng)絡(luò)從源主機找到目標(biāo)主機”的問題。它引入了邏輯地址——IP地址。這一層的核心協(xié)議是IP協(xié)議IPv4/IPv6它負(fù)責(zé)全局尋址和路由。路由器Router是網(wǎng)絡(luò)層的核心設(shè)備它依據(jù)IP地址和路由表決定數(shù)據(jù)包該往哪個方向走。你常聽到的“子網(wǎng)掩碼”、“網(wǎng)關(guān)”、“路由”這些概念都在這層運作。傳輸層解決的是“如何為不同應(yīng)用程序提供端到端的、可靠或不可靠的數(shù)據(jù)傳輸服務(wù)”的問題。當(dāng)數(shù)據(jù)通過網(wǎng)絡(luò)層到達(dá)目標(biāo)主機后需要交給主機上的哪個程序進(jìn)程呢這就是傳輸層通過“端口號”來區(qū)分的。TCP和UDP是這一層的雙子星。TCP像快遞公司的保價包裹服務(wù)提供連接建立、可靠傳輸、流量控制、擁塞控制UDP則像普通明信片只管發(fā)出不保證送到但速度快、開銷小。你編程時調(diào)用的Socket API主要就是在和傳輸層打交道。應(yīng)用層解決的是“最終用戶或應(yīng)用程序需要什么樣的網(wǎng)絡(luò)服務(wù)”的問題。這一層協(xié)議種類繁多直接面向具體應(yīng)用。HTTP/HTTPS用于網(wǎng)頁瀏覽SMTP/POP3用于郵件收發(fā)FTP用于文件傳輸DNS用于域名解析MQTT用于物聯(lián)網(wǎng)消息推送Modbus、CAN用于工業(yè)控制。你在瀏覽器地址欄輸入一個網(wǎng)址背后就觸發(fā)了DNS和HTTP這兩個應(yīng)用層協(xié)議。那么OSI模型中的會話層和表示層去哪了在TCP/IP模型中它們的功能被合并到了應(yīng)用層。這非常符合互聯(lián)網(wǎng)設(shè)計的“端到端原則”和實用主義精神。例如“會話”的管理如HTTP/1.1的Keep-Alive、SSL/TLS的會話恢復(fù)通常由應(yīng)用層協(xié)議自己或下層的庫如SSL/TLS庫實現(xiàn)?!氨硎尽钡墓δ苋鐢?shù)據(jù)加密、壓縮、格式轉(zhuǎn)換如JSON/XML編碼解碼也完全由應(yīng)用程序來處理。因此在實際的TCP/IP協(xié)議棧實現(xiàn)和網(wǎng)絡(luò)編程中我們通常聚焦于“四層”模型。注意千萬不要教條地認(rèn)為某個協(xié)議“絕對屬于”某一層。許多協(xié)議是跨層或“子層”的。例如ARP協(xié)議地址解析協(xié)議工作在數(shù)據(jù)鏈路層和網(wǎng)絡(luò)層之間用于將IP地址解析為MAC地址。TLS/SSL協(xié)議則可以看作是在傳輸層之上、應(yīng)用層之下的一層安全協(xié)議。2.2 數(shù)據(jù)封裝與解封裝協(xié)議棧的“洋蔥模型”理解了分層再看數(shù)據(jù)的流動過程就清晰了。這個過程就像寄快遞應(yīng)用層你寫好一封信應(yīng)用數(shù)據(jù)。傳輸層你把信裝進(jìn)一個信封在信封上寫上“收件人張三端口80寄件人李四端口12345”。這個信封就是TCP或UDP頭部?,F(xiàn)在它變成了一個段SegmentTCP或數(shù)據(jù)報DatagramUDP。網(wǎng)絡(luò)層你把信封塞進(jìn)一個快遞袋在袋子上寫上詳細(xì)的收寄地址源IP和目標(biāo)IP。這個快遞袋就是IP頭部。現(xiàn)在它變成了一個包Packet。數(shù)據(jù)鏈路層快遞員拿到快遞袋為了在本地運輸他需要知道下一站送到哪個中轉(zhuǎn)站網(wǎng)關(guān)的MAC地址。他把快遞袋放進(jìn)一個運輸箱箱子上貼著“下一站XX物流點MAC地址”。這個運輸箱就是以太網(wǎng)頭部和尾部?,F(xiàn)在它變成了一個幀F(xiàn)rame。物理層運輸箱被搬上貨車轉(zhuǎn)化成電信號或光信號在物理線路上傳輸。接收方的過程完全相反像剝洋蔥一樣從物理層信號還原成幀去掉數(shù)據(jù)鏈路層頭部得到IP包去掉IP頭部得到TCP段最后去掉TCP頭部將原始數(shù)據(jù)交給監(jiān)聽對應(yīng)端口的應(yīng)用程序。這個“層層封裝”的過程是理解網(wǎng)絡(luò)抓包如Wireshark和協(xié)議分析的基礎(chǔ)。你在Wireshark里看到的一個數(shù)據(jù)包從上到下顯示的就是從以太網(wǎng)幀、IP包、TCP段到HTTP消息的完整解封裝視圖。3. 核心層協(xié)議深度解析從原理到“踩坑”了解了地圖我們得深入幾個關(guān)鍵“城市”看看??佳?08可能會考各層PDU的名稱、協(xié)議特點但我們要搞清的是它們?nèi)绾喂ぷ饕约澳睦锶菀壮鰡栴}。3.1 網(wǎng)絡(luò)層核心IP協(xié)議——互聯(lián)網(wǎng)的“郵政系統(tǒng)”IP協(xié)議是無連接、不可靠的盡力而為服務(wù)。它只管根據(jù)目標(biāo)IP地址盡力把包送到不保證順序、不保證一定送到、也不保證不重復(fù)。可靠性的工作交給了上層的TCP。IP地址與子網(wǎng)劃分這不僅是考點更是網(wǎng)絡(luò)配置的基石。一個常見的坑是子網(wǎng)掩碼配置錯誤導(dǎo)致“網(wǎng)絡(luò)不通”。比如兩臺主機192.168.1.1/24和192.168.1.2/24它們屬于同一子網(wǎng)可以直接通信。但如果一臺是192.168.1.1/25子網(wǎng)范圍192.168.1.0-127另一臺是192.168.1.130/25子網(wǎng)范圍192.168.1.128-255盡管IP地址看起來相近但由于不在同一子網(wǎng)它們之間的通信必須經(jīng)過路由器網(wǎng)關(guān)。路由表可以把它理解成快遞公司的中轉(zhuǎn)路線圖。執(zhí)行route printWindows或ip routeLinux命令就能看到本機的路由表。當(dāng)主機要發(fā)送一個IP包時它會用目標(biāo)IP地址逐條匹配路由表中的條目決定這個包該從哪個網(wǎng)卡發(fā)出下一跳地址是誰。路由條目中0.0.0.0/0指向的網(wǎng)關(guān)就是“默認(rèn)網(wǎng)關(guān)”所有沒有特定路由的包都發(fā)往那里。生存時間TTLIP頭中有一個TTL字段每經(jīng)過一個路由器值就減1。當(dāng)TTL減到0時路由器會丟棄該包并發(fā)送一個ICMP超時消息回給源主機。這個設(shè)計是為了防止數(shù)據(jù)包因路由環(huán)路而在網(wǎng)絡(luò)中無限循環(huán)。traceroute命令就是利用這個原理來探測路徑的。實操心得遇到“目標(biāo)主機不可達(dá)”或網(wǎng)絡(luò)間歇性不通首先用ping測試基礎(chǔ)連通性。如果ping不通緊接著用tracertWindows或tracerouteLinux跟蹤路徑看包是在哪一跳丟失的。這能快速定位問題是出在本地網(wǎng)絡(luò)、內(nèi)部路由器還是外部網(wǎng)絡(luò)。3.2 傳輸層雙子星TCP vs. UDP——可靠信使與快速郵差這是協(xié)議棧中最精彩、面試問得最多、也最容易在實際中出問題的一層。TCP面向連接的可靠傳輸TCP通過三次握手建立連接四次揮手?jǐn)嚅_連接這幾乎是必考的知識點。但更重要的是理解其狀態(tài)機。比如為什么主動關(guān)閉的一方在發(fā)送最后一個ACK后會進(jìn)入TIME_WAIT狀態(tài)并且通常要等待2MSL最大報文段生存時間的兩倍可靠地終止連接確保最后一個ACK能到達(dá)對端。如果ACK丟失對端會重發(fā)FIN此時處于TIME_WAIT狀態(tài)的主機能再次回應(yīng)ACK。讓舊連接的重復(fù)報文在網(wǎng)絡(luò)中消逝防止具有相同四元組源IP、源端口、目的IP、目的端口的新連接收到舊連接的延遲報文造成數(shù)據(jù)混亂。TIME_WAIT狀態(tài)過多會占用端口資源。在高并發(fā)短連接的服務(wù)器上如HTTP/1.0這可能成為性能瓶頸。解決方案包括啟用SO_REUSEADDR套接字選項允許端口重用、優(yōu)化應(yīng)用為長連接如HTTP/1.1 Keep-Alive、或者由客戶端主動發(fā)起關(guān)閉讓TIME_WAIT分散在客戶端。UDP無連接的簡單傳輸UDP頭部開銷小沒有連接建立和確認(rèn)機制速度快。但它不保證可靠、不保證順序。哪些場景在用UDP實時音視頻如視頻會議、直播。丟失少量數(shù)據(jù)包可能只是造成瞬間花屏或雜音但低延遲至關(guān)重要重傳舊的視頻幀沒有意義。DNS查詢請求-響應(yīng)模式簡單一次查詢一個包如果超時未收到響應(yīng)應(yīng)用層會重試。用UDP比建立TCP連接快得多。物聯(lián)網(wǎng)傳感器數(shù)據(jù)有些傳感器周期性上報數(shù)據(jù)單個數(shù)據(jù)包丟失不影響大局低功耗和簡單性是首要考慮。廣播/多播如DHCP、某些服務(wù)發(fā)現(xiàn)協(xié)議。一個關(guān)鍵協(xié)議ICMP雖然ICMP通常被劃在網(wǎng)絡(luò)層但它與IP協(xié)議緊密協(xié)作用于傳遞控制信息和差錯報告。ping命令用的就是ICMP Echo Request/Reply報文。traceroute則利用了ICMP Time Exceeded和Destination Unreachable報文。當(dāng)你的程序遇到“Connection timed out”或“No route to host”時底層往往是ICMP報文在傳遞這些錯誤信息。3.3 應(yīng)用層協(xié)議萬花筒從HTTP到工業(yè)協(xié)議應(yīng)用層協(xié)議定義了通信的具體語義。理解它們就是理解業(yè)務(wù)邏輯如何跑在網(wǎng)絡(luò)之上。HTTP/HTTPS必須深入理解。HTTP/1.1的持久連接、管道化HTTP/2的多路復(fù)用、頭部壓縮HTTP/3基于QUIC運行在UDP上的革命性變化。狀態(tài)碼更是日常調(diào)試的關(guān)鍵200 OK成功404 Not Found資源不存在500 Internal Server Error服務(wù)器內(nèi)部錯誤而**408 Request Timeout** 則表示服務(wù)器等待客戶端發(fā)送請求的時間超時。當(dāng)你看到408錯誤通常不是網(wǎng)絡(luò)層不通而是客戶端可能是瀏覽器、也可能是你寫的爬蟲或SDK在建立連接后沒有在服務(wù)器規(guī)定的時間內(nèi)發(fā)送完整的請求報文。DNS將域名解析為IP地址的分布式系統(tǒng)。理解遞歸查詢、迭代查詢、緩存機制。一個常見的性能問題是DNS解析慢或失敗這會導(dǎo)致應(yīng)用連接建立緩慢。在Linux下/etc/resolv.conf文件配置了DNS服務(wù)器在編程中要注意DNS緩存和異步解析。MQTT物聯(lián)網(wǎng)領(lǐng)域的主流消息協(xié)議基于發(fā)布/訂閱模式輕量、省電。理解其QoS等級0-最多一次1-至少一次2-恰好一次對于設(shè)計可靠的物聯(lián)網(wǎng)應(yīng)用至關(guān)重要。工業(yè)協(xié)議Modbus, CAN, PROFINET等這些協(xié)議通常運行在串行總線如RS-485或?qū)S镁W(wǎng)絡(luò)如CAN總線上協(xié)議棧比TCP/IP簡單但實時性和確定性要求極高。例如Modbus RTU是二進(jìn)制協(xié)議Modbus TCP則是將Modbus幀封裝在TCP報文中。調(diào)試這些協(xié)議需要專用的串口抓包工具或協(xié)議分析儀。4. 實戰(zhàn)如何利用協(xié)議知識排查網(wǎng)絡(luò)問題理論學(xué)得再好不會用也是白搭。下面我們模擬幾個真實場景看看如何運用分層的思想來解決問題。4.1 場景一Web服務(wù)間歇性無法訪問偶爾返回408現(xiàn)象用戶報告訪問公司內(nèi)部系統(tǒng)時有時很快有時白屏很久最后顯示“408 Request Timeout”。你作為開發(fā)者被叫去排查。分層排查思路物理層/數(shù)據(jù)鏈路層先檢查最基本的。服務(wù)器和客戶端所在的網(wǎng)絡(luò)是否穩(wěn)定有沒有網(wǎng)線松動、交換機端口閃爍異常可以嘗試在客戶端持續(xù)ping服務(wù)器IP看是否有丟包或延遲抖動。如果這一層有問題那么所有基于IP的應(yīng)用都會受影響。網(wǎng)絡(luò)層如果ping是穩(wěn)定的說明基礎(chǔ)網(wǎng)絡(luò)通路沒問題。檢查路由是否正常。對于內(nèi)部系統(tǒng)通常路由是簡單的但也要排除防火墻或安全策略攔截了某些IP包的可能。傳輸層問題開始聚焦。408錯誤發(fā)生在HTTP層但根源可能在下層。使用netstat或ss命令查看服務(wù)器上對應(yīng)服務(wù)端口如80或443的連接狀態(tài)。有沒有大量的TIME_WAIT或CLOSE_WAIT連接CLOSE_WAIT過多通常意味著你的服務(wù)器程序沒有正確關(guān)閉連接沒有調(diào)用close()。TIME_WAIT過多可能由于短連接高頻創(chuàng)建??紤]調(diào)整內(nèi)核參數(shù)如net.ipv4.tcp_tw_reuse、net.ipv4.tcp_tw_recycle但需謹(jǐn)慎或優(yōu)化應(yīng)用使用連接池。CLOSE_WAIT過多這是程序Bug的明確信號。需要檢查代碼確保每一個接受的Socket在業(yè)務(wù)處理完畢后都被正確關(guān)閉。應(yīng)用層HTTP這是408錯誤的直接發(fā)生層。服務(wù)器配置檢查Web服務(wù)器如Nginx、Apache的配置。client_header_timeout或client_body_timeout等參數(shù)是否設(shè)置過短在網(wǎng)絡(luò)慢或客戶端可能是移動端、或經(jīng)過復(fù)雜代理發(fā)送請求較慢時容易觸發(fā)超時。適當(dāng)調(diào)大這些超時時間??蛻舳诵袨樽ト】蛻舳税l(fā)出的網(wǎng)絡(luò)包用瀏覽器開發(fā)者工具的Network面板或Fiddler/Wireshark。觀察失敗的請求客戶端是否發(fā)送了完整的請求頭請求體是否很大且發(fā)送緩慢是否遇到了網(wǎng)絡(luò)抖動導(dǎo)致TCP重傳使得請求遲遲不能完整送達(dá)服務(wù)器中間件與負(fù)載均衡如果服務(wù)前端有負(fù)載均衡器如F5、Nginx檢查其配置和日志??赡苁秦?fù)載均衡器的健康檢查或會話保持策略導(dǎo)致了問題。根本原因可能在這個場景中最可能的原因是服務(wù)器配置的client_header_timeout太短例如只有5秒而某些客戶端由于網(wǎng)絡(luò)波動或自身性能問題發(fā)送HTTP請求頭的速度很慢超過了這個時限服務(wù)器主動斷開了連接并返回408。解決方案是適當(dāng)增加超時時間并優(yōu)化客戶端網(wǎng)絡(luò)環(huán)境或代碼。4.2 場景二嵌入式設(shè)備STM32IAP升級失敗現(xiàn)象通過UART或USB使用Ymodem協(xié)議對STM32進(jìn)行固件升級經(jīng)常在傳輸?shù)揭话霑r失敗日志顯示“協(xié)議錯誤”或“校驗失敗”。分層排查思路物理層這是最容易被忽略但問題最多的一層。檢查串口線/USB線是否接觸良好線纜是否過長導(dǎo)致信號衰減波特率、數(shù)據(jù)位、停止位、校驗位等串口參數(shù)在Bootloader程序和上位機軟件中是否設(shè)置得完全一致一個常見的坑是Bootloader使用了115200 8N1而上位機軟件默認(rèn)是9600 8N1。數(shù)據(jù)鏈路層在串口通信中沒有標(biāo)準(zhǔn)的數(shù)據(jù)鏈路層協(xié)議但Ymodem協(xié)議自身定義了“幀”的結(jié)構(gòu)。每一幀數(shù)據(jù)包含幀頭、幀序號、數(shù)據(jù)、CRC校驗等。傳輸失敗很可能是單幀數(shù)據(jù)在物理層傳輸時發(fā)生了比特錯誤。干擾如果設(shè)備在工業(yè)環(huán)境電磁干擾可能很強。考慮使用屏蔽線纜降低波特率以提高抗干擾性。緩沖區(qū)溢出Bootloader中用于接收串口數(shù)據(jù)的緩沖區(qū)是否足夠大如果上位機發(fā)送數(shù)據(jù)過快而Bootloader處理如寫入Flash較慢可能導(dǎo)致緩沖區(qū)被新數(shù)據(jù)覆蓋造成幀不完整。應(yīng)用層協(xié)議Ymodem理解Ymodem的工作流程。它是通過發(fā)送C字符啟動傳輸然后文件以128字節(jié)或1024字節(jié)的塊發(fā)送每個塊后有校驗。失敗時觀察上位機軟件和Bootloader的交互日志。握手失敗Bootloader沒有正確回應(yīng)C。檢查Bootloader的串口初始化、中斷接收邏輯。校驗失敗CRC校驗不通過。確認(rèn)雙方使用的CRC算法CRC-16是否一致。檢查數(shù)據(jù)傳輸過程中是否有字節(jié)丟失或錯位。超時Ymodem有超時重傳機制。如果網(wǎng)絡(luò)延遲大或設(shè)備處理慢可能導(dǎo)致超時??梢赃m當(dāng)增加超時時間。實操技巧在Bootloader中增加詳細(xì)的調(diào)試日志通過另一個串口打印出接收到的每一個字節(jié)、計算的CRC值、以及協(xié)議狀態(tài)機的變化。使用帶邏輯分析儀功能的USB轉(zhuǎn)串口工具可以捕獲物理層上的實際波形和數(shù)據(jù)字節(jié)與軟件日志對照能精確定位是硬件問題還是軟件問題。對于Flash寫入慢的問題可以考慮在Bootloader中先將數(shù)據(jù)塊緩存到RAM中然后快速寫入Flash或者使用STM32的硬件CRC加速校驗計算。4.3 場景三服務(wù)間RPC調(diào)用超時現(xiàn)象微服務(wù)A調(diào)用微服務(wù)B的接口經(jīng)常出現(xiàn)超時但直接pingB服務(wù)的IP和端口通配性測試telnet B_IP B_port又是通的。排查思路傳輸層telnet通只能說明TCP三次握手能完成即網(wǎng)絡(luò)層和傳輸層的基礎(chǔ)連通性沒問題。但握手之后的通信可能出問題。使用tcpdump或Wireshark在服務(wù)A或服務(wù)B的機器上抓包。觀察TCP握手是否真的成功SYN, SYN-ACK, ACK。握手成功后服務(wù)A是否發(fā)送了HTTP假設(shè)是HTTP RPC請求請求是否完整服務(wù)B是否回復(fù)了TCP ACK確認(rèn)收到了請求是否發(fā)送了HTTP響應(yīng)有沒有大量的TCP重傳Retransmission重傳意味著網(wǎng)絡(luò)丟包或擁塞會導(dǎo)致應(yīng)用層超時。有沒有TCP零窗口Zero Window通告這表示接收方可能是服務(wù)B的應(yīng)用層處理不過來緩沖區(qū)滿了導(dǎo)致發(fā)送方服務(wù)A停止發(fā)送數(shù)據(jù)。應(yīng)用層服務(wù)B性能檢查服務(wù)B的CPU、內(nèi)存、線程池狀態(tài)。是不是處理請求太慢導(dǎo)致堆積查看服務(wù)B的應(yīng)用日志看請求是否真的被處理處理耗時多久。超時設(shè)置檢查服務(wù)A的RPC客戶端配置。連接超時、讀超時、寫超時分別是多少是否設(shè)置得太短特別是在高負(fù)載或Full GC時服務(wù)B的響應(yīng)時間可能會變長。序列化/反序列化如果RPC使用了復(fù)雜的序列化框架如Protobuf、Thrift檢查是否有巨大的消息體導(dǎo)致序列化/反序列化耗時異常。鏈路中的中間件調(diào)用鏈路是否經(jīng)過API網(wǎng)關(guān)、負(fù)載均衡、服務(wù)網(wǎng)格Sidecar如Istio Envoy在這些節(jié)點上抓包或查看日志定位超時發(fā)生在哪一段。常見原因服務(wù)B的數(shù)據(jù)庫連接池耗盡、內(nèi)部依賴的某個慢接口、或者一次長時間的Full GC都可能導(dǎo)致單個請求處理時間過長超過了服務(wù)A客戶端設(shè)置的讀超時時間??蛻舳嗽诘却憫?yīng)時超時斷開而服務(wù)B可能還在繼續(xù)處理最終將響應(yīng)寫回一個已被關(guān)閉的連接觸發(fā)“Connection reset by peer”錯誤。5. 工具與命令網(wǎng)絡(luò)工程師的“瑞士軍刀”理論聯(lián)系實際離不開工具。這里羅列一些各層排查中最常用的命令和工具并解釋其輸出關(guān)鍵信息。層級工具/命令主要用途關(guān)鍵輸出解讀物理/鏈路層ip link(Linux)ifconfig(傳統(tǒng))ethtool(Linux)查看和配置網(wǎng)絡(luò)接口狀態(tài)、MAC地址、速率等。state UP表示接口已啟用。ethtool可查看驅(qū)動、鏈路速度、丟包統(tǒng)計等。網(wǎng)絡(luò)層pingtraceroute/tracertip addr/ifconfigip route/routenslookup/dig測試連通性、追蹤路由、查看IP配置、查看路由表、DNS解析。ping的time值反映延遲丟包率反映穩(wěn)定性。traceroute顯示路徑每一跳的延遲。傳輸層netstatss(更推薦)lsof -i:端口號查看網(wǎng)絡(luò)連接、監(jiān)聽端口、路由表、接口統(tǒng)計。ss -tlnp查看所有TCP監(jiān)聽端口及對應(yīng)進(jìn)程。ESTAB表示已建立連接TIME-WAIT/CLOSE-WAIT需關(guān)注。應(yīng)用層及全能Wireshark/tcpdumpcurltelnet/nc網(wǎng)絡(luò)抓包與深度協(xié)議分析。模擬HTTP等請求。測試TCP端口連通性。Wireshark過濾器ip.addr x.x.x.x,tcp.port 80,http。curl -v可顯示詳細(xì)的請求和響應(yīng)頭。綜合監(jiān)控nload/iftopnetstat -s實時查看網(wǎng)絡(luò)帶寬使用情況。查看各層協(xié)議的匯總統(tǒng)計信息如TCP重傳數(shù)。netstat -s的輸出中segments retransmitted過高表明網(wǎng)絡(luò)不穩(wěn)定。Wireshark抓包分析實戰(zhàn)技巧過濾是靈魂不要在海量包中盲目尋找。使用過濾表達(dá)式如http and ip.src192.168.1.100只看來自該IP的HTTP流量。關(guān)注TCP流右鍵一個TCP包 - “追蹤流” - “TCP流”可以將一次完整的TCP會話包括握手、數(shù)據(jù)傳輸、揮手的所有相關(guān)包提取出來并以對話形式呈現(xiàn)這對于分析HTTP請求/響應(yīng)、RPC調(diào)用等場景極其方便。專家信息Wireshark的“分析”菜單下的“專家信息”會匯總抓包文件中的警告和錯誤如重復(fù)的ACK、零窗口、連接重置等能快速定位潛在問題。統(tǒng)計功能使用“統(tǒng)計”菜單下的“對話”、“HTTP”等可以宏觀地看到哪些主機之間通信最多、HTTP請求的響應(yīng)時間分布等用于性能分析。6. 從學(xué)習(xí)到應(yīng)用構(gòu)建你的協(xié)議知識體系學(xué)習(xí)網(wǎng)絡(luò)協(xié)議切忌死記硬背。我推薦一種“自頂向下抓包驗證”的學(xué)習(xí)方法。從應(yīng)用入手選擇一個你熟悉的應(yīng)用層協(xié)議比如HTTP。用Wireshark抓取一次簡單的網(wǎng)頁訪問過程。層層剖析在Wireshark中從最頂層的HTTP開始看然后展開TCP層看三次握手、數(shù)據(jù)傳輸、四次揮手。再展開IP層看源目IP。最后展開以太網(wǎng)層看MAC地址。直觀地感受封裝過程。動手實驗自己寫一個最簡單的Socket程序。先寫一個TCP的“回聲服務(wù)器”和客戶端觀察連接建立和數(shù)據(jù)交換。再寫一個UDP版本的。在這個過程中體會bind(),listen(),accept(),connect(),send(),recv(),close()這些API是如何與協(xié)議棧交互的。關(guān)聯(lián)理論將你看到的現(xiàn)象和代碼行為與教材上的理論對應(yīng)起來。比如你的客戶端調(diào)用connect()時抓包看到的就是SYN包。調(diào)用close()時看到的就是FIN包。拓展場景用同樣的方法去分析你工作中接觸到的其他協(xié)議。如果是做Web開發(fā)深入研究HTTP/2、HTTPS(TLS)。如果是做物聯(lián)網(wǎng)去抓取分析MQTT包。如果是做底層嵌入式用邏輯分析儀或串口助手去看Modbus RTU的幀結(jié)構(gòu)。網(wǎng)絡(luò)協(xié)議的知識是“慢熱型”的它不會讓你立刻成為高手但會在你職業(yè)生涯的每一個排查線上故障的深夜、每一次設(shè)計系統(tǒng)間通信方案的討論中持續(xù)地提供堅實的支撐。當(dāng)你再看到“408 Request Timeout”你不會再感到茫然而是會下意識地打開Wireshark輸入過濾條件沿著協(xié)議棧一層層地向下探索直到找到那個隱藏在角落里的、錯誤配置的超時參數(shù)。這種能力遠(yuǎn)比通過一場考試更有價值。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
香蕉婷婷| 日韩中文字幕av在线播放| 欧美性色综合网| 青青草综合在线| 九九九九国产| 九九九久久久久| 性生活无遮挡纯毛片在线看| 怡红院久久老司机| av日韩在线观看电影| 精品无码一区二区| 日日爱99| 精品久久久久9999| 欧美色女人| 99热| 欧美伊人电影| 天天日天天爽| 电家庭影院午夜69久久夜色精品国产69乱 | 亚洲AV色图一区| 午夜福利 成人 91| 九九无码久久精品视频| 青青在线视频日韩欧美| 67194国产| 欧美线天码中字| 久综合国内精品自在自线| 欧洲中文字幕| 蜜乳av一区二区| 淫纸中9区| 密乳AV免费观看| 蜜臀色乳| 黄片在线免费在线观看| 亚洲人妻久久久| 91丝袜美女| 日本日逼高清| 精品国产乱码久久久久A| 国产精品农村妇女| 亚洲 欧美综合| 99精品九九九九九九| www.大香| 男人天堂2030| 另类 综合 日韩 欧美 亚洲| 精品久久久久久AV无码| 少好三P| 美中日韩无码| 性欧美91| 91人妻视频| 欧美的性爱网站免费| 北京专精特新企业招聘信息| 日本操逼视频免费| 97蜜桃综合| 96AV久久久| 国产精品麻豆免费视频| 亚洲麻豆18发?| 91搞逼视频| 熟女高潮合集-永久久久-成人AV| 桃花色涩综合影院| 夜夜爽夜夜| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 操逼操逼逼操操逼91| 亚洲欧美骚| 黑人精品欧美一区二区蜜桃| 曰韩人妻中文字幕在线 | 亚洲亚洲亚洲天堂天堂| 冬京热男人的天堂| 热热色色综合| 国产夜夜操| 日韩免费大片一级播放| 欧美色图欧美| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师 | 日韩欧美亚洲一区二区三区影院| 亚洲男人的天堂V| 国产精品视频麻豆入口| 四方色播| 久久一本大香蕉 | 91综合在线| 国产精品人妻无码久久久老鸭窝| 天天综合官网| 亚洲图片 欧美电影| 自拍六区| 欧美情色贴图| 亚洲一区二区麻豆影院| 亚洲欧洲日产国产综合网| 亚洲图片欧美偷拍| 91色婷婷综合久久中文字幕二区| 久久精品人妻一区| 91天堂丝袜美腿| 97这里都是精品| 精品人妻一区二区三区在线视频不卡| 亚洲资源网| 亚洲AO在线| 日本视频一区二区三区| 新视频sss国产| 五月天成人综合| 国产精品久久久久无码Av网曝门| 欧美色欧美| 亚洲综人| 啊啊啊啊啊啊啊在线| 日韩97视频!在线| AA丁香综合激情| www.大香| 最新中文字幕精品在线| 久久中出| 网友自拍第一页| 亚洲第二页| 九九热免费在线国产视频伊人五月| 九九色图| 日本精品不卡一二三区| 激情综合网五月婷婷五月天| AV免费在线播放一区| 啪啪啪东京| 中国人高清www色视频免费| 91高清日| 9丨久久九九九| JuliaAnnXXX888| 欧美色爱综合| 五码视频在线观看| 中文字幕三四区| 蜜臀99久久精品| 神马久久久久久久久| 九9热伊人| 久久精品72| 不卡九肏| 日韩天天本| 色999偷自拍拍| 国产日韩精品一区二区三区| 伦理日韩国产久久| 肉丝中文无码高清| 婷婷人妻激情| 97碰久久| 搞中出久久| 黑人精品XXX一区一二区| 特污精品女优骚货黄色视频在线免费观看| 精品一区二区三区麻豆| nuu12国产麻豆精品| 久久夜精品一区二区三区| 青青草手机在线免费观看| 九九久久久久久爱| 国产成人AV麻豆| 69精品人人人人| 制服诱惑亚洲一区二区三区在线观看| 干B视频伊人网| 欧美青青视频| 成人性爱视频在线看| 欧美精品亚洲精品日韩传电影| 天天影视综合色| 久操视频在线观看| 另类图片欧美激情综合| 精品亚洲国产成人av网站| 夜夜操av亚洲一区二区| 久久大黄片| 国产伦精品免编号公布| 亚洲狠狠入| 思思在线免费视频| 九九九九97| 色色热| 日本大香蕉综合网红本杳社区| 欧美日韩国产三级黄色| 日韩探花精品在线视频| 久久精品国产亚洲av水密被窝| 不卡一区二区日本视频| 91精品国产91综合久久蜜臀| 国产黄色小视频网站| 激情文学小说一区二区 | 天美av在线观看| 欧美熟妇视频 | 欧美性爱免费短视频| 激情视频一二三| 日本高清久久| 一级黄碟| 精品人妻一区二区三区四区| 国产精品色色| 欧美综合自拍成人自拍第二十页| 久久中出在线| 草草草草视频| 好淫网一二三视区| 乱久久久| 一二三四区电影| 国产区在线| 中文字幕五月婷婷免费| 五月丁香成人网| 97超碰色屌| 新怡红院| 免费看日产一区二区三区| 亚洲国产午夜真人一级片中文字幕精品黄网站 | 高清无码一区二区三区| 婷婷中文字幕| 久久久久久久久久久999| 欧美在线亚洲| 全球成人中文在线| 啊啊啊com| 久久久无码精品人妻二区 | 国产在线视视频有精品| 性性欧美| 欧美偷拍区| 91在线免费观看处女| 99视频自拍区| 婷婷中文网| 欧美情色男人的天堂| 精品久久久久久久| 99久久婷婷丁香| 丁香五月婷婷基地| 校园春色AV天堂| 免费簧片在线观看| 一本久道久久综合狠狠爱一密臀精 | 九九在线视频| 白嫩白嫩的午夜九久久久久久久久久久久成人剧场 | 国产精品丝袜在线| 高清无码学生妹高潮| 欧美内射少妇| 人妻一区二区三区| 韩国黄色片精品久久久| 狠狠色噜噜狠狠狠狠狠色综合久久| 久久九精品| 午夜影美女日鸡鸡天天视频国产| 白丝1区2区3区| 嗯啊抽插大香蕉网页| 女色视频社区| 97综合网| 夜夜操夜夜爽夜夜高潮| 91美女视频。| 97在线免费看| 五月天偷拍| 一区中文字幕二区日韩| 中文字幕在线免费观看2| 极品色社| 国产一区二区二区按摩精品啪视频| www.久久久久| 骚逼自拍99| 人妻乱仑一区二区三区| 亚洲诱惑| 色青青久久影视| 久久精品99| 精品黑人一区二区| 熟女精品日韩一区二区三区| 丁香色五月 97干| 久久这里只精品| www.五月天| 欧美中文综合| 男人的天堂色偷偷青青草视频婷婷网| 国产精品久久久久无码A√| 亭亭丁香激情| 福利伊人玖玖国产| 九九九九亚洲| 欧美狠狠弄| 亚洲综合中文字幕有码| 97综合在线| 99999无码| 亚洲欧美日韩免费电影| 久草看看看| 5252色欧美在线| 天天搞在线综合网| 九九国产热| 99色色网| 人人么人人操| 麻豆亚洲Av成人无码一区精品| 国产免费黄色一级大片| 亚洲精品熟妇1区2区3区。| 五月综合激情| 国产精品探花视频| 久久激情视频| 天天影视射综合网| 五月丁香啪啪啪| 蜜臀AV午夜精品久| 骚妻少妇精品性色无码四色A V| 精品国产91av一区二区三区 | 野狼激情网| 99久国产精品午夜性色福利| 久久久免费视频18| 欧亚久久偷拍视频| 九九玖玖精品| 夜夜草网站| 日日摸夜夜夜夜爽| 一本大道青青| 亚州色阁| 色情亚洲日本成人| 国产精品经典一卡久久久| 欧美激情中文字幕另类小说| 性欧美精| 国产美女精品| 日本一区二区电影网站| 午夜视频好爽啊| 人妻丰满熟妇av无码区蜜桃| julia高潮后不停追击中出| 啪啪啪东京| 久久少妇人妻| 色情亚洲日本成人| 丁香啪啪| 大伊香蕉在线视频免费| 操逼逼一区视频| 精品久久97| 亚洲涩图欧美| 伊人97色天使| 免费视频在线观看啊啊啊啊啊| 日韩性爱再线视频| 91成人高清在线观看| 91美女视频在线观看| 久久久国产护士丝袜美腿一| 色大香蕉97N| 99999无码| 丝袜美腿欧美| 亚洲欧洲综合视频在线| 国产精品探花在线| 自拍偷拍 高清无码| 婷婷干黄色| 狠狠爱夜夜| 色亚州人久干视频在线观看免费版 | 亚洲女人毛茸茸91| 亚洲综合九| 人妻少妇三级| 色制服丝袜夫妻av一区| 9久久美女首页| 国产怡红院| 亚洲不卡av在线| 女优视频第10页| 91性高潮久久久久久久久| 丝袜美腿制服人妻二区中文字幕| 青娱乐福利99| 国产精品精品系列在线观看| 强奸抽插av| 9丨久久九九九| 国产97综合| 欧美少妇高潮久久91| 人妻少妇色综合| 日本三级小说中文字幕| 欧美日韩免费专区在线| 好淫网一二三视区| 99re在线观看| 五十路六十路七十路熟婆| 亚洲色人阁| 国产超碰| 久操网线| 精品国产无码中文| 国产日韩色综合| 国产精品久久久久999| 涩五月婷婷| 红杏大香蕉| 国产不卡片| 久久9 9 9精品| 久久鲁夜| 少妇一区二区三区| 老司机深夜18禁污污网站| 亚洲 欧美 偷拍 唯美| 免费作爱一级视频| 久久婷婷精品| 欧美 青青草| 超碰97欧美日韩| 丝袜足交视频| 中国一级特黄大片护士| 国内偷自视频区视频综合| 温婉少妇玩3p| 插入综合网| 级品肉射| 国产精品乱码久久久久| av网站在线观看了| 九九在线精品| 亚州久久9| 99999久久久久9国产精品| 亚欧精品久久久久久久久久久| 美日韩一卡二卡三卡免费人妻精品| 麻豆国产第一| 亚州综合| 久9视频| 乱码熟妇人妻久久久| 超碰在线1234区| 中欧人妻丝袜中文字幕| 黄片www.| 欧美人妻色| 一卡二卡三卡| 草草草视频在线免费看| 强奸乱亚洲| 欧洲精品在线播放| 美女裸体无遮挡永久免费观看网站| 日逼视频日本| 欧美性暴力猛交XXXX | 丝袜 中出 制服 人妻 美腿 中文字幕| 91色综合| caorenqi shipin| 亚洲日韩久久精品一区| 免费在线看黄片av| 五月花婷婷| 欧美久久久15P| 97网色| 一区三区啪啪| 激情四射熟女丝袜| 天天干人人看综合| 天天干美少妇一区| 亚洲图片91| 日韩av不卡在线观看| 97se综合网| 亚洲婷婷丁香在线| 中文字幕大片三级狠狠干| 日日碰视频网| 欧美aaaaaaa| 中文字幕乱碼在线| 一区二区三区视频| 防屏蔽在线视频| 99re6国产精品99re| 九九视频黄色片| 欧美成不卡网| 国产亚洲精品激情| 亚洲日韩青青草色月| 日本性感人妻91| 午夜激情床戏激情| 久久老女人| 久久精品国产精品亚洲艾通辽熟妇 | 日本日皮视频逼| 不卡一区视频| 丰满熟女一区二区三区在线播放| AA丁香综合激情| 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 嗯嗯啊啊好大好爽| 凹凸久久人人| 国模91| 黄色免费网页无码| 在线 欧美 亚洲| 亚洲女毛多水多21P| 色偷综合| 在线观看免费视频国产| 素颜老阿姨乱情色| 人、人、摸,人、人、草| 很很干很很操| 蜜臀久久99精品久久久久久成人小说 | 欧美色人| 欧美中文字幕一区| 亚洲最新av无码成人精品区| 久久宗合亚洲| 国产超碰在线| 国产精品白丝| 99www.bibizy香蕉资源国产一区二区三区高清 | 亚州高清av| 白嫩国模丰满一二三区| 天美传媒麻豆一区二区三区国产精| 国产三区免费在线观看| 欧美日动态视频| 在线色导航| 久久久久久久综合,国产| 国产亚洲精品自在线亚洲情侣| 欧美在线亚洲| 亚洲AO在线| av在线免费一区二区| 蘋果手機免費看成人Av| 日韩在线观看中文字幕视频| 熟女激情综合网| 天天综合网网欲色| 欧美72网页| 国产精品视频精品一二| a男人的天堂久久一级A毛片| 天天综合网1| 青青操综合网| 久9爱精品| 91色噜噜狠狠| 日本中文字幕在线视频| 亚欧免费观看视频| 视频在线97| 久久久久成人蜜桃精品| 9久久久久| 日日干夜夜骑| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 九月丁香婷婷| 欧美性爱日韩性爱| 1769成人国产精品视频| 亚洲黄色网址| 美腿色图| 国产精品久久久无码AV网站| 人人摸人人入| 色噜噜人妻av中文字幕| 麻豆一区二区三区精品| 女人爽到高潮久久久| 秋霞无码av鲁丝片一区| 久久丁香久草综合网| 夜夜夜夜久久久久| 久久视频少妇美女| 亚洲色图20p| 91狠狠综合久久| 狼狼色丁香久久婷婷综合五月| 亚洲第一视频 欧美风情 日韩| 青青草大香蕉在线视频| 免费视频无码| 无码日韩网站| 亚洲国产欧美中日韩成人综合视频| 日韩成人私密一级精品av| 超碰超碰超碰超碰的大鸡吧操黑丝袜| 激情啪啪视频| 久久久久久波多野吉衣高潮| 夜夜操av亚洲一区二区| 亚洲。日韩。欧美| 99热免费| 亚欧精品久久久久久久久久久| 大伊香蕉在线视频免费| 日日摸夜夜夜夜爽| 性爱免费视频成人| 人人操人人操人人操人人操人人操人人人11.CM | 99热在线观看| 9久久精品| 欧美专区在线| 91精品丝袜久久久久久无码人妻| 亚洲熟妇自偷自拍另欧美| 影音先锋国产精品| 在线性黄高清免费视频| 欧美v亚洲v日韩v最新在线二区| 国产中文大片资源中文字幕| 亚洲成人贴图| 欧美日韩一干二干| 亚洲视频二区 | 久久精品人妻一区| 国产成年女黄特黄| 无码不卡八戒| 无套内射人妻在线播放| 日韩午夜精品一区二区三区电影| 操逼视频色| 欧美性爱无码一区二区三区| 国产精品一区二区亚洲人成毛片| 国产日韩欧美中文在线播放| 国产午夜在线观看视频| 台湾成人无码AV| 99在线无码精品秘 入口黑人| 国产精品亚洲天堂网址| 久久精品国产AV一区二区三区| 中文字幕日韩专区精品系列 | 97国产综合欧美| 亚洲国产剧情少妇激情| 91爱看| 91网站18+| 亚洲第一页色网| 久久夜夜| 国产日韩区| 日韩一级片在线看| 中亚精品极乱| 日韩精品高清资源在线| 天天激色| 九九九九九九九九九国产精品| 亚洲伊人青青草| 亚洲久久久| 欧美性爱综合,免费| 亚洲蜜乳av| 国产高清MV操逼视频| 欧美一级黄片免费播放| 久久9精品视频| 中出后入| 免费操逼91| 美女极品一区二区三区| 玖玖综合.com| 久久久久久久久久久久黄色| 夜夜操中文字幕| 2017天天插| 天天日天天搞天天干| 中文字幕一区二区日韩网| 国产亚洲精品自在线亚洲情侣| 欧美综合97www| 久热大香蕉网站| 欧洲亚洲少妇| 国产真实野战在线视频| 台湾佬中文娱乐自偷自拍| 91色堂| 国产福利合集| 国产色呦呦| 久操 高清| 亚洲激情视频| 校园春色亚洲色图| 亚洲欧美国产成人综合不卡| 99热99re超碰精品| 大香蕉99re| 太久视频| 91欧美另类| aV中亚| 日欧操屄视频| 欧美第二页午夜| 久久久久久亚洲中文| 九九热精品| 伊人视频| 亚洲国产午夜真人一级片中文字幕精品黄网站 | 综合亚洲欧美精品日韩?v| 在线观看高清AV| 婷婷国产精品九区| 亚洲色交| 99热这里是精品| q2午夜理论片夜色av| 欧美 精品国产制服第一页 | 清纯唯美综合| 三级AV入口| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 亚洲成人在线高清| 五月天婷婷小说| 亚洲激情欧美色图 | 夜夜高潮夜夜爽夜夜爱爱一区| 日韩乱伦影音先锋| 亚洲成人色情五月天丁香花| 人人看人人插| 久久久久9999妇女| 国产无马在线| 国产青视频| 日韩性爱啪啪视频| 欧美亚男人的天堂| 国产超碰国产97| 久久综合18p| 黄页18禁| 中韩中文字幕在线观看| 91在线无码精品秘 软件| 亚洲的天堂网| 亚洲熟女一区| 啪啪视频亚洲第一| 日日碰狠狠添天天爽超| 亚洲毛片久久| 亚洲第一页欧美| 久久女人一区二区三区| 大香蕉手机在线视频| 后入式999| 熟女人妻一区二区三区| 操B久久| 中日高清无码操逼视频| 377p欧洲日本亚洲大胆| 熟女人妻一区二区三区| 天天搞在线综合网| 久久国产对白激情浪潮| 青春草A| 九九国产热| 91爱做| 伊人网免费视频| 国产一在线观看| 日韩精品熟妇| 久久激情婷婷| 国产三级片在线观看| 日韩色女精品| 天堂男人网| 国产欧美日产一区二区三区 - 国产欧美日| 人妻免费观看| 大香蕉久| 老熟女乱伦片| 夜夜夜夜爽| 99成人| 精品人妻一区春色| 中文激情网| 欧美性爱精品七区| 久久成人午夜狠狠| 91N欧美| 久久久久久亚洲中文| 少妇特黄一区二区三区| 国语人妻精彩刺激| 性色av网站| 啊啊啊轻点在线观看| 色五月丁香五月| 90后后入| 九九亚洲视频| 日本十八禁免费看污网站| 欧美色亚洲色| 熟女色图在线| 成全在线观看免费观看| 春色综合网| 亚洲精品1区| 国产日本久久免费精品| 91亚洲综合在线| 国产刺激视频| 欧美,日韩,亚洲视频| 色臀av| 加勒比av网| 日本不卡码黄色| 丁香五月婷婷基地| 麻豆国产97在线| 香港久久久| 色哟哟-国产专区| 综合久久六月久久婷婷| 91狠狠| 97操97干| AV在线资源| 久久婷五月| 欧美激情视频在线一区| 男人的天堂久久| 熟妇一区二区三区| 日韩乱伦影音先锋| 日韩在线观看三级电影| 任我爽在线视频免费观看| 五月婷婷丁香| 家庭乱伦国产| 免费草草草草草视频| 69超碰综合| 日韩欧美中文日韩欧美色| 狠狠爱大香蕉| 好淫网一二三视区| 丁香五月久久| 国产又黄又爽| 亚洲综合色图欧美| 欧亚日本情色| 在线观看 99热| 玖玖爱一区在线| 久久人人爽爽爽人久久久| 久久熟女人| 激情网五月天| 五月天婷婷基地| 大香蕉丝袜一级片| 99热91| 中文字幕日韩人妻视频一区二区三区| 欧美一区二区三区互相| 午夜视频黄| 亚洲脚交| 久久久久女教师免费一区 | 99爱在线视频| 色久综合| 九九九九久久久| 久久久999日本大片| 亚洲欧美精品91| 久久五月份| 97超碰碰碰| 97在线免费看| 用力操死我| 求求你操操我| 精品九九淫乱男| 人妻无码后入| 久久久久9999精品九九九| 青青草成人视频在线观看二区| 亚州色图欧美| 爱丝福利| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 男人的天堂2019AV| 色爱国产| 天天欧美欧美亚洲网| 日本污ww视频网站| 狠狠久久亚洲欧美专区| 人人澡人人爽人人精品| 九九成人精品| 大香蕉日亚洲日本亚大 | 亚洲经典啪啪| 花野真衣| 97亚洲欧美日韩| 91美女在线视频| 啊啊啊啊好大好硬啊啊啊啊啊 | 日韩资源网| 色九九久九九| 超碰97人人cao| 蜜臀99久久精品久久久久久| 视频不卡中文字幕| 不卡av在线中文字幕| 中文自拍欧美影视| 黄色大片一区二区密桃丝袜| 中文字幕在线观看丝袜| 欧亚洲精品有视频| 东北女人被操| 天堂亚洲精品| 欧美碰碰综合色| 97在线免费观看视频| 一区二区影视| 国产人妖的免费的视频| AV一起草在线| 操逼操逼逼操操逼91 | 人人操人人搞人人草| 99久在线精品99re8热| 精品国产污一区二区三区| 国产第11页| 久久风骚城市| 国产精品久久天天干| 美女自卫慰黄网站免费| 啪啪91| 一区二区三区男女操逼黄色小电影| 国产丰满熟夫69mpp| 天天干夜夜鈤| 九月丁香综合网| 欧美最婬乱婬爆婬性视频| 中文字幕精品亚洲熟女| 亚洲欧洲日本精品中文a∨| 免费中文在线| 久久大线蕉一区| 9999久久久| 一区二区娱乐网站| 中文字幕神马久久| 亚洲中文字幕精品一区| 逼逼逼逼操操操操操操操操操午夜剧场| 九九热免费国产视频婷婷伊人| 日本精品一区二区三| 日韩福利综合一区| 人妻夜夜爽天天爽麻豆三区网站 | 思思热在线视频在线| 超碰免费在线| 日本日日色视频| 国产精品96| 五月婷婷六月天| 蜜臀AV成人精品蜜臀| 人人操欧美风骚| 久久久婷婷| 精品久操| 欧美精品日韩久久久九| 99色综合| 东北操逼| 一起草日韩| 亚洲情色91| 骚逼一区二区| 人妻一区二区三区视频 | 91性高| 日韩精品一二三| 日韩婷婷| 欧美色图另类图片| 干婷婷综合网| 天天看天天综合成人网| 天天爽入口| 久久久精品视频免费观看| 久久久专区| 综合久久久久久久综合网| 久久久久久久久久久97| 九九九网站| 久久久久久久久久久久久9999| 亚洲色人阁| 国产黄a三级三级三级av在线看| 色九九九九九九| 果冻国产精品麻豆成人av| 91碰碰| 在线观看成人性爱免费小视频| 不卡超碰护士AV在线免费播放| 日本不卡五区| 亚洲综合影视| 欧美一区二区日韩三区| 91爱看| 围产精品一区二区三区视频播放| 激情五月丁香五月| 久久激情四射婷婷丁香五月天| 日本精品第一视频在'| 精品国产乱码久久久久久日本公司| 成人性爱美曰韩| 超碰久草| 人人操AV| 狠狠操,使劲操| 婷婷五月天无码| 九月丁香婷婷色| 日本久久久久久久久久| 人妻熟女av国产网站| 91视频综合在线| A一区片| 欧美日日人人天天| 思思热在线观看| 丰满人妻被猛烈进入中| 天美传媒AV国产在线| 91三级理论片播放器| 亚洲情色 自拍| 大鸡吧尹人在线| 青娱乐999| 国产美女高潮视频| 色女女女导航| 乱伦a片视频| 无码外流操逼视频| 资源在线观一 二| 另类天堂| 十八禁视频网站| 亚洲国产综合久久天堂| 亚洲精品欧美专业| 色香在线| 久久精品99久久久久久| 夜夜高潮夜夜爽国产伦精品| 久久久久女教师免费一区| 91欧美大片| 中国乱伦一区二区| 人妻少妇被猛烈进入中| 97任你吞精| 欧美三级一级| 日韩精品人妻中文字幕不卡乱码| 青青草国产一区二区三区| 亚洲欧美清纯| 日本五十路熟女一区二区| 日本三级大片| 精品人妻伦一区二区三区久久| 欧美日韩狠狠爱| 中国zzijzzijzzwww精品| 国产欧美亚洲精品a第2页| 麻豆久久久久久久久丝袜| 国产高清在线自在拍69| 欧美啪啪啪91| 免费av大片| 成人热久久精品| 97综合激情| 日本操嫩b网| 丝袜天堂| 可以免费看黄片的视频| 激情综合网激情五月天| 青青草在线视频美女| 国产不卡免费在线视频| 欧美亚洲高清不卡| 日本高清视频xxxx| 91亚州欧美| 欧美激情 亚洲色图| 探花激情视频| 在线 欧美 亚洲| 性做久久久久久免费观看软件| 亚洲精品一区二区免费在线观看| 91精品人妻偷情| 91天天综合网,天天综合网| 天天综合欧美| 欧美se亚洲| 国产女人高潮嗷嗷嗷叫小说| 少妇天堂网络| 日韩无码三级影院| 午夜呻吟欧美| 涩综合导航| 北京美女一区二区| 爱爱动态试试看6 0秒| 日本成人免费一区二区三区| 亚洲色图欧美视频| 日本国产二线女色| 清纯唯美综合| 人人妻人人操人人乐| 国产熟女| 婷婷丁香一区二区三区| 国产精品久久久久久久AV大片 | 亚洲成人福利电影免费| AV男人天堂网| 久久老子无码午夜伦不卡| 在线综合 亚洲 欧美中文字幕 | 亚洲黄色影视| 欧美日韩国产一区二区小黄片大全| 日本精品人妻少妇一区二区| 麻豆天美91| 天操天操夜操夜月月年年操操| 成人亚欧免费视频| 97色色色| 怡红院网站在线视频| 欧美性,色九九| 大香网伊人久久综合| 亚洲中文字幕熟女| a片亚洲一本通视频| 熟女丰满人妻一区| 久久香蕉综合一本到3atv| 黑人娇小av在线播放 | 色香欲天天天天综合色| 97中文字幕色| 美女露胸露奶头| 天天综合91在线| 欧美黑人猛交春色影视大全| 黄色av一区二区在线| 国产女乱淫真高清免费视频| 粉嫩av在线| 96一区二区| 777超碰| 色色97爱| 清纯唯美综合| 美女91在线| 最近二区三区视频大全| 超碰97欧美| 放黄片放3级黄片没穿衣服| 亚洲天堂加勒比| 国产 日韩 欧美一区| 五月婷亚洲精品天堂| 在线视频亚洲无码| 欧美欧美啪啪视频| 天天操天天干一区二区| 无码高清专| 六月色婷婷| 91欧美偷拍| 美女上床网站| 日本亚洲嫩草影院啪啪| 淫荡网址| 欧美亚州综合网图片| 精品人妻免费观看| 加勒比久久综合网高清| 99在线观看| 一区二区三区蜜桃成人撸久久东京热| 天天日天天屌天天操| 九九九成人| 免费久久一级毛片大黄| 牛黄色久午久| 日韩一区二区熟女| 久久熟女嫩草成人片免费| 色香天天| 大伊香蕉在线视频免费| 少妇 综合| 中文字幕第二页| 人人看黄色视频| 激情综合五月| 日韩丝袜高跟制服在线观看| 蜜臀久久99精品久久久久| 国产精品视频麻豆入口| 亚州综合电影| 中文字幕三四区| 综合久久中文字幕综合日韩精品| 久久久99999久网站| 久久精品久| 婷婷五月天成人网| 天操天操夜操夜月月年年操操| 国产兽交视频在线播放| 东京日日夜夜| 人人妻人人澡人人爽人人精品浪潮| 精品九九国产无码| 久久成年精品| 少妇色| 日韩天堂av电影在线观看| 蜜桃臀av一区二区| 91精品国产麻豆国产自产在| 亚洲999综合| 欧美伊人久久综合网| 秋霞一级视频在线观看免费| 中文字幕人乱码中文字的预防方法| 色欲久久久久综合网| 在线人妻熟女一区二区三区四区五区| 大色综合| 欧美三级免费伊人| 日韩精品碰碰| 久久同城AV| 日韩av影片在线观看| 九七人妻在线| 九九色色| www熟女乱伦com| 99re在线视频| 亚洲日本加勒比在线| 农村女一级毛卡片| 老鸭窝黄色视频网站| 欧美日韩操逼动图| 欧美碰碰综合色| 天无日色综合| 国产精品嫩草影院免费| 职场同事知名国产国产精品久久欧美日韩 | 久操免费电影| 久热99| 日本孕妇一区二区视频操逼免费看| 久久精品免费| 亚洲囯产精品女人久久久| 成人草草视频| 曰本精品久久久| 亚洲成人综合在线| 欧美日韩久久精品爱爱| 德国一二三不卡| 国产乱伦性爱AV| 另类亚洲一区二区三区| 97ai亚洲| 国产精品高潮久久AV| 日韩欧美一级特黄大片| 最新无码国产| 2017天天插| 抽插爽| 一区二区三区 丝袜 高跟 美腿| 欧美性爱18观看| 日韩一区二区精彩视频| 欧美夜夜狠| 啊啊啊操死我| 99re在线视频国产| 久久久9品一区二区三区| 国产 亚洲 一二三四| 久久久啊啊啊| 精品女同一区| 神马九九九| 宅男91视频在线播放| 五月天激情小说| 久久精品男人的天堂| 欧美日韩免费专区在线| 日本熟妇人妻一区二区三区| 欧美少妇第一页| 嗯啊不要啊在线 | 免费99精品国产自在在线| 97玖玖超碰| 99操| 色哟哟1区2区| 女人天堂网| 国产九区| 久久久精品九| 久久AV无码AV| 成全动漫视频观看免费下载| 男女啊啊啊啊啊| 国产精品熟女一区二区三区| 中国韩国明星一极片一区乱码毛片人妻熟女一区二区三区 | 狠狠激情综合狠狠操中文字幕| 在线播放免费av福利片| 日韩偷拍一区二区三区| 国产 日韩 欧美高清| a亚洲欧美色欲| 美國A片| 欧美日韩国产传媒在线精品| 久久偷拍人| 欧美少妇高潮视频| 波多野42部激情无码喷潮| 精品人妻一区| 久久欧美1卡2卡3| 男生女生啊啊啊啊| 亚洲第一页色网| 国产欧美精选激情视频| 91黑人无码激情在线| 久久综合女优| 91爱| 偷窥自拍亚洲天堂网爆| 躁躁日曰躁2020| 97久久久| 中日高清无码操逼视频| 啊啊啊啊啊啊好湿好爽视频| 亚洲图片欧美色| 一区二区三区探花在线观看| 青青草在线视频人人想人人上| 欧美天堂日韩三级国产传媒| 精品久久久久久久| 韩国一级婬片A片AAAAA| 中国小夫妻勾搭露脸淫荡对白| 一区二区三区看视频| 久久久免费一级黄片| 麻豆成人av| 亚欧免费| 国产精品小视频一区二区三区| 综合网~91综合网| 91久久久亚洲| 天天日天天爽| 欧美精品庄| 欧美日韩资源在线| 精品久久久一本一道| 人人扣人人操| 69精品| 美女露胸露屁股| 97 色综合| 人妻精品4K4K4K4K4| 秋霞操逼片| 精品人妻一区春色| 久久激情亚洲精品无码?V| 在线小视频| 在线v中文字幕一区二区三区| 夜色97| 啊啊啊啊嗯嗯嗯用力好爽 | 精品久久久不卡一区二区| 亚洲日本激情| 黑人精品欧美一区二区蜜桃| 日韩精品.久久精品.AV女优.天美传媒| 久热一区二区| 欧美日动态视频| 亚洲欧美精品一区天堂久久 | 91麻豆天美国产欧美高潮| 天美传媒国产原创中文字幕亚洲欧美另类 | 久久久亚洲Av| 天天在线91| 中文字幕一区 二 区 三 四 五 区日 日 骚 | 欧美一级美片在线观看免费| 天堂伊人久久| 91丝袜在线观看视频在线观看| 97国产精品久久久久| 骚女天天综合网| 日本一二区免费| 日韩不卡a级视频专区| 国产精品盗摄 偷窥盗摄| 老熟妇一区二区三区啪啪| 超碰91在线| 亚洲精品美女久久久久久久久| 午夜精品久久一区二区| 呻吟 欧美 日本 中出| 精品国产99| 蜜桃精品一区二区三区ww| 人妻熟女字幕一区二区| 日韩av在线免费网站| 内射老妇BBWX0C0CK| 久久久性| 黄色操人| 亚洲欧美色图小说| J?P?NESEHD熟女熟妇伦| 张柏芝国产一区在线观看| 九九九九九九九九九国产精品| 大但人体久久久久| 天天性射网| 少妇高潮一区二区三区在线| 99re在线视频这里只有精品| 丝袜美腿射精91| 午夜综合在线| 激情综合 婷婷五月 红杏| 天天综合网亚洲综合网| 嗯嗯啊好大| 超碰午夜| 亚洲动态色图| 亚洲AV无码秘 蜜桃臀国精产品| 97欧美日韩| 精品国产91内射久久| 在线无码操| 日本午夜精品理论片A级APP发布| 亚洲aV无码成人在线观看| 九九九九九九九精品视频| 亚洲精品一区二区三区新线路| 色香阁在线|