日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

FTP連接失敗排查:拒絕連接與沒(méi)有到主機(jī)的路由分層定位

FTP連接失敗排查:拒絕連接與沒(méi)有到主機(jī)的路由分層定位 FTP 這個(gè)東西說(shuō)起來(lái)老但真到要用的場(chǎng)合一點(diǎn)不含糊——老系統(tǒng)的對(duì)賬文件、設(shè)備日志回傳、第三方接口的批量數(shù)據(jù)交換很多還壓在它身上。而一旦連不上報(bào)出來(lái)的那兩句話(huà)往往只有兩種形態(tài)ftp connect: 拒絕連接和ftp connect: 沒(méi)有到主機(jī)的路由。前者是 TCP 層被人當(dāng)面關(guān)上了門(mén)后者是網(wǎng)絡(luò)層壓根沒(méi)找到門(mén)在哪。這兩種報(bào)錯(cuò)看起來(lái)都像“連不上”但排查路徑幾乎是兩條不同的路混著查只會(huì)把自己繞進(jìn)去。這篇內(nèi)容面向的是正在被 FTP 連接問(wèn)題卡住的人不管是剛接手運(yùn)維的新手還是寫(xiě)了幾年腳本、被客戶(hù)一句“你們 FTP 連不上”懟回來(lái)的開(kāi)發(fā)。下面我會(huì)把這兩類(lèi)報(bào)錯(cuò)的底層成因拆開(kāi)講清楚再給出一套可以照著敲命令的分層排查流程最后附上被動(dòng)模式、防火墻、云上安全組這些實(shí)際最容易翻車(chē)的環(huán)節(jié)。文中涉及的系統(tǒng)和配置均按通用發(fā)行版描述具體路徑以你自己環(huán)境為準(zhǔn)。1. 先搞清楚兩種報(bào)錯(cuò)到底差在哪很多人排查 FTP 的第一步是打開(kāi)客戶(hù)端反復(fù)重連看運(yùn)氣。這個(gè)動(dòng)作除了消耗耐心沒(méi)有別的產(chǎn)出。真正該做的第一件事是把這兩句報(bào)錯(cuò)翻譯成網(wǎng)絡(luò)分層里的具體位置。它們對(duì)應(yīng)的不是同一個(gè)層也不是同一類(lèi)故障。1.1 拒絕連接TCP 層收到的那個(gè) RST 包拒絕連接Connection refused在協(xié)議層面的含義非常明確客戶(hù)端發(fā)出了 SYN對(duì)端回了一個(gè) RST。這說(shuō)明什么說(shuō)明數(shù)據(jù)包已經(jīng)成功到達(dá)了目標(biāo)主機(jī)路由是通的目標(biāo)主機(jī)的內(nèi)核也正常處理了這個(gè)包只是內(nèi)核告訴客戶(hù)端“這個(gè)端口上沒(méi)有任何進(jìn)程在等你的連接”于是回了拒絕。這條鏈路里路由器、交換機(jī)、中間網(wǎng)絡(luò)設(shè)備全都是好的問(wèn)題百分之百出在目標(biāo)主機(jī)這一側(cè)的應(yīng)用層或者主機(jī)防火墻層。你可以把它理解成地址找對(duì)了樓也進(jìn)去了前臺(tái)告訴你“這個(gè)房間沒(méi)人”。具體到 FTP21 端口被拒絕最常見(jiàn)的幾個(gè)原因按出現(xiàn)頻率排大概是FTP 服務(wù)進(jìn)程根本沒(méi)起來(lái)或者起來(lái)之后崩了服務(wù)起來(lái)了但只監(jiān)聽(tīng)了127.0.0.1外部從公網(wǎng)或內(nèi)網(wǎng)其它機(jī)器連進(jìn)來(lái)就等不到主機(jī)防火墻用了REJECT --reject-with tcp-reset這類(lèi)策略主動(dòng)回 RST端口寫(xiě)錯(cuò)了客戶(hù)端連 21服務(wù)端改成了 2121或者中間做了端口映射但映射規(guī)則沒(méi)生效端口被別的進(jìn)程占了FTP 啟動(dòng)失敗表面上像是沒(méi)開(kāi)。注意最后一條特別有迷惑性。systemctl status顯示 active但實(shí)際綁定失敗了這種情況在配置改過(guò)端口、或者機(jī)器上跑了兩套同類(lèi)服務(wù)時(shí)很常見(jiàn)。1.2 沒(méi)有到主機(jī)的路由網(wǎng)絡(luò)層就已經(jīng)斷了沒(méi)有到主機(jī)的路由No route to host是另一回事。它通常意味著客戶(hù)端的協(xié)議棧在發(fā)包階段就沒(méi)有找到可達(dá)路徑或者是中途收到了 ICMP 的不可達(dá)消息。跟“拒絕連接”比起來(lái)它更靠下、更靠前。典型場(chǎng)景有這么幾類(lèi)。第一類(lèi)是客戶(hù)端本機(jī)的路由表里沒(méi)有到目標(biāo)網(wǎng)段的條目也沒(méi)有默認(rèn)網(wǎng)關(guān)包發(fā)不出去。第二類(lèi)是目標(biāo)主機(jī)不在同一個(gè)二層網(wǎng)絡(luò)中間網(wǎng)關(guān)不認(rèn)識(shí)這個(gè)網(wǎng)段。第三類(lèi)是防火墻策略把包丟了并且回了一個(gè) ICMP host prohibited客戶(hù)端就會(huì)把它解釋成“沒(méi)有到主機(jī)的路由”。第四類(lèi)是 ARP 解析失敗同網(wǎng)段內(nèi)目標(biāo)主機(jī)沒(méi)響應(yīng) ARP 請(qǐng)求內(nèi)核報(bào) host unreachable。這里有個(gè)很關(guān)鍵的認(rèn)知點(diǎn)沒(méi)有到主機(jī)的路由不一定真的是路由問(wèn)題。如果防火墻用REJECT --reject-with icmp-host-prohibited客戶(hù)端收到的就是 ICMP 類(lèi)型 3 代碼 10表現(xiàn)和真的路由不通幾乎一模一樣。我在實(shí)際排查里遇到過(guò)好幾次最后發(fā)現(xiàn)是目標(biāo)機(jī)上的防火墻規(guī)則順序?qū)懛戳税言试S規(guī)則放在了拒絕規(guī)則后面。而如果是DROP策略客戶(hù)端那邊通常表現(xiàn)為連接一直掛著最后超時(shí)而不是立刻報(bào)錯(cuò)。所以“立刻報(bào)錯(cuò)”和“轉(zhuǎn)圈到超時(shí)”是區(qū)分 REJECT 和 DROP 的一個(gè)很實(shí)用的手感。1.3 一張表分清兩類(lèi)故障的邊界對(duì)比項(xiàng)拒絕連接沒(méi)有到主機(jī)的路由報(bào)錯(cuò)層級(jí)傳輸層TCP網(wǎng)絡(luò)層IP/ICMP報(bào)文特征收到 RST收到 ICMP 不可達(dá)或本機(jī)路由失敗目標(biāo)主機(jī)是否可達(dá)可達(dá)內(nèi)核正常響應(yīng)可能不可達(dá)也可能被策略偽裝成不可達(dá)服務(wù)是否在監(jiān)聽(tīng)沒(méi)監(jiān)聽(tīng)或監(jiān)聽(tīng)地址不對(duì)與服務(wù)監(jiān)聽(tīng)狀態(tài)基本無(wú)關(guān)常見(jiàn)原因服務(wù)未啟動(dòng)、綁 127.0.0.1、防火墻 REJECT路由缺失、網(wǎng)關(guān)錯(cuò)誤、防火墻 ICMP REJECT、網(wǎng)段隔離排查起點(diǎn)目標(biāo)機(jī)ss -lntp客戶(hù)端ip route與ping把這張表記在心里后面所有動(dòng)作都是往下鉆。拿反了方向就會(huì)出現(xiàn)“明明防火墻全放開(kāi)了還是連不上”這種僵局因?yàn)閱?wèn)題根本不在防火墻的策略?xún)?nèi)容上而在包有沒(méi)有到。2. 排查前的準(zhǔn)備把“分層”這件事落到命令行上分層排查不是一句口號(hào)它得變成一條固定順序的命令清單。順序?qū)α艘淮尉湍馨逊秶车粢话腠樞騺y了改了一堆配置問(wèn)題還在原地。2.1 排查順序?yàn)槭裁幢仨毷亲韵露霞偃?FTP 連不上我先看服務(wù)狀態(tài)還是先 ping答案必須是先 ping。理由很直白如果網(wǎng)絡(luò)層都不通你去看/etc/vsftpd/vsftpd.conf里的每一個(gè)參數(shù)都是白費(fèi)。反過(guò)來(lái)如果 ping 得通、端口探測(cè)被拒那再去查服務(wù)配置才有意義。我固定的排查順序是四步一步不跳鏈路與地址確認(rèn)本機(jī)網(wǎng)卡有沒(méi)有地址、掩碼對(duì)不對(duì)、網(wǎng)關(guān)通不通網(wǎng)絡(luò)可達(dá)ping目標(biāo) IP看是超時(shí)、不可達(dá)還是通端口可達(dá)telnet或nc探 21 端口看是拒絕還是超時(shí)應(yīng)用狀態(tài)服務(wù)進(jìn)程、監(jiān)聽(tīng)地址、配置文件、日志。這四步跑完故障基本已經(jīng)被鎖死在某一層了。下面每一步我會(huì)展開(kāi)說(shuō)但順序千萬(wàn)別換來(lái)?yè)Q去。2.2 手上要備好的幾把工具工欲善其事工具先裝齊?;A(chǔ)鏡像里常常缺telnet和nc很多人到現(xiàn)場(chǎng)才發(fā)現(xiàn)敲不出來(lái)。ping基礎(chǔ)連通性幾乎所有系統(tǒng)自帶ip route/route -n看路由表和默認(rèn)網(wǎng)關(guān)telnet或nc -vz探測(cè)端口判斷拒絕還是超時(shí)traceroute或mtr看路徑在哪一跳斷掉ss -lntp看本機(jī)監(jiān)聽(tīng)端口和對(duì)應(yīng)進(jìn)程tcpdump抓包看 SYN 有沒(méi)有發(fā)出去、有沒(méi)有回包這是終極大招firewall-cmd --list-all/iptables -L -n -v看防火墻實(shí)際生效規(guī)則。提示在某些精簡(jiǎn)系統(tǒng)上telnet客戶(hù)端和nc默認(rèn)都沒(méi)裝。提前準(zhǔn)備好比到了現(xiàn)場(chǎng)臨時(shí)找包要省太多時(shí)間。2.3 記錄基線(xiàn)信息別一上來(lái)就改配置我踩過(guò)最虧的一次坑是接手一臺(tái)別人配過(guò)的機(jī)器一上來(lái)就懷疑防火墻結(jié)果把本來(lái)正確的規(guī)則改壞了最后發(fā)現(xiàn)只是 FTP 配置里listenNO。從那以后我給自己定了個(gè)規(guī)矩動(dòng)手之前先把現(xiàn)場(chǎng)信息原樣記錄一份。至少要記下這些目標(biāo)機(jī)的ip addr、ip route、ss -lntp | grep 21、防火墻規(guī)則全量輸出、FTP 服務(wù)狀態(tài)與最近 50 行日志??蛻?hù)端這邊記下ip route和ping結(jié)果。這些信息除了幫你定位還有一個(gè)作用——出問(wèn)題時(shí)能快速回滾不至于越修越亂。2.4 用 tcpdump 看清 SYN 的去向這一步很多人覺(jué)得高級(jí)其實(shí)它是最樸素的判斷手段。在服務(wù)端執(zhí)行抓包同時(shí)在客戶(hù)端發(fā)起連接# 服務(wù)端抓 21 端口的包 tcpdump -i any -nn port 21 -c 20如果抓到了客戶(hù)端來(lái)的 SYN但服務(wù)端沒(méi)回 SYN-ACK那就是本機(jī)沒(méi)監(jiān)聽(tīng)或者防火墻攔了如果回了 RST那就是端口沒(méi)人等對(duì)應(yīng)“拒絕連接”如果壓根沒(méi)抓到 SYN問(wèn)題在中間網(wǎng)絡(luò)或者路由對(duì)應(yīng)“沒(méi)有到主機(jī)的路由”這一類(lèi)。一次抓包能省掉半小時(shí)的猜測(cè)。3. 拒絕連接Connection refused的逐層拆解與修復(fù)確定是“拒絕連接”之后排查范圍就縮小到目標(biāo)機(jī)內(nèi)部了。下面這四步我基本按順序來(lái)絕大多數(shù)情況在第二步就能定位。3.1 第一步確認(rèn)服務(wù)到底起沒(méi)起先在目標(biāo)機(jī)上執(zhí)行systemctl status vsftpd看兩個(gè)東西Active那一行是active (running)還是failed以及下面日志里有沒(méi)有Failed to start之類(lèi)的內(nèi)容。如果狀態(tài)是 failed直接看日志journalctl -u vsftpd -n 80 --no-pager日志里常見(jiàn)的是配置文件語(yǔ)法錯(cuò)誤、端口被占用、權(quán)限不足。比如500 OOPS: could not bind listening IPv4 socket基本就是端口被占了或者配置沖突。如果狀態(tài)是 running也別高興太早。繼續(xù)看監(jiān)聽(tīng)ss -lntp | grep -E :(21|ftp)正常應(yīng)該看到類(lèi)似LISTEN 0 32 0.0.0.0:21 0.0.0.0:* users:((vsftpd,pid1234,fd3))的輸出。如果這里是127.0.0.1:21那就是下一個(gè)問(wèn)題了。3.2 第二步確認(rèn)監(jiān)聽(tīng)地址綁對(duì)沒(méi)綁對(duì)ss輸出里那個(gè)0.0.0.0:21和127.0.0.1:21的區(qū)別決定了外部能不能連進(jìn)來(lái)。0.0.0.0表示監(jiān)聽(tīng)所有 IPv4 地址127.0.0.1表示只聽(tīng)本機(jī)回環(huán)。造成只聽(tīng)回環(huán)的原因在 vsftpd 上通常是這兩行配置listenYES listen_address127.0.0.1listen_address一旦被指定成回環(huán)地址外部連接必然被拒。改法是把這一行注釋掉或者明確寫(xiě)成機(jī)器的業(yè)務(wù) IPlistenYES listen_ipv6NO # listen_address127.0.0.1改完記得systemctl restart vsftpd然后再用ss確認(rèn)一次。這里有個(gè)細(xì)節(jié)listenYES和listen_ipv6YES不能同時(shí)打開(kāi)否則 vsftpd 啟動(dòng)會(huì)直接報(bào)錯(cuò)退出而systemctl status有時(shí)候顯示得很含糊容易誤判成服務(wù)正常。3.3 第三步防火墻是 REJECT 還是 DROP監(jiān)聽(tīng)沒(méi)問(wèn)題端口也對(duì)外了那就要看防火墻。先確認(rèn)防火墻狀態(tài)# firewalld 環(huán)境 firewall-cmd --state firewall-cmd --list-all # iptables 環(huán)境 iptables -L INPUT -n -v --line-numbers判斷的關(guān)鍵在于規(guī)則里用的是REJECT還是DROP。REJECT會(huì)往客戶(hù)端回一個(gè)消息DROP是直接丟棄、不回任何東西。所以客戶(hù)端立刻報(bào)“拒絕連接”多半是REJECT --reject-with tcp-reset客戶(hù)端一直轉(zhuǎn)圈到超時(shí)多半是DROP客戶(hù)端報(bào)“沒(méi)有到主機(jī)的路由”可能是REJECT --reject-with icmp-host-prohibited。放行 21 端口的寫(xiě)法firewalld 環(huán)境下firewall-cmd --permanent --add-serviceftp firewall-cmd --reload或者按端口放行firewall-cmd --permanent --add-port21/tcp firewall-cmd --reloadiptables 環(huán)境下iptables -I INPUT -p tcp --dport 21 -j ACCEPT注意-I是插到鏈?zhǔn)?A是追加到鏈尾。如果原有規(guī)則里有前置的拒絕規(guī)則-A加在后面的允許規(guī)則根本不會(huì)被匹配到。這就是我在第 1 節(jié)提到的“規(guī)則順序?qū)懛础钡牡湫秃蠊?。注意?iptables 規(guī)則前先確認(rèn)有沒(méi)有持久化機(jī)制否則重啟后規(guī)則全丟第二天又是同一個(gè)故障。iptables-save配合netfilter-persistent或iptables-services是常見(jiàn)做法。3.4 第四步云主機(jī)上的安全組與端口映射如果目標(biāo)機(jī)跑在云上主機(jī)內(nèi)部防火墻全放開(kāi)了還是拒絕連接那就要往上找一層。云平臺(tái)通常有獨(dú)立于操作系統(tǒng)的網(wǎng)絡(luò)訪(fǎng)問(wèn)控制一般叫安全組或者網(wǎng)絡(luò) ACL它在實(shí)例外面生效你在機(jī)器里iptables -L是看不到的。排查方式是登錄云控制臺(tái)找到該實(shí)例綁定的安全組看入方向規(guī)則里有沒(méi)有放行 21 端口源地址范圍是否覆蓋了你的客戶(hù)端 IP。這里最常見(jiàn)的兩個(gè)坑一是安全組只放行了內(nèi)網(wǎng)地址而你從公網(wǎng)連二是規(guī)則的優(yōu)先級(jí)被更靠前的拒絕規(guī)則蓋掉了。還有一種情況是中間做了端口映射比如公網(wǎng) 2121 映射到內(nèi)網(wǎng) 21。這時(shí)候客戶(hù)端必須連 2121連 21 自然是被拒。同時(shí)被動(dòng)模式還要額外處理數(shù)據(jù)端口這個(gè)在第 5 節(jié)展開(kāi)。3.5 驗(yàn)證與回歸測(cè)試改完不要只在自己機(jī)器上試一次就收工。我的驗(yàn)證清單是這樣的本機(jī)telnet 127.0.0.1 21確認(rèn)服務(wù)活著同網(wǎng)段另一臺(tái)機(jī)器telnet 內(nèi)網(wǎng)IP 21確認(rèn)內(nèi)網(wǎng)可達(dá)客戶(hù)端所在網(wǎng)絡(luò)telnet 公網(wǎng)IP 21確認(rèn)外部可達(dá)用真實(shí) FTP 客戶(hù)端登錄一次做一次ls和一次put重啟一次服務(wù)再重復(fù)第 4 步確認(rèn)配置持久化沒(méi)問(wèn)題。第 5 步很多人省掉結(jié)果下次機(jī)器重啟故障復(fù)現(xiàn)。配置這東西不重啟驗(yàn)證一遍就等于沒(méi)改。4. 沒(méi)有到主機(jī)的路由No route to host的逐層拆解與修復(fù)這類(lèi)報(bào)錯(cuò)的排查思路和上一節(jié)完全不同。核心是回答一個(gè)問(wèn)題包到底有沒(méi)有離開(kāi)客戶(hù)端以及離開(kāi)之后走到了哪一跳。4.1 先 ping 一下但 ping 不通不代表服務(wù)有問(wèn)題第一步永遠(yuǎn)是ping 目標(biāo)IP。但要注意ping不通有三種可能含義完全不同Destination Host Unreachable本機(jī)或中間設(shè)備明確告訴你到不了路由或 ARP 有問(wèn)題Request timeout包發(fā)出去了沒(méi)有任何回應(yīng)可能是對(duì)方禁 ping也可能是防火墻 DROPName or service not known這是域名解析問(wèn)題壓根還沒(méi)到網(wǎng)絡(luò)層。關(guān)鍵認(rèn)知是服務(wù)器禁 ping 是很常見(jiàn)的加固手段ping 不通不代表 FTP 連不上。所以 ping 只能作為參考不能作為結(jié)論。真正有決定性的還是端口探測(cè)nc -vz -w 3 目標(biāo)IP 21或者telnet 目標(biāo)IP 21看返回是Connection refused、Connection timed out還是No route to host。這三者的含義和排查方向完全不同前面表格里已經(jīng)對(duì)上了。4.2 路由表與網(wǎng)關(guān)檢查確認(rèn)是本機(jī)路由問(wèn)題時(shí)先看路由表ip route輸出里要關(guān)注兩件事有沒(méi)有到目標(biāo)網(wǎng)段的具體路由以及default via后面那個(gè)網(wǎng)關(guān)地址是不是當(dāng)前網(wǎng)段的合法地址。如果默認(rèn)網(wǎng)關(guān)寫(xiě)錯(cuò)了比如網(wǎng)段是192.168.10.0/24網(wǎng)關(guān)卻寫(xiě)成了192.168.20.1那所有跨網(wǎng)段的包都發(fā)不出去。再看本機(jī)地址和掩碼ip addr掩碼寫(xiě)錯(cuò)是很容易被忽略的坑。把/24寫(xiě)成/16本機(jī)會(huì)認(rèn)為整個(gè)192.168.0.0/16都在同一個(gè)二層網(wǎng)絡(luò)里于是對(duì)本來(lái)需要經(jīng)過(guò)網(wǎng)關(guān)的地址直接發(fā) ARP 請(qǐng)求結(jié)果自然是 host unreachable。這種錯(cuò)誤在手工配 IP 的機(jī)器上出現(xiàn)頻率相當(dāng)高。4.3 防火墻 DROP 策略的典型表現(xiàn)前面說(shuō)過(guò)DROP通常表現(xiàn)為超時(shí)而不是“沒(méi)有到主機(jī)的路由”但如果規(guī)則用的是REJECT --reject-with icmp-host-prohibited客戶(hù)端收到的就是 ICMP 類(lèi)型 3 代碼 10報(bào)錯(cuò)文案和真正的路由不通一模一樣。判斷方法是看目標(biāo)機(jī)上的規(guī)則iptables -L INPUT -n -v --line-numbers如果看到類(lèi)似這樣的規(guī)則REJECT all -- 0.0.0.0/0 0.0.0.0/0 reject-with icmp-host-prohibited并且它排在允許 21 端口的規(guī)則前面那故障原因就找到了。處理方式是調(diào)整順序把允許規(guī)則插到它前面iptables -I INPUT 1 -p tcp --dport 21 -j ACCEPT-I INPUT 1里的1表示插到第一條。這個(gè)數(shù)字很關(guān)鍵插錯(cuò)位置等于沒(méi)插。4.4 網(wǎng)段隔離、VLAN 與云上子網(wǎng)如果客戶(hù)端和服務(wù)端不在同一個(gè)二層網(wǎng)絡(luò)中間又有多層網(wǎng)絡(luò)設(shè)備那就要考慮策略隔離了。企業(yè)內(nèi)網(wǎng)常見(jiàn)的做法是把辦公網(wǎng)、服務(wù)器網(wǎng)、測(cè)試網(wǎng)分到不同 VLANVLAN 之間的訪(fǎng)問(wèn)由三層設(shè)備上的 ACL 控制。ACL 默認(rèn)拒絕的時(shí)候表現(xiàn)出來(lái)就是“沒(méi)有到主機(jī)的路由”。云上的情況類(lèi)似但對(duì)象換成了子網(wǎng)和路由表。兩個(gè)子網(wǎng)之間如果沒(méi)有對(duì)等連接或者路由條目包就出不去。這時(shí)候在實(shí)例內(nèi)部怎么改防火墻都沒(méi)用得去網(wǎng)絡(luò)配置層面加路由。排查手段是traceroutetraceroute -n -T -p 21 目標(biāo)IP-T表示用 TCP 探測(cè)-p 21指定端口??摧敵鲈谀囊惶_(kāi)始出現(xiàn)* * *就能大致判斷阻斷點(diǎn)在哪一層設(shè)備上。如果第一跳就是星號(hào)問(wèn)題在本機(jī)或網(wǎng)關(guān)如果中間幾跳正常、最后斷了問(wèn)題在靠近目標(biāo)的一側(cè)。4.5 復(fù)現(xiàn)驗(yàn)證方法改完路由或者 ACL 之后驗(yàn)證要覆蓋兩個(gè)方向。正向驗(yàn)證是從客戶(hù)端 ping 和探端口反向驗(yàn)證是從服務(wù)端 ping 客戶(hù)端同時(shí)看服務(wù)端有沒(méi)有收到 SYN# 服務(wù)端抓包確認(rèn)有 SYN 進(jìn)來(lái) tcpdump -i any -nn tcp port 21 and tcp[tcpflags] tcp-syn ! 0抓到 SYN 說(shuō)明網(wǎng)絡(luò)通了剩下的就是應(yīng)用層的事抓不到說(shuō)明包還在路上被攔著。這個(gè)判定比反復(fù)改配置靠譜得多。5. 連上了卻傳不了文件被動(dòng)模式那些坑端口通了、登錄成功了、ls也出來(lái)了結(jié)果put一個(gè)文件卡死不動(dòng)——這是 FTP 最經(jīng)典的“第二步故障”。它跟前面兩類(lèi)報(bào)錯(cuò)不是一回事但對(duì)使用者的感受是一樣的連不上。5.1 主動(dòng)模式與被動(dòng)模式的本質(zhì)區(qū)別FTP 用兩條連接一條控制連接走 21 端口一條數(shù)據(jù)連接傳文件??刂七B接永遠(yuǎn)是客戶(hù)端主動(dòng)連服務(wù)端這個(gè)沒(méi)問(wèn)題。數(shù)據(jù)連接的方向取決于模式。主動(dòng)模式PORT下服務(wù)端從自己的 20 端口主動(dòng)連客戶(hù)端的一個(gè)隨機(jī)端口。問(wèn)題在于客戶(hù)端通常在 NAT 或者防火墻后面服務(wù)端根本連不進(jìn)去于是卡住。被動(dòng)模式PASV下客戶(hù)端向服務(wù)端要一個(gè)端口服務(wù)端返回一個(gè)隨機(jī)高位端口客戶(hù)端主動(dòng)去連這個(gè)端口。這個(gè)方向?qū)蛻?hù)端友好所以現(xiàn)代客戶(hù)端默認(rèn)都用被動(dòng)模式。但被動(dòng)模式又帶來(lái)一個(gè)新問(wèn)題服務(wù)端返回的那個(gè)端口是隨機(jī)的防火墻如果只放行了 21數(shù)據(jù)連接必然被攔。表現(xiàn)出來(lái)就是登錄正常、列目錄正常一傳文件就超時(shí)。5.2 pasv_min_port 與 pasv_max_port 的配置解決辦法是把被動(dòng)模式的端口范圍固定下來(lái)然后在防火墻上放行這一段。vsftpd 的配置是這樣pasv_enableYES pasv_min_port30000 pasv_max_port30100范圍選多大按并發(fā)連接數(shù)估。每個(gè)數(shù)據(jù)傳輸占一個(gè)端口理論最大并發(fā)數(shù)等于端口數(shù)量。一般內(nèi)部使用 100 個(gè)端口足夠50 個(gè)并發(fā)以?xún)?nèi)完全扛得住。如果用戶(hù)量大可以放到 500 個(gè)。如果服務(wù)端在 NAT 后面還要加一行pasv_address告訴客戶(hù)端應(yīng)該連哪個(gè)公網(wǎng)地址pasv_address公網(wǎng)IP這一行不加服務(wù)端會(huì)把內(nèi)網(wǎng)地址返回給客戶(hù)端客戶(hù)端拿著一個(gè)內(nèi)網(wǎng) IP 去連自然連不上。這是我見(jiàn)過(guò)最多的被動(dòng)模式故障原因沒(méi)有之一。5.3 防火墻放行數(shù)據(jù)端口配置改完防火墻同步放行firewall-cmd --permanent --add-port30000-30100/tcp firewall-cmd --reload云平臺(tái)的安全組也要同步加一條規(guī)則端口范圍寫(xiě)30000-30100協(xié)議 TCP。這一步經(jīng)常被漏掉因?yàn)樵跈C(jī)器內(nèi)部折騰半天都正常一出公網(wǎng)就廢。還有 SELinux 這一層。如果系統(tǒng)開(kāi)了 SELinux 且策略比較嚴(yán)FTP 讀寫(xiě)家目錄會(huì)被攔getenforce setsebool -P ftpd_full_access on-P表示持久化不加的話(huà)重啟就失效。改完用getsebool ftpd_full_access確認(rèn)一下?tīng)顟B(tài)是 on。6. 常見(jiàn)問(wèn)題速查表與避坑經(jīng)驗(yàn)前面幾節(jié)講的是原理和流程這一節(jié)講的是我這些年實(shí)際踩出來(lái)的經(jīng)驗(yàn)。有些坑在文檔里不會(huì)寫(xiě)但遇到了能讓人折騰一整天。6.1 排查速查表現(xiàn)象最可能的原因快速驗(yàn)證處理動(dòng)作立刻報(bào)拒絕連接服務(wù)未啟動(dòng) / 綁回環(huán)ss -lntp | grep 21啟動(dòng)服務(wù)改listen_address立刻報(bào)拒絕連接服務(wù)正常防火墻 REJECTiptables -L -n -v放行 21注意規(guī)則順序轉(zhuǎn)圈后超時(shí)防火墻 DROPtcpdump看有無(wú)回包檢查 DROP 規(guī)則與安全組報(bào)沒(méi)有到主機(jī)的路由路由缺失或 ICMP REJECTip route、traceroute補(bǔ)路由或調(diào)整 REJECT 類(lèi)型ping 通但端口不通服務(wù)未監(jiān)聽(tīng)或端口錯(cuò)誤nc -vz探端口核對(duì)端口與監(jiān)聽(tīng)地址登錄成功但ls卡住被動(dòng)模式端口被攔客戶(hù)端開(kāi) PASV 調(diào)試日志固定 pasv 端口段并放行登錄成功但put失敗目錄權(quán)限或 SELinuxls -ld、getenforce改權(quán)限或開(kāi)ftpd_full_access重啟后故障復(fù)現(xiàn)配置未持久化重啟再測(cè)一遍iptables-save、--permanent6.2 幾個(gè)我踩過(guò)的坑坑一systemctl status是 active但端口沒(méi)起來(lái)。有一次配置文件里listen和listen_ipv6同時(shí)為 YESvsftpd 啟動(dòng)后立刻退出但 systemd 的重啟策略讓它反復(fù)拉起status看到的永遠(yuǎn)是 active。真正定位是靠journalctl里的重復(fù)報(bào)錯(cuò)。所以看狀態(tài)一定要配合看日志和看監(jiān)聽(tīng)??佣耐?iptables 忘了持久化。這個(gè)坑的殺傷力在于它有延遲——當(dāng)天一切正常第二天機(jī)器重啟故障原樣復(fù)現(xiàn)而且看起來(lái)像是“莫名其妙又壞了”?,F(xiàn)在我的習(xí)慣是改完立刻iptables-save /etc/sysconfig/iptablesfirewalld 環(huán)境則確保每條命令都帶--permanent??尤蛻?hù)端防火墻也攔。一直在服務(wù)端折騰最后發(fā)現(xiàn)是客戶(hù)端本機(jī)的出站規(guī)則攔了高位端口。被動(dòng)模式下客戶(hù)端要連服務(wù)端的 30000 以上端口有些終端安全軟件默認(rèn)只放行常用端口。這個(gè)排查起來(lái)很快在客戶(hù)端抓個(gè)包就一目了然??铀腘AT 環(huán)境下的pasv_address忘了配。表現(xiàn)是內(nèi)網(wǎng)用戶(hù)全正常外網(wǎng)用戶(hù)一律傳不了文件。因?yàn)榉?wù)端返回的是內(nèi)網(wǎng)地址外網(wǎng)客戶(hù)端拿著192.168.x.x去連當(dāng)然連不上。這個(gè)問(wèn)題的隱蔽性在于日志里看不出任何異常只能靠抓包或者看客戶(hù)端返回的 PASV 響應(yīng)內(nèi)容。坑五賬號(hào)密碼對(duì)了但登錄被拒。這不是網(wǎng)絡(luò)問(wèn)題是認(rèn)證層。常見(jiàn)原因是ftpusers和user_list文件里默認(rèn)拒絕了一批系統(tǒng)賬戶(hù)或者chroot_local_userYES配合家目錄可寫(xiě)導(dǎo)致 vsftpd 拒絕登錄。日志在/var/log/secure里搜vsftpd關(guān)鍵字能直接看到原因。6.3 長(zhǎng)期運(yùn)維上的一點(diǎn)建議FTP 這套東西本身沒(méi)有健康檢查機(jī)制出問(wèn)題往往是被動(dòng)發(fā)現(xiàn)的。我的做法是在監(jiān)控里加兩個(gè)探測(cè)點(diǎn)一個(gè)是 21 端口的 TCP 連通性探測(cè)另一個(gè)是真實(shí)的登錄加列目錄操作頻率五分鐘一次。前者能發(fā)現(xiàn)服務(wù)掛了后者能發(fā)現(xiàn)被動(dòng)模式配置被改壞了。另外配置變更一定要留記錄。FTP 的配置文件不長(zhǎng)但每一項(xiàng)都影響面很大尤其是被動(dòng)模式那幾行。我見(jiàn)過(guò)一次事故是有人為了“優(yōu)化性能”把pasv_min_port和pasv_max_port注釋掉了結(jié)果防火墻規(guī)則對(duì)應(yīng)的端口段全部失效外網(wǎng)用戶(hù)全部傳不了文件而內(nèi)網(wǎng)測(cè)試一切正常直到客戶(hù)投訴才發(fā)現(xiàn)。最后再分享一個(gè)小技巧排查 FTP 問(wèn)題時(shí)盡量用命令行客戶(hù)端ftp或lftp而不是圖形客戶(hù)端。命令行會(huì)原樣輸出服務(wù)端的響應(yīng)碼比如227 Entering Passive Mode (192,168,1,10,117,40)這里面的數(shù)字就是服務(wù)端返回的被動(dòng)端口117*2564030000一眼就能看出它返回的是不是內(nèi)網(wǎng)地址、端口在不在放行范圍內(nèi)。圖形客戶(hù)端把這些信息全藏起來(lái)了排查時(shí)等于蒙著眼睛。我在實(shí)際處理這類(lèi)問(wèn)題的體會(huì)是FTP 報(bào)錯(cuò)文案的區(qū)分度其實(shí)很高拒絕連接和沒(méi)有到主機(jī)的路由已經(jīng)把排查方向指得很明確難的不是判斷而是忍住不跳過(guò)驗(yàn)證步驟直接改配置。按鏈路、網(wǎng)絡(luò)、端口、應(yīng)用這四層老老實(shí)實(shí)走一遍絕大多數(shù)問(wèn)題在十分鐘內(nèi)就能定位到具體那一行配置上。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧美很很操视频| 日韩欧美女优电影| 78m成人视线| 亚洲精品色| 1禁看欧美黄片免费看| 熟妇色99| 91色射| 亚洲精品亚洲人成人网| 91被操| 极品色电影院| 色av中文字| 黄色操人| 91东北熟女| 久久精品视频一区三区小泽玛利亚| 欧美在线观看综合国产| 亚洲成人无码影院| 久久久亚洲熟妇资源| 91在线页| 免費黃色視頻觀看一| 日韩成人精品| sewuyueav| 高清无码学生妹高潮| 日日摸日日碰| 国产精品电影推荐| av线电影| 本道在线| 夜夜操夜夜高潮夜夜爽国产精品区| 双插在线| 久热99999| 久久蜜色情在线视频xxx免费观看| 欧美美女自慰一区二区三区| 五月综合视频| 精品人妻一区二区免费蜜桃| 99.色网| 日韩啪啪网| 国产精品自拍欧美在线| 婷婷五月色| 三级片网站在线播放| 午夜福利免费福利视频| www色色com| 国产AV高清AV无码| 色色操| 熟女突然公开看18禁影片| 亚洲第一黄色av网站| 久久透逼视频| 亚欧高清在线| 超碰精品| 中文字幕乱亚洲美女精品一区| 好吊色综合| 欧美综合另类| 国产精品久久久无码aV去| 91精品无码久久久久久久| 亚洲色图欧美色图另类图片| 国产精品原创巨作?v网站| 99这里只有精品国产| 1人人看人人摸人人操| 日本黄色大片一级视频免费麻豆| 艹少妇网站| 日本午夜操逼| 99爱在线视频| 亚洲男人天堂网久久| 国产日韩精品一区二区三区| 色综合久久夜色精品国产天堂| 久久一二三四不卡| 九九九九97| 亚洲 欧美 日韩另类 麻豆| 一本色道人妻久久| 久久国产热视频97电影| 超碰97久| 超碰在线人妻中文字幕| 亚洲国产高清福利视频| 极品色社| 色偷偷男人的天堂麻豆| 我想要 啊 啊 啊| 国产精品第一区第一页| 久久五月婷| 亚欧中文字幕在线视频| 92久久| 被窝影院午夜看片无码| 深田咏美亚洲精品福利社| 色色色色色色色色色色色色色色综合| 欧亚日韩综合精品国产| 涩综合导航| 人人操人人狠狠操| 97青娱乐超碰久久| 日本媚薬中文字幕在线| 国语精品内射在线观看| 亚洲综合在线高清| 亚洲图片欧美偷拍| 国产精品一区二区三区,亚洲综合 性开放中文AV高清无码免费看 | 亚洲人妻在线精品| 91五月天| 天天干夜夜| 一区二区三区黄色片a| 午夜免费视频1000| 这里只有精品97| 欧美日韩激情无码专区| 曰本熟女视频| 日本熟妇浓毛hdsex| 久久久久9| 亚州综合电影| 国产二区三区免费视频| 97亚洲综合电影| 97国产精品久久久久 | 六月丁香五月婷婷| 黄久久| 亚洲精品无码久久AV| 性爱久久| 人妻丝袜一区二区三区在线| 大香网伊人久久综合| 亚洲宗合网| 三级AV入口| 加勒比综合九九99视频在线播放| 尤物网站91| 婷婷久久五月| 欧亚日韩中文在线| 麻豆久久视频在线地址| 99热这里只有精品18| 91女优在线观看| 欧美日韩在线视频网站| 99久久com免费视频′| 伊人久日| 精品久久一区二区三区四区五区| 天天日夜干| 五月天婷婷基地| 美女天天干| 91精品无码人妻系列| 校园春色宗合网| 亚洲精品人妻在线| 精品一区二区三区四区外站| 综合 欧美 亚洲 日本| 97久久久精品| 成人性爱av.com| 黑人与人妻| 国产视频一区二区三区在线免费观看| 成人久久无码www| 成人国产视频在线观看| 人妻 制服 日韩 中文 在线| 一类无码操逼视频| 白嫩妹子国产骚| 色999五月色| 好吊色青靑草| 中文字幕第二页| 五月激情视频| 欧美日韩一区二区三区四区蜜桃| 美国三级日本三级久久99| 天天做日日爱夜夜爽| 欧美图片校园春色| 男人的天堂欧美| 日韩国产乱子伦App| 久久熟女嫩草成人片免费| 亚洲国产成人高清在线| 欧差乱伦二三| 91熟女在线| 夜夜国产一区| 五月婷婷综合在线| 久久久久久69国产一区二区| 国产精品大屁股999| 97综合在线观看| 亚洲天堂一区二区久久| 亚洲色电影在线| 性性久久| www.91色综合| 亚洲AV无码乱码在线观看性色| 91丰满| 少妇500双飞99| aaaa少妇高潮大片| 五月丁香黄色网| www.acm成人黄色毛片| 精品91摸| 日韩综合97p| 澳门成人网站久国产日韩| 国产女人和拘做爰视频| 久草在线| 国产97亚洲| 91劲爆| 成人女人国产| 丁香五月综合| 另类一区| av无码av无码专区| 国产一区二区三区视频在线看| 国产精品久久久久婷婷二区次| 超碰97最新人妻| www.四虎在线| 很很干很很操| 爱做久久久久久| 蜜乳AV.COM| 97精品国产| 综合网亚洲在线| 亚洲色图综合网| 日本不卡二三区| 久久久999日本大片| 国产免费永久精品无码| 91碰超| 人人摸人人入| 強姦亂倫a| 夜夜骑夜夜操| 97国产精品一区| 手机不卡视频不卡在线一二三区 | 日韩黄片影院| 国产深夜福利| 久久久久久999| nuu12国产麻豆精品| 日本九九久久99| 在线黄色污污网站| 久久97资源 网| 国内91熟女人妻丝袜天天精品视频在线| 91成人久久| av绯色| 精品一区二区国产日韩| 国产精品视频自拍在线| 免费在线黄片视频| 国产亚洲日韩在线三区黑人| 色综合天天| 丰满人妻一区二区三区四区| 草草影院最新网址| 国语对白在线播放视频| 久久久国产三级黄色片| 久久99精品视频| 玖玖在线视频| 97国产精品国| 久久久久久久久久久999| 韩日巨乳美女免费视频在线观看| 精品少妇人妻av久久免费| 国语对白露脸XXXXXX| 欧美日韩国产成人高清| 五月婷婷六月丁香网址| 激情专区综合| 欧美狠狠弄| 校园春色宗合网| 夫妻AV网站| 天天干夜夜鈤| 亚洲天堂在线怕怕视频 | 亚洲国产剧情少妇激情| 91少妇香蕉久久精品| 日韩精品大香蕉伊人在线| 亚洲在钱| 人人操我人人干| 色小视频蜜乳| 夜夜嗨AV蜜臀av| 午夜后入| 国产午夜福利专区综合| 夜夜草网站| 欧美在线官网| 国产熟女高潮一区二区三区| 97免费视频在线| 天天激情综合站| 手机看av网站在线看| 99精品在线| 欧美 亚洲 大香| 伊人在线大香蕉视频久久| 91色夜| se吧提供91精品国产91久久久久久 | 国产成人精品必看 | 亚洲综合 欧美| 色妇综合网| 操国产逼| 欧美丰满熟妇XXXX性ppX人交| av中文字幕在线熟女| 精品美女少妇一区二区三区| 综合第一页| 亚洲成熟国产精品美女| 欧美最婬乱婬爆婬性视频| 屁股久久久久久久久| 久久春色| 90后性网国产欧美| 新视频sss国产| 久久69| 性爱av网站| 91综合国产精品| dy888午夜老子影视达达兔| 日韩 欧美 另类 人妻| 久久国产三区| 97在线视频网站| 去干网最新版| 精品熟妇视频一区二区| www.99中文字幕| 久久久久久大| 人人干人人操人人爱| 激情五月综合网| 欧美在线综合| 3p国产欧美99热| 狠狠色一区二区中文字幕| yaouchengrenav| 操久久久久久| 欧美春色| 五月天婷婷久久| 天天欧美97| 欧美国产日韩高清在线| 看看日B真人视频| 在线国产福利网址导航| 日本精品性生活久久久| 韩三级a视频在线观看| 成人日韩中文字幕| 操人妻逼91| 超清中文乱码字幕| 欧美爆操91| 中文一区二区三区影院| 97久精品| 97在线精品观看视频| 麻豆福利视频导航| 亚洲砖码砖专无区2023| 伊人欧美大香蕉视频| 国产成人自拍视频在线| 夜夜精品视频一区二区| 国产精品天美传媒| 干日本人少妇午夜寂寞影院| 骚日日av| 偷拍 精品另类 凸凹了四区| 亚洲欧美日韩中文播放| 日欧毛片久久| 中文字幕jul-617人妻熟女| 欧美在线亚洲| 亚洲国产欧美日韩精品一区二区三区,国产一区二区三区在线看片,欧美性猛交 XXX | 免费一二区| 天天干天天日天天射黄色大片| 日韩啪啪视频| 天天看高清麻豆| 玖玖爱免费观看视频| 五月天久久人妻| 97亚洲综合电影| 欧美一二三级精品在线| 国产97/欧美| 99操视频| 小视频玖玖| 熟女熟妇伦久久影院毛片一区二区| 国产18精品亚洲精品| 怡红院成人视频| 99啪啪视频| 日韩美女高潮喷水视频| 大香蕉丝袜一级片| A片大香蕉在线| 激情小说亚洲图片| 国产视频一区二区在线| 乱伦av麻豆| 亚洲精品欧洲色| 在线观看A啊啊啊| 99色在线视频| 啪啪AV导航| 亚洲综合另类| 天天摸天天操视频| 色爽——AV| 国产怡红院| 午夜色婷婷| 精品成人无码| 精品久久久久久中文字幕视频免费| 91久久堂| 无码一区二区三区四区五区六区七区八区九区十区视频 | 人妻干天天| 人妻一区二区三区熟女| 少妇第一页| 精精夜夜| 五月激情啪啪| 久久夜黄色无码A级大片| 日本精品999| 凹凸 69堂 在线播放| 久久久久大香青草精品综合| 91亚洲精品青草| 国产一区二区啪啪视频| 成人三一级一片aaa| 欧美天天射| 亚州欧美在线| 人人澡人人澡人人| 97超碰影音| 91强在线播放| 91欧美另类| 禁十八久久| 五月丁香狠狠爱| 欧亚性爱视频免费看| 日韩免费三级黄片电影| 国产精品久久久视频| 黄色高清无码无码破解免费暗网 | 欧美日日网| 亚洲AV免费在线| 欧美极度丰满熟妇hd| 啪啪视频亚洲第一| 2020中文在线一区二区三区| 亚洲巨爆乳一区二区三区四季网| 欧美色图片| 欧美综合第一页| 人人操人人操人妻人| 夜夜夜夜爽| 啊啊啊啊啊啊啊在线| 99色日| 少妇六月天| 国产a级精品| 久久国产精品91| 天天插天天射| 97亚洲一区| 97视频观看| 懂色AV一区二区三区| 天天综合网国产| 精品国产嫩穴视频| 综合网欧| 91伊人久久在线| 性九九九九九九| 色香综合天天影视综合 | 欧美日韩97| 国产深夜福利| 国产精品一区av在线| 亚洲天堂一区二区久久| 99日韩| 五月综合视频| 亚洲色图美腿丝袜| 欧美性第1页| 超碰色97| 国产精品国产自产高清AV| 国产精品久久久久中文字幕| www.91久久| 97精品国产97久久久久久| 国产天美欧美| 日日日大屁股骚女人精品| 干美女人妻| 不卡日本一区二区| 日韩国产乱子伦App| 91黑人无码激情在线| 久久XX| 综合久欧洲| 97超碰色中文字幕| 一起草三级AV电影在线观看| 国内精品a| 成人AV在线电影| 欧美日韩222| 97免费视频在线观看视频| 偷拍导航视频网站| 色欲无码人妻日韩欧美精品| 人人透人人操| 午夜毛片高清免费不卡| 夜夜躁狠狠躁日日躁av| 黄色视频特级毛片| 欧美人妻色| 久久久天堂| 99久久久久久亚洲精品不卡| 久久五月天婷婷| 激情终合网| 男人的天堂VA| 亚洲AV秘 精品久久老牛影视| 亚洲精品视频在线| 日本三级韩国三级美三级91| 国产免费黄色一级大片| 成人日韩欧美| 九九九九九九九| 日韩欧美性爱电影在线观看| 巨爆乳肉感一区二区三区竹菊影视 | 午夜综合在线| 久久精品午夜国产亚洲AV无码| 久久久免费一级黄片| 白丝1区2区3区| 国产曰批免费观看久久久| 亚洲不卡AV在线| 亚洲综合色在线| 日韩精品色呦呦| 97精品视频免费| 少妇久久久久久| 日韩女模中文造逼| 风月影院男女十八禁| 女性喷水高潮在线观看| 久久,精品一二三| 91狠狠狠| 久热9| 97爱啪| 逼逼逼逼操操操操操操操操操午夜剧场 | 久久国产精品91| 精品人妻一区二区三区视频在线| 乱论91| 欧美亚洲国产日本在线,久久精品国产| 久久日本熟妇熟色一区| 欧美综合自拍成人自拍第二十页| 南澳成人一级片在线播放| 日本高清_区二区三区| 99精品丰满人妻| 91精品微拍福利| 午夜福利区| 久热影视| 啊灬啊灬啊灬啊灬高潮奶出了免费视 | 操逼片中文| 五月天加勒比啪| 天天搞在线综合网| 91成人亚洲色图| 欧美黄片视频在线观看免费| 91操熟妇| 操人妻丝袜高跟| 国产亚洲福利第一页丝袜| 一区,二区,三区网站| 操逼操逼操| 日韩伦理久 久久 清纯| 无码高清操逼网址| 国产99999久久精品| 欧美日韩亚洲电影| www久久99| 97欧美日韩| 午夜激情床戏激情| 一起草欧美| 久操影视| 大香交伊人网| 大香蕉黄色一级片免费看| 在线观看午夜婷婷久久久久清性观看| 新婚人妻扶着粗大强行坐下| 啊啊啊啊啊啊在线| 96免费视频在线| 亚洲操人| 中文操逼字幕| 北野未奈加勒比av| 女色视频社区| 欧美经典一区二区三区 | 亚洲图片 91| 一区二区三区亚洲| 亚洲欧美综合图片| 久久精品老司| 久久99久久99精品免视看婷婷| 人人操人人肉久久精品| 天天日天天射天天干| 黑人黄片在线免费观看| 家庭乱伦国产精品| 少妇色欲综合网2| 日本三级人妻a人妻一在线| 青娱乐国产精品| 久久国产乱子伦精品免费女,网站| 久久最新视频免费观看| 在线播放中文字幕| 岛国免费黄色网址| AV中亚| 欧美日本不卡| 和协影院中文字幕三区| 国产欧美美女免费观看视频| 亚洲av无线观看| 老熟女乱伦片| 蜜臀久久久99久久久久 | 久久精品国产99精品亚洲蜜...| 视频在线97| 日韩欧美性爱电影在线观看| 夜夜嗨老熟女AV一区二区三区| 成人女人国产| 一本一道人妻久久一区二区三区| 97任你吞精| 大香蕉一区二区在线观看.| 综合 亚洲 欧美| 欧美人妻一区二区| 久啪| 人人超碰在线观看黄| 天天操天天射青青草| 国产67194| 国产成人精品日本视频| 日韩性爱毛片操骚逼| a'v在线资源| 久久久日本电影| 色约约一区=区三区| 一区二区三区色综合| 91色图片| 欧美性色综合网| 欧美综合97www| 色婷五月天| 日本三级中国三级99人妇网站| 老熟妇一区二区三区…| 中日亚韩免费视频| 18禁的网站在线| 国产操操日韩三级黄| 一区二区三区在线美女| 国产多人在线观看视频| 亚洲精品白浆高清久久久久久 | www.zbzhongsen.com| 久久精视频美日韩在线视频| 黄片免费看的| 久草视频在线视频在线视频在线观看| 九月激情婷婷| 强奸乱伦大香蕉网| 午夜国产成人福利视频| 91精品啪在线观看国产城中村| 天天色天天干天天射| 亚乱色| 亚洲第一成人影院色播| 欧美顶级黄片AAAAA在线免费看| 激情接吻视频久久久久久| 夜色AV无码手机在线影院| 日韩av在线免费网站| 日韩成人性爱AV| 日韩婷婷| 高清不卡一二三区视频......| 欧美天天谢综合网| 久久精品国产精品| 九九九九九九综合| 青青在线视频日韩欧美| 国产精品视频自拍在线| 艹少妇网站| 99免费在线视频| 中文字幕一二三区| 亚洲色系另类精品国产| 国产麻豆福利av在线播放| 国产女生在线| 久久欧美按摩999| 欧美日韩国产电影| 亚洲熟女一区二区| 中文字幕三四区| 日韩精品国产一区二区| 天天色综合天天操| 欧美色图私拍91| 九一国产精品| 亚洲欧美成人网站AAA| 久操网视频| 婷婷五月综合激情| 超碰97最新人妻| 欧洲视频在线| 中文字幕一区二区三区高清| 大香蕉免费中文| 国产熟妇一区二区| 一本久道久久综合狠狠爱一密臀精 | 91在线精品| 97爱免费插| 国产精品在线一区二区| 97色网| 在线啊v一区| 闷骚老熟女15P| 凹凸 69堂 在线播放| 69av一区二区三区| 人妻少妇色综合| 色亚州人久干视频在线观看免费版| 国产麻豆91欧美一区二区久久婷婷国产精品 | 少妇厨房愉情理伦片bd在线观看| 日韩中文字幕二区| 日本999精品| 97操| 丁香五月av| 夜夜夜夜爽| 国产乱伦性爱区| http://qxhbdz.com| 九色 蝌蚪 熟女自| 免费一级特黄特色大片在线观看看| 操操AV电影| 日曰骚久久精品| 免费视频在线一区二区不卡| 神马久久久久久| 死我十八禁| 久欲AV| 国产精品久久久无码AV网站| 睡产熟女乱伦| 精品人妻一区二区三区视频| 屁股久久久久久| 亚洲日韩精品在线播放| 欧洲精品欧洲精品| 欧亚性爱在线视频| 精品97精品97| 国产肏逼网站| 精品网站9999| 成人免费性爱视视| 天堂九九九九九九九九九| 天天爱天天操| 久久人妻办公室视频| 亚洲综合伊人无码久久| 99色综合| 欧亚日韩一区在线| 99啪| 日熟女| 麻豆成人av| 亚洲免费成人在线高清无码视频| 国产九区| 久久性爱大全| 97色欧洲| 欧美乱色| 人人操人人色人人摸| 久久人妇| 国产乱伦性爱AV| 青青草色AV| 欧美天天插| 国产精品成人AV片免费看网站| 日韩精品人妻中文字幕有码午| 日韩一级欧美一级国产一级台湾 | 碰人碰碰人人开房人肉| 久草大| 在线视频97| 中文字幕97色| 爽 好舒服 无码刺激久久| 天天综合网~91| 97超碰jingpin| 强被迫伦姧在线观看无码网站| 97干天天| a级理论午夜日本| 九久精品| 91精品婷婷国产综合久久竹菊| 最新中文字幕在线亚洲| 日韩本不卡视频在线观看| http://qxhbdz.com| 成人无码电影在线观看网| 日韩精品电影| 欧美亚洲日韩人妻在线观看| 国产丝袜美女在线一区| 大香蕉92| 亚洲男人的天堂一区二区| 伊人丁香五月婷婷| 欧美同性恋 的搜索结果 - 91n| 99热免费| 午夜福利视频在线一区| 精品亚洲| 加勒比av网| 一道本东京热加勒比一区二区三区| 熟女五十路一区二区三| 久9精品| 亚洲有码第一页| 这里只有精品视频| 搡老女人老妇女AAA一VU麻豆| 日韩精品一区二区人人人| 日日夜夜青青草母狗| 开心五月深爱五月| 北约熟女超碰| 日本一级特级毛片视频| 大干人妻| 色九月综合| 日韩一级二级| 亚洲中文字母在线播放| 国内毛片欧美香蕉精品| 风间由美日韩欧美久久| 精品无码久久久久| 啊啊啊啊啊操我视频| 国产激情视频在线观看| 淫荡少妇免费| 欧美18 在线观看| 久9精品| 91在线精品| 婷婷干黄色| 在线欧美亚洲| 国产精品白丝AV| 精品一二三区四视频| 97爱欧美| 91暧暧| 日本超碰在线国产一区| 大香蕉久| 99久re热视频精品98| 一类无码操逼视频| 欧美黄色片在线播放| 国产农村妇女精品| 97亚洲中文| 久久在肏| 亚洲一区二区av| 97久久超碰亚洲| 97伦乱| 亚洲涩图欧美| 久久久久极品| 久久9精品网站| 天天操熟妇| 男人的天堂三级| 欧美性Fer办公室秘书| 天美一区在线| 国产吹潮女在线观看| 日韩 女同 综合| 操老熟女AV| 久久久九九| 色99久草| 久久欧美激情| 综合第一页| 国产在线视频午夜精华在| 欧美少妇人妻| 人人操 欧美| 国产性久久久| 乱论91| 91精品国产麻豆国产自产在| 啪啪啪大香蕉| 在线黄页看毛片| 韩国轻伦国内自拍一区| 区一二区日韩亚洲乱码av电影| 蜜臀人妻少妇久久在线观看| 97伪v| 中文字幕精品三级久久久| 麻豆天天躁天天揉揉AV| 青草精品视频-日本久久久久网站| 一起草视频在线| 久热精品在线国产| 久久久亚洲欧美综合| 午夜男女爽爽爽在线视频| 欧美亚洲日韩人妻在线观看| 久久久久久久久久久久久9999| 亚洲 欧美 小说| 久久华人网| 黄页av| 无遮挡一级毛片视频免费的| 久久‘黄片视频| www.欧精品| SUV一区二区在线看| 久区视频| wwwxxx日本爽| 亚洲丁香花色| 欧美成人亚洲精品| 91亚.色| 视频国产成人精品日本亚洲18| 在线无码网站| 情侣开房子拍 日韩无码 女的很漂亮| 九九九久久久久| 97欧美综合网| 草草影院最新网址| 国产激情久久| 加勒比五月天| 欧美成人免费在线观看| 综合久久六月久久婷婷| 开心五月婷婷| 天美麻豆黄色录像| 性色AV蜜色av色欲av| 99久久精品国产高潮| 97欧美精品综合| 日韩97视频| 国产欧美日本亚洲精品| 久久久中文| 亚洲资源网| 91国产操逼视频| 久久露脸国产老熟女| 爱爱动态试试看6 0秒| 激情小说激情视频| 亚州一区二区成人片免费| 91亚洲黑人| 国产9熟妇视频网站| 国产一区二区三区白丝| 欧美精品另类人妖xxxx| 亚洲,欧美,综合网| 91精品久久久| 亚洲中文字幕乱码无码一区二区| 影音先锋乱| 亚洲AV乱码专区国产噜噜亚洲| 久久精品六区| 激情网色| 嗯嗯,好大,好爽,好骚| 久久久久久久久久9| 色综合久| 欧美性Fer办公室秘书| 亚洲国产奇米影视久久| 大香蕉十区| 久久久久久久人妻丝袜| 欧洲色| 91模特在线观看| 91精品国产高清久久久久久,亚洲成人| 91高跟美女在线播放| 国产精品午夜AV完会免费| 日本一区三级韩国| 久久免费少妇| 好吊妞转入那个网| 97这里有精品| 亚洲色图激情小说| 精品日韩| 四虎永久在线精品免费网址 | 欧洲色| 久久三区四区| 99免费视频| 91性情| 台湾佬激情综合| 日本阿v天堂在线观看| 麻豆天美电影一区二区| 玖草在线视频| 91欧美长吊| 亚洲免费成人在线高清无码视频 | 欧美日韩另类在线播放| 青青草精品| 天天激情干| 亚洲文学偷乱拍啪啪啪啪| 欧美性爱十八禁| 久久久啊啊啊| 青青草视频这里只有精品| 欧美色狠| 丰满搜索结果 -第18页- 久久高清无码 | av三级电影在线播放| 欧美日韩人人精品| 夜夜操美女| 丝袜天堂网| 志村玲子视频一区二区| 国产一国产一级毛片古装| 久久亚洲天天做| 欧美日韩香蕉| 97在线视频免费看| 久久e6只有精品| xxx0国产在线播放| 十八禁黄色| 中美日韩毛片| 成人三级片无码| 亚洲欧美色图片| 亚洲日本韩国极品一区二区| 国产一区二区免费福利片| 一区二区亚州激情久婷婷欧美| 操婷婷逼| 欧美成人性爱视频在线播放| 超碰久久网| 小少妇| 这里只有精品视频在线观看麻豆| 91国产伊人大香蕉| 成人五月香网在线| 久久国产乱子伦精品免费女人| 九九九国产精品| 啊啊啊用力在线观看| 99性爱在线观看| 97视频免费播放| 日韩精品99久久久久久中文字幕| 天天躁日日躁AAA片李宗瑞| 97视频网站| 91人妻久久久久久久久久久久久| 夜夜嗨一区二区| 国产东北女人在线视频| 伊人九九| 男人的天堂久久狠| 中文字幕91综合| 大香蕉免费乱伦视频| 午夜小电影在线插入淫高潮| 午夜九九| 伊人青青草久久| 狠狠操狠狠| 日美免费黄片| 精品日韩人妻视频| 男人天堂东京热| 久久久精品一区二区| 色九月综合| 激情文学网伊人| 免费人成?大片在线播放| 中文字幕黄片在线| 大香蕉伊人75| 人人澡人人澡人人| 蜜桃久久久久久久久久久久| 精品大久久| 久青草影院| 成人国产精品三级A片| 久久性爱精品一区| A级国产欧美激情在线| 96精品久久| 麻豆熟妇乱妇熟色A片在线看 | 91色色综合| 曰本熟女视频| 久操高青| 人妻少妇蜜桃视频欧美一区| 五月激情视频| 综合一区中亚洲国产成人综合精品| 中字幕人妻一区二区三区| 亚洲国产成人综合碰碰三级经典| 亚洲日精品| 91天堂丝袜美腿| 人妻天天爽夜夜爽2| 国产欧美成人精品| 亚洲五区熟女| 日日骚 av| 国产丰满熟夫69mpp| 色噜噜国产在线| 97人妻色| 蜜臀av中字字幕网站| 殴美,日韩国产伦精品| 99热亚洲| 黄页大片在线观看| 婷婷亚洲中文字幕在线| 亚洲少妇色| 日韩99999色| 好爽,再快点啊哈嗯嗯嗯嗯| 插入综合网| 亚洲精品一二三四区| 91老司机在线视频免费观看| 99热亚洲天堂| 少妇六月天| 人妻熟女一区二区三区在线| 国产25页| 无码人妻系列少妇| 久久9免费视频| 亚洲色图 91| 超碰美国| 婷婷色色五月天福利| 翔田千里无码一区| 波多野结衣一级视频| 日本免费一级AAA大片器| 福利在线观看一区二区| 欧美精品日韩一区二区| 99综合视频一体| 日韩无码嘿咻黑热久| 超硑97精品| 久湿久久| 色色九区| 三级日韩一区二区三区| 奇米四色影视777久久久| 欧美亚洲| 色五月亚洲| 亚洲精品欧美专业| 后入福利视频| 91bbbbbb| 亚洲国产一区二区日韩专区| 国产激情av女片自拍| 日本天天操| 中文字幕天天操| 99在线精品观看视频中文| 中文乱码字幕观看视频| 无码高清少妇久久| 91|九色|国产熟女| 色哟哟-国产专区| 天天超级碰碰碰| 97亚洲中文| 精品国产一区二区三区四区在线看| 久久AV无码网址| 日本美女性生活久久久久久久| 国产精品视频播放| 亚洲综合嫩| 中文字幕一区二区三区四区在线视频| 日本国产欧美高清在线| 狠狠躁AV| 熟女久久久| 一区二区三区免费视频入口| 99精品久久久久久久婷婷| 狠狠中文字幕| 哑洲在线| 大香蕉免费3| 日本欧美成人片AAAA| 欧美少妇性乱| 婷婷爽人人婷婷爽视频| 午夜120视频在线观看| 久久精品视-一级做a爰片性色毛片16美国-中国女与老外在线精品 | 91M一社| 一区二区三区黄色片a| 中文字幕啊啊啊在线观看视频| 国产成人天堂| 91香蕉国产尤物视频| ?亚洲伊人伊成久久人综合网| 偷窥自拍亚洲色图| 久久老熟女| 欧美成人性爱视频免费观看 | 丰满美女一级毛片在线播放| 久9热| 天天性射网| 亚洲成人日韩小说| 91色五月俺来也| 国产99999| 五月婷婷爱六月丁香色| 国产乱人妻精品入口| 国产白丝精品在线观看| 91九九| 国产精品一二三| 中文字幕中文字幕一区二区| 男人干美女| 午夜性生活av免费在线看| 开心激情婷婷| 熟人人妻少妇精品久久| 欧美亚洲中文字幕| 人人妻天天做天天爽| 九九视频黄色片| 麻豆区99999| 超碰成人人人爽人人爽| 大香蕉伊人色偷偷在线| 97人人夜| 91超级碰| 欧美色九九| 成人在线日韩| 美女91网| 婷婷亚洲天堂| 久久久久熟女| 日本色婷婷| 加勒比综合88| 爽爽淫人网| 青青色在线观看| 中文字幕一区 二区三四五 区日 日骚 | 三级特黄60分钟播放| 牛牛久久国产精品视频一二三| AV麻豆免费一区| 精品176精品2| 国产精品婬乱一级毛片彝族| 日韩亚洲97| 欧美强奸乱| 色亚洲欧美| 日本三级久| 97超碰人人操人人操| 91女人的网站| 亚洲精品一区二区精品| 亚洲色悠悠久久88| 国产情侣自拍在线播放| 91痴汉| 艳美熟妇先锋一二三区| 丰满美女一级毛片在线播放| 干B| 日本理论在线| 天天色欧美| 色诱中文字幕| 乱欲一区二区| 美女黄页网站| 骚乳在线| 国产精品一级毛片不卡视| 天操天操夜操夜月月年年操操| 成人短视频在线观看| 97视频在线播放| 欧美国产有色电影| 色九九综合| 午夜福利国产欧美日韩夜夜| 超碰久久草| 欧洲色| 国产日韩欧美中文在线播放| 人妻喷水| 综合国产97| 自拍偷拍 日韩无码| 成人怡红院| 伊人991| 亚洲成人免费电影| 秋霞免费无码视频日韩A片| 九七人妻在线| 久久发布国产伦子伦精品| 精品中文字幕第一页| 熟妇人妻丰满久久久久久久无码| av大香蕉网站| 亚洲另类电影| 黄色片一区二区三区四区五区| 噜噜噜亚洲精| 91美女视频在线| 99热免费| 家庭乱伦网站国产| 91精品国产91久久青草| 欧美,亚洲,日韩,v,天堂,手机在线观看| 色妺妺AⅤ| 亚洲熟女乱综合一区二区三区| 色玖玖| 国产剧情AV不卡在线观看| 又大又大又大又粗爽高潮观看| 91色色综合| 91逼逼女人91| 99色热| 新婚人妻扶着粗大强行坐下| 亚洲无码视频免费在线观看网址! J?P?NESEHD熟女熟妇伦 | 97超碰精品图片| 天天日天天屌天天操| 美女露胸露尿口| 亚洲综合色婷婷| 95自拍视频在线观看| 国产强奸乱伦无码视频| 欧洲亚洲人妻无码高清久久三区四区| 99色婷婷中文字幕乱色| 69精品在线| 日韩成人电影AV| 强奸乱伦αv片| 国产精品成人无码a v毛片| 另类图片天天影视| 97伊人超碰| 嗯嗯啊啊啊啊轻点视频| 操B久久| 亚洲美欧999| WWW4虎| 91亚洲黑人| 亚洲高潮少妇| 高清在线偷拍自拍视频| 亚洲图片欧洲图片aⅴ| 天天躁日日躁xxxxx| 91丨九色丨国产丨人妻在线| 搡老女人老熟女91| 久久人妻| 久久久无码视频| 国产400孕妇孕交群| 一二三区精品视频| 亚洲欧美97√| 久久香蕉国产线看观看亚洲女人 | 偷拍盗拍亚洲色图图片| 欧美综合中文| 东北女人高潮视频| 亚洲人妻色图| 欧美性性性| 综合色区偷拍| 夜夜精品视频| 欧美在线播放| av毛片aaaaa免费看| 手机午夜电影神马久久| 色婷婷国产精品一区在线观看| 久久久96| 26UUU欧美日本| 摸奶性爱视频网站在线免费播放| 欧洲性爱无码区| 欧美一级AAAAAAA| 国产中文大片资源中文字幕| 亚洲三区视频| 国产精点久久久成人| 亚洲黄色影视| 又大又白奶子| 嗯嗯啊啊亚欧精品|