日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

機(jī)器人常用命令實(shí)戰(zhàn):從SSH連接到ROS2調(diào)試排查

機(jī)器人常用命令實(shí)戰(zhàn):從SSH連接到ROS2調(diào)試排查 我到現(xiàn)在還記得第一次去現(xiàn)場(chǎng)調(diào)移動(dòng)機(jī)器人的情景屏幕上日志滾得飛快測(cè)試工程師問(wèn)我下一步該敲什么命令我愣了好一會(huì)兒最后只能心虛地回一句“我查一下文檔”。后來(lái)這些年項(xiàng)目越做越雜從底盤(pán)通信、機(jī)械臂軌跡到傳感器標(biāo)定哪一層都離不開(kāi)命令行“機(jī)器人常用命令”這八個(gè)字也逐漸變成我真正的武器庫(kù)。無(wú)論你接觸的是AGV、協(xié)作機(jī)械臂還是輪式巡檢機(jī)器人只要底層跑著Linux系統(tǒng)和ROS生態(tài)這套玩轉(zhuǎn)命令行的方法幾乎都能復(fù)用。這篇就來(lái)盤(pán)一盤(pán)我真正用得高頻、也踩過(guò)不少坑的那些命令尤其適合剛進(jìn)機(jī)器人行業(yè)、不想每次調(diào)試都靠到處搜答案的朋友。1. 動(dòng)手之前先理思路機(jī)器人命令的三種作用層次1.1 從“連不上”到“不會(huì)動(dòng)”再到“查不清”先說(shuō)一個(gè)很容易踩的認(rèn)知誤區(qū)很多人以為機(jī)器人常用命令就是背幾個(gè)rostopic echo、ros2 topic list結(jié)果一到現(xiàn)場(chǎng)就露餡。因?yàn)椤懊睢边@三個(gè)字背后其實(shí)藏著一整套解決問(wèn)題的分層邏輯。我習(xí)慣把機(jī)器人調(diào)試?yán)镉龅降那闆r分成三類(lèi)連不上、不會(huì)動(dòng)、查不清。連不上指的是你的電腦跟機(jī)器人之間壓根沒(méi)有建立通信常見(jiàn)于現(xiàn)場(chǎng)網(wǎng)絡(luò)配置亂、USB串口沒(méi)權(quán)限不會(huì)動(dòng)是系統(tǒng)已經(jīng)連上了但底盤(pán)不轉(zhuǎn)、機(jī)械臂不響應(yīng)問(wèn)題多半出在控制話(huà)題、服務(wù)或使能邏輯上查不清是機(jī)器人確實(shí)在跑但行為詭異時(shí)好時(shí)壞這時(shí)候就得靠日志、錄包、診斷工具去還原現(xiàn)場(chǎng)。這三類(lèi)問(wèn)題對(duì)應(yīng)三類(lèi)命令。連接命令負(fù)責(zé)打通鏈路控制命令負(fù)責(zé)讓機(jī)器人執(zhí)行動(dòng)作排查命令負(fù)責(zé)定位異常。所以我在給團(tuán)隊(duì)成員做培訓(xùn)時(shí)從來(lái)不說(shuō)“你把這個(gè)命令記一下”而是讓他們先判斷當(dāng)前處于哪一層再?zèng)Q定下一步敲什么。層與層之間有順序關(guān)系連接都斷了就直接發(fā)速度指令沒(méi)反應(yīng)很正常不是機(jī)器人壞了而是你跳過(guò)了前提。1.2 機(jī)器人其實(shí)是一套分布式系統(tǒng)別把它當(dāng)成一個(gè)“設(shè)備”很多新手會(huì)下意識(shí)地把機(jī)器人理解成“一個(gè)能跑的箱子”或者“一條機(jī)械臂”但實(shí)際拆開(kāi)看一輛AGV里至少有一個(gè)工控機(jī)、一個(gè)底層運(yùn)動(dòng)控制板、一臺(tái)激光雷達(dá)、若干電機(jī)驅(qū)動(dòng)器一臺(tái)協(xié)作機(jī)械臂則有關(guān)節(jié)伺服、力矩傳感器、安全控制板和安全I(xiàn)O。它們之間的溝通大量依賴(lài)局域網(wǎng)絡(luò)、CAN總線(xiàn)、串口和USB協(xié)議。命令行的核心作用就是把這一堆離散的硬件抽象成“節(jié)點(diǎn)”“話(huà)題”“服務(wù)”“設(shè)備文件”讓你可以在統(tǒng)一的地方觀察和控制。也正因?yàn)槿绱宋也艜?huì)在下面花大量篇幅講lsusb、ip addr、ros2 node list這類(lèi)看起來(lái)基礎(chǔ)得不像“機(jī)器人技術(shù)”的命令?;A(chǔ)不代表不重要恰恰相反現(xiàn)場(chǎng)運(yùn)維百分之六七十的時(shí)間都在跟這些基礎(chǔ)命令打交道。你理解了機(jī)器人是分布式的自然就理解為什么“排查要從底層往上走”——先確認(rèn)硬件在系統(tǒng)里存在再確認(rèn)驅(qū)動(dòng)正常再確認(rèn)協(xié)議通信正常最后才是上層控制邏輯的問(wèn)題。這套排查順序是比任何一條具體命令都重要的心法。2. 先把機(jī)器人“接進(jìn)來(lái)”連接與通信命令實(shí)戰(zhàn)2.1 網(wǎng)線(xiàn)和SSH最快能控制機(jī)器人的方式不論什么機(jī)器人到了現(xiàn)場(chǎng)第一件事往往是確認(rèn)網(wǎng)絡(luò)鏈路。工控機(jī)上一般都會(huì)預(yù)裝好機(jī)器人的運(yùn)行環(huán)境我們要做的就是用SSH連進(jìn)去操作。如果你的機(jī)器人帶屏幕和鍵鼠直接在它上面開(kāi)終端也行但我更推薦SSH因?yàn)楝F(xiàn)場(chǎng)鍵盤(pán)鼠標(biāo)經(jīng)常被擋在設(shè)備內(nèi)部而且一旦機(jī)器人跑起來(lái)你要有辦法在安全的距離外遠(yuǎn)程觀察和控制。先看網(wǎng)絡(luò)地址。工控機(jī)通常有網(wǎng)口IP可能是靜態(tài)的也可能是DHCP自動(dòng)獲取的拿到IP前不要急著敲SSH。老派命令是ifconfig新系統(tǒng)里很多已經(jīng)不帶這個(gè)了我一般直接用ip addr show ping 192.168.1.100ip addr show會(huì)輸出所有網(wǎng)卡狀態(tài)找eth0、eth1或wlan0下的inet字段那就是本機(jī)IP。連不上時(shí)先ping一下目標(biāo)地址能通再考慮SSH否則后面全是白費(fèi)。ssh ros_user192.168.1.100提一句現(xiàn)場(chǎng)最常踩的坑機(jī)器人工控機(jī)可能默認(rèn)沒(méi)有開(kāi)啟SSH服務(wù)你會(huì)看到Connection refused。這時(shí)候如果沒(méi)法直接按鍵操作只能通過(guò)顯示器登錄后確認(rèn)一下服務(wù)狀態(tài)sudo systemctl enable --now ssh sudo systemctl status ssh我用過(guò)一個(gè)巡檢機(jī)器人項(xiàng)目最初出廠(chǎng)鏡像里就是沒(méi)開(kāi)SSH團(tuán)隊(duì)到現(xiàn)場(chǎng)傻眼最后只能拆開(kāi)外殼外接屏幕才搞定。后來(lái)我們把這一步寫(xiě)進(jìn)了出廠(chǎng)檢查表從此再?zèng)]出過(guò)這類(lèi)問(wèn)題。2.2 USB串口和虛擬網(wǎng)口沒(méi)有屏幕時(shí)的救命通道有些嵌入式主控板比如常見(jiàn)的樹(shù)莓派、RK3588核心板、NVIDIA Jetson系列可以通過(guò)USB線(xiàn)直接給電腦虛擬出一個(gè)網(wǎng)口或者串口。這種方式在機(jī)器人沒(méi)配屏幕的時(shí)候幾乎就是唯一的調(diào)試入口。先確認(rèn)系統(tǒng)有沒(méi)有識(shí)別到USB設(shè)備。我慣用的兩步是lsusb dmesg | grep -E ttyUSB|ttyACM|usb | tail -n 20如果板子通過(guò)USB虛擬成了串口一般會(huì)生成/dev/ttyUSB0或/dev/ttyACM0??吹皆O(shè)備之后用串口工具連上去screen /dev/ttyUSB0 115200 # 或 minicom -D /dev/ttyUSB0 -b 115200如果機(jī)器人類(lèi)似開(kāi)發(fā)板走的是USB虛擬網(wǎng)口模式RNDIS或NCM你會(huì)在本機(jī)看到多出一張usb0網(wǎng)卡它通常會(huì)被分配一個(gè)固定地址常見(jiàn)的是192.168.55.1或192.168.42.1之類(lèi)。廠(chǎng)商不同地址不同但只要你看到虛擬網(wǎng)卡直接看它的inet字段然后SSH到對(duì)應(yīng)的對(duì)端IP即可。這里最折磨人的問(wèn)題是串口工具的權(quán)限報(bào)錯(cuò)。screen打開(kāi)設(shè)備時(shí)提示Permission denied別慌先看當(dāng)前用戶(hù)是否在dialout用戶(hù)組里sudo usermod -a -G dialout $USER改完組成員要注銷(xiāo)重新登錄才生效。很多教程沒(méi)有強(qiáng)調(diào)“重新登錄”這一步導(dǎo)致用戶(hù)反復(fù)敲sudo chmod 777 /dev/ttyUSB0那種做法只能臨時(shí)用一次拔插設(shè)備后權(quán)限又會(huì)變回原來(lái)的樣子。2.3 不用屏幕的IP急救思路真到了機(jī)器人既沒(méi)屏幕又沒(méi)記住IP的處境先別拆機(jī)。如果機(jī)器人通過(guò)網(wǎng)線(xiàn)跟電腦直連給它手動(dòng)配一個(gè)同網(wǎng)段的靜態(tài)IP通常能解決問(wèn)題。你可以把電腦的有線(xiàn)網(wǎng)卡IP配成192.168.1.50/24然后用nmap或arp-scan去掃局域網(wǎng)里可能的設(shè)備。注意這類(lèi)掃描工具在生產(chǎn)環(huán)境要慎用有些工業(yè)交換機(jī)會(huì)有告警但點(diǎn)到為止我自己用得最多的其實(shí)是先把ping 192.168.1.100這類(lèi)常見(jiàn)地址挨個(gè)試一遍不行再掃。如果板子仍然支持串口登錄那就更直接了用USB轉(zhuǎn)串口接上調(diào)試串口進(jìn)入系統(tǒng)后敲ip addr拿IP順便還能改靜態(tài)配置。說(shuō)到底急救通道要靠平時(shí)留好后門(mén)而不是現(xiàn)場(chǎng)臨陣磨槍。我一般在交項(xiàng)目時(shí)會(huì)專(zhuān)門(mén)在部署文檔里寫(xiě)一頁(yè)“無(wú)頭模式應(yīng)急登錄指南”包含串口波特率、默認(rèn)賬號(hào)、SSH開(kāi)關(guān)命令這是現(xiàn)場(chǎng)最能救命的一頁(yè)紙。3. 核心控制用ROS/ROS 2命令讓機(jī)器人真正動(dòng)起來(lái)3.1 ROS 1與ROS 2常用命令的對(duì)應(yīng)關(guān)系現(xiàn)在機(jī)器人行業(yè)依然有ROS 1存量項(xiàng)目但新項(xiàng)目基本都切到ROS 2了。兩個(gè)版本的命令風(fēng)格差異很大ROS 1是rostopic、rosservice、rosnode這類(lèi)分散式設(shè)計(jì)ROS 2則是統(tǒng)一前綴ros2 topic/service/node/param/action。給出對(duì)照表能少走很多彎路功能ROS 1命令ROS 2命令查看節(jié)點(diǎn)列表rosnode listros2 node list查看話(huà)題列表rostopic listros2 topic list打印話(huà)題數(shù)據(jù)rostopic echo /topicros2 topic echo /topic手動(dòng)發(fā)布話(huà)題rostopic pub /topic std_msgs/String data: hiros2 topic pub /topic std_msgs/msg/String {data: hi} --once查看話(huà)題頻率rostopic hz /topicros2 topic hz /topic調(diào)用服務(wù)rosservice call /srv data: 1ros2 service call /srv std_srvs/srv/SetBool {data: true}修改參數(shù)rosparam set /param 1ros2 param set /node param 1ROS 2剛上手的人最容易記混的就是消息類(lèi)型帶不帶msg。ROS 1里寫(xiě)std_msgs/StringROS 2里卻要寫(xiě)std_msgs/msg/String漏掉/msg就會(huì)告訴你找不到類(lèi)型。這個(gè)坑我現(xiàn)在閉著眼都能避開(kāi)因?yàn)椴冗^(guò)的次數(shù)實(shí)在太多了。3.2 話(huà)題通信看數(shù)據(jù)、發(fā)數(shù)據(jù)、測(cè)頻率話(huà)題是ROS生態(tài)里機(jī)器人“廣播電臺(tái)”導(dǎo)航節(jié)點(diǎn)發(fā)布速度指令底盤(pán)驅(qū)動(dòng)節(jié)點(diǎn)去訂閱。所以調(diào)機(jī)器人“動(dòng)不動(dòng)”第一件事永遠(yuǎn)是看相關(guān)話(huà)題上有沒(méi)有數(shù)據(jù)。以最常見(jiàn)的cmd_vel話(huà)題為例ros2 topic list | grep cmd_vel ros2 topic echo /cmd_vel如果你一直盯著終端沒(méi)有任何輸出說(shuō)明這個(gè)話(huà)題沒(méi)有發(fā)布者或者發(fā)布頻率極低。這時(shí)候要查節(jié)點(diǎn)圖是不是導(dǎo)航模塊沒(méi)起來(lái)或者控制指令沒(méi)有真正輸出。再測(cè)一下話(huà)題頻率ros2 topic hz /cmd_vel如果顯示no new messages大概率是上游沒(méi)發(fā)布如果hz忽高忽低那要懷疑工控機(jī)負(fù)載問(wèn)題。頻率能穩(wěn)在十幾赫茲以上數(shù)據(jù)鏈路基本才算正常。想要手動(dòng)讓機(jī)器人動(dòng)起來(lái)可以直接發(fā)布速度指令但真機(jī)上操作要極其克制。我自己只會(huì)在輪子懸空、底盤(pán)被架起、急停按鈕在手邊這三個(gè)條件同時(shí)滿(mǎn)足時(shí)才敢在真實(shí)設(shè)備上這么干ros2 topic pub /cmd_vel geometry_msgs/msg/Twist {linear: {x: 0.1, y: 0.0, z: 0.0}, angular: {z: 0.0}} --rate 10這條命令會(huì)以10Hz持續(xù)發(fā)布敲CtrlC停掉。記得把速度調(diào)小發(fā)布完馬上觀察電機(jī)有沒(méi)有“嗡”一聲通電響應(yīng)。我見(jiàn)過(guò)有人用--once只發(fā)一次結(jié)果機(jī)器人沒(méi)反應(yīng)就以為電機(jī)壞了其實(shí)是速度指令只到了一個(gè)瞬間驅(qū)動(dòng)還沒(méi)來(lái)得及響應(yīng)就已經(jīng)停了。3.3 讓底盤(pán)和機(jī)械臂執(zhí)行動(dòng)作的高頻命令移動(dòng)機(jī)器人到底盤(pán)部分核心接口是/cmd_vel但很多機(jī)器人底盤(pán)還要求先調(diào)用“使能/去使能”服務(wù)不然電機(jī)會(huì)處于抱閘或待機(jī)狀態(tài)。這時(shí)候用服務(wù)調(diào)用命令ros2 service list | grep -E enable|power ros2 service call /driver/enable std_srvs/srv/SetBool {data: true}機(jī)械臂的控制方式則更偏向動(dòng)作接口Action。先列出可用的Actionros2 action list -t假設(shè)機(jī)械臂控制器暴露了一個(gè)關(guān)節(jié)軌跡Action例如很多項(xiàng)目里常見(jiàn)的/arm_controller/follow_joint_trajectory發(fā)送目標(biāo)需要帶上目標(biāo)關(guān)節(jié)角度、速度、時(shí)間。命令行手寫(xiě)JSON比較痛苦我通常會(huì)打開(kāi)另一個(gè)終端先echo一下當(dāng)前關(guān)節(jié)狀態(tài)ros2 topic echo /joint_states --once把當(dāng)前關(guān)節(jié)角度抄下來(lái)再按目標(biāo)位置構(gòu)造Action目標(biāo)。實(shí)際發(fā)送的完整命令會(huì)很長(zhǎng)這也是為什么我更推薦用腳本或RViz里手動(dòng)拖拽來(lái)測(cè)試機(jī)械臂但當(dāng)你只需要驗(yàn)證通信鏈路時(shí)命令行仍然是最快的探針。對(duì)于ROS 1存量機(jī)械臂還會(huì)遇到直接用服務(wù)使能的習(xí)慣比如rosservice call /arm_driver/servo_on {} rosservice call /arm_driver/move_joint joint1: 0.5, joint2: 0.8這些服務(wù)名和字段跟具體廠(chǎng)商強(qiáng)相關(guān)沒(méi)有統(tǒng)一標(biāo)準(zhǔn)。拿到一個(gè)不熟悉的機(jī)械臂項(xiàng)目我會(huì)先rosservice list或者ros2 service list看全部接口再?gòu)闹胁鲁觥笆鼓?、停止、回零”這幾個(gè)關(guān)鍵語(yǔ)義比直接翻SDK文檔更快。3.4 錄包回放調(diào)試問(wèn)題時(shí)的“時(shí)光機(jī)”機(jī)器人跑著跑著突然抽風(fēng)是偶發(fā)問(wèn)題這時(shí)候不要急著改代碼先錄一段數(shù)據(jù)把現(xiàn)場(chǎng)原樣保存下來(lái)。ROS 2里錄包命令很簡(jiǎn)潔ros2 bag record -a -o fault_bag-a會(huì)錄制所有話(huà)題數(shù)據(jù)量比較大但調(diào)試現(xiàn)場(chǎng)我常常無(wú)腦全錄因?yàn)槭潞蠓治鰰r(shí)你很難預(yù)料哪個(gè)話(huà)題才是關(guān)鍵。錄完以后用ros2 bag info fault_bag查看錄到了哪些內(nèi)容回放則用ros2 bag play fault_bag回放時(shí)需要注意一點(diǎn)回放只會(huì)發(fā)話(huà)題消息不會(huì)自動(dòng)觸發(fā)機(jī)械臂執(zhí)行動(dòng)作因?yàn)檎鎸?shí)的控制鏈路上通常還有安全邏輯、狀態(tài)機(jī)、心跳檢測(cè)。所以錄包回放主要用來(lái)離線(xiàn)復(fù)現(xiàn)感知和定位問(wèn)題而不是把整個(gè)機(jī)器人帶回放狀態(tài)。ROS 1時(shí)代對(duì)應(yīng)的是rosbag record -a和rosbag play邏輯一樣。4. 傳感器與底層硬件排查機(jī)器人“感知不到”怎么辦4.1 相機(jī)、雷達(dá)、IMU有沒(méi)有被系統(tǒng)正常識(shí)別機(jī)器人不上電傳感器不工作很多時(shí)候根本不是算法問(wèn)題而是系統(tǒng)層面壓根沒(méi)發(fā)現(xiàn)設(shè)備。排查思路很樸素先看USB層再看驅(qū)動(dòng)層最后看ROS話(huà)題層。首先確認(rèn)USB設(shè)備識(shí)別情況lsusb如果你在列表里看不到相機(jī)的廠(chǎng)商ID大概率是供電不足、線(xiàn)材問(wèn)題或者設(shè)備壓根沒(méi)上電。USB線(xiàn)對(duì)相機(jī)的影響很大我在現(xiàn)場(chǎng)換過(guò)不止一次看起來(lái)一模一樣但內(nèi)部線(xiàn)序不同的線(xiàn)所以遇到設(shè)備偶爾掉線(xiàn)先懷疑線(xiàn)材成本最低。攝像頭檢測(cè)還可以用V4L2工具v4l2-ctl --list-devices激光雷達(dá)則要看串口或網(wǎng)口。很多單線(xiàn)雷達(dá)走串口用上一章的方法確認(rèn)/dev/ttyUSB0存在后再去看雷達(dá)的話(huà)題有沒(méi)有輸出。IMU有時(shí)候走I2C或者SPI和主控是固定連接的這時(shí)候dmesg | grep -i imu往往能快速看到驅(qū)動(dòng)加載日志。系統(tǒng)層識(shí)別沒(méi)問(wèn)題后再進(jìn)入ROS話(huà)題層確認(rèn)ros2 topic list | grep -E scan|pointcloud|image|camera_info ros2 topic hz /scan話(huà)題有頻率說(shuō)明驅(qū)動(dòng)和硬件都正常。頻率為0則優(yōu)先看驅(qū)動(dòng)進(jìn)程是否還活著進(jìn)程活著再去翻日志這就是我說(shuō)的自下而上排查順序。4.2 用CAN命令和驅(qū)動(dòng)器對(duì)話(huà)底盤(pán)電機(jī)驅(qū)動(dòng)器很大一部分走CAN總線(xiàn)。Linux下把CAN接口拉起來(lái)是有固定流程的需要先把接口配置成CAN模式sudo ip link set can0 up type can bitrate 500000常見(jiàn)波特率有250K、500K和1M具體參考電機(jī)驅(qū)動(dòng)手冊(cè)。設(shè)置好之后可以用ip -details -statistics link show can0查看接口狀態(tài)重點(diǎn)關(guān)注有沒(méi)有ERROR-ACTIVE如果出現(xiàn)BUS-OFF說(shuō)明總線(xiàn)上有比較嚴(yán)重的錯(cuò)誤多半是波特率不匹配、終端電阻缺失或線(xiàn)序接錯(cuò)。查看總線(xiàn)上實(shí)際流動(dòng)的數(shù)據(jù)老牌命令是candumpcandump can0如果總線(xiàn)上有驅(qū)動(dòng)器周期上報(bào)狀態(tài)這里就會(huì)不斷滾幀。不滾幀不代表總線(xiàn)壞了可能只是當(dāng)前節(jié)點(diǎn)沒(méi)有報(bào)文需要你主動(dòng)讓某個(gè)驅(qū)動(dòng)器回復(fù)。測(cè)試CAN發(fā)送可以這樣發(fā)一顆標(biāo)準(zhǔn)幀cansend can0 123#DEADBEEF手動(dòng)測(cè)CAN時(shí)最好只針對(duì)測(cè)試設(shè)備比如PID調(diào)試器或?qū)iT(mén)設(shè)置的從站ID。直接對(duì)車(chē)上正常工作的驅(qū)動(dòng)器發(fā)亂幀輕則通訊中斷重則觸發(fā)急停甚至損壞設(shè)備。這類(lèi)問(wèn)題的排查不能只靠試。4.3 電源、溫度和資源占用其實(shí)也是一等公民機(jī)器人看著像軟件問(wèn)題查到最后往往是硬件狀態(tài)不對(duì)。最常見(jiàn)的是電池電壓跌落導(dǎo)致電機(jī)驅(qū)動(dòng)器過(guò)壓保護(hù)或欠壓報(bào)警。某些底盤(pán)會(huì)把電池狀態(tài)直接發(fā)成ROS話(huà)題比如/battery_state直接用ros2 topic echo /battery_state --once如果廠(chǎng)商標(biāo)定不標(biāo)準(zhǔn)那就去底層電源管理接口找。一些工控板會(huì)把電池電量暴露在sysfs里cat /sys/class/power_supply/BAT0/capacity cat /sys/class/power_supply/BAT0/voltage_now另外還要養(yǎng)成看系統(tǒng)資源的習(xí)慣機(jī)器人運(yùn)動(dòng)控制對(duì)延遲敏感高負(fù)載可能導(dǎo)致話(huà)題卡頓、指令超時(shí)。老牌工具就是htop和free沒(méi)有就裝一個(gè)。我一般用htop按CPU占用排序看哪個(gè)進(jìn)程在偷跑。溫度方面對(duì)工控機(jī)和Jetson這類(lèi)平臺(tái)尤其關(guān)鍵sensors如果提示沒(méi)有傳感器Jetson板子可以用自帶的tegrastats查看CPU/GPU溫度和頻率。多核機(jī)器人偶爾出現(xiàn)“跑一會(huì)就死機(jī)”八成跟散熱和降頻有關(guān)千萬(wàn)不要一上來(lái)就懷疑是代碼死循環(huán)。5. 遇到疑難雜癥別慌日志與異常排查命令梳理5.1 日志檢索先定層別直接翻底朝天機(jī)器人系統(tǒng)分層多出問(wèn)題時(shí)如果直接去翻所有日志很容易被刷屏帶偏。我給自己定的習(xí)慣是先確認(rèn)是“啟動(dòng)失敗”還是“運(yùn)行中偶發(fā)故障”再?zèng)Q定看哪個(gè)日志。啟動(dòng)失敗去看launch和systemd日志運(yùn)行中故障則優(yōu)先看ROS節(jié)點(diǎn)的終端輸出、核心轉(zhuǎn)儲(chǔ)和系統(tǒng)日志。現(xiàn)在很多機(jī)器人項(xiàng)目會(huì)把核心進(jìn)程做成systemd服務(wù)查服務(wù)狀態(tài)用sudo systemctl status robot_bringup journalctl -u robot_bringup -f-f相當(dāng)于持續(xù)跟蹤相當(dāng)于把終端拉到服務(wù)日志最末端。調(diào)試現(xiàn)場(chǎng)我經(jīng)常用另一個(gè)終端專(zhuān)門(mén)掛著日志一邊操作機(jī)器人一邊看實(shí)時(shí)輸出出現(xiàn)異常馬上能定位是哪一層報(bào)的錯(cuò)。如果進(jìn)程不是systemd管理而是手動(dòng)在終端里啟動(dòng)的啟動(dòng)時(shí)順手加一句管道重定向會(huì)省很多事ros2 launch mybot_bringup mybot_launch.py 21 | tee launch.logtee讓輸出既上屏又落盤(pán)現(xiàn)場(chǎng)沒(méi)記錄下來(lái)后面就很難復(fù)盤(pán)。注意別把日志文件寫(xiě)到根目錄或系統(tǒng)盤(pán)里寫(xiě)滿(mǎn)空間曾經(jīng)見(jiàn)過(guò)一個(gè)項(xiàng)目把rosbag全錄在/下最后系統(tǒng)盤(pán)滿(mǎn)了機(jī)器人直接罷工。5.2 ROS自帶的診斷命令千萬(wàn)別忽視ROS 2自帶一套診斷工具很多人不知道。每次現(xiàn)場(chǎng)排查前我先跑一遍整體體檢ros2 doctor它會(huì)自動(dòng)檢查環(huán)境變量、網(wǎng)絡(luò)配置、話(huà)題通信、DDS發(fā)現(xiàn)問(wèn)題等并給出警告。簡(jiǎn)單說(shuō)它會(huì)幫你判斷ROS層是不是“健康”的。如果輸出的紅色項(xiàng)較多先處理紅色項(xiàng)再調(diào)機(jī)器人否則后面做什么都像在雷區(qū)里走路。還有兩個(gè)很基礎(chǔ)的排除手段常被忽略ros2 node info能看某個(gè)節(jié)點(diǎn)發(fā)布/訂閱了哪些話(huà)題以及服務(wù)、Action、參數(shù)等信息用來(lái)判斷節(jié)點(diǎn)是否真的把接口都建好了ros2 node info /robot_driver另外ROS 2的通信依靠DDS如果節(jié)點(diǎn)明明存在但話(huà)題互相看不到可能是DDS發(fā)現(xiàn)機(jī)制罷工了。這時(shí)可以重啟ROS 2守護(hù)進(jìn)程ros2 daemon stop ros2 daemon start這個(gè)動(dòng)作不是玄學(xué)它解決了不少“節(jié)點(diǎn)列表顯示不全”的詭異現(xiàn)象。我在一個(gè)項(xiàng)目里調(diào)試時(shí)明明四個(gè)節(jié)點(diǎn)都活著但ros2 node list只顯示兩個(gè)重啟daemon后四個(gè)都正常了。5.3 進(jìn)程崩潰信息與核心轉(zhuǎn)儲(chǔ)判斷節(jié)點(diǎn)進(jìn)程直接掛掉、終端也沒(méi)捕獲到異常這類(lèi)情況要靠系統(tǒng)日志。段錯(cuò)誤常見(jiàn)于C節(jié)點(diǎn)訪(fǎng)問(wèn)了非法內(nèi)存先快速瞄一眼內(nèi)核日志dmesg | tail -n 30如果看到segfault或core dump關(guān)鍵字說(shuō)明進(jìn)程確實(shí)在底層崩了再進(jìn)一步用coredumpctl查看是否有完整轉(zhuǎn)儲(chǔ)coredumpctl list coredumpctl info pid有了core文件就可以用GDB回溯崩潰現(xiàn)場(chǎng)這里不做展開(kāi)但排查思路上要明確一點(diǎn)底層崩潰往往是內(nèi)存問(wèn)題、接口不匹配或者第三方庫(kù)版本沖突不是單純靠加日志能解決的。5.4 桌面運(yùn)維里的高頻問(wèn)題速查表把現(xiàn)場(chǎng)遇到最常見(jiàn)的問(wèn)題整理成一張表每次照著走能省不少時(shí)間?,F(xiàn)象排查命令判斷依據(jù)USB設(shè)備插上沒(méi)反應(yīng)lsusb、dmesg | tail列表里沒(méi)有設(shè)備或報(bào)權(quán)限錯(cuò)誤先查線(xiàn)和供電串口能打開(kāi)但亂碼minicom -D /dev/ttyUSB0波特率不對(duì)或串口被其他程序占用節(jié)點(diǎn)列表只顯示部分ros2 daemon stop; ros2 daemon startdaemon緩存和DDS發(fā)現(xiàn)不同步話(huà)題有發(fā)布但沒(méi)訂閱ros2 topic info /topic -v看Publishers和Subscribers數(shù)量底盤(pán)指令發(fā)了不走ros2 topic echo /cmd_vel、服務(wù)列表確認(rèn)指令數(shù)據(jù)量再查驅(qū)動(dòng)使能服務(wù)CAN總線(xiàn)BUS-OFFip -details link show can0線(xiàn)序、終端電阻、波特率錯(cuò)誤程序偶發(fā)崩潰dmesg | tail、coredumpctl是否有段錯(cuò)誤和core文件這張表我寫(xiě)進(jìn)過(guò)團(tuán)隊(duì)內(nèi)部的排錯(cuò)手冊(cè)收到的反饋是“比看幾十頁(yè)開(kāi)發(fā)文檔有用”。6. 讓命令從“背下來(lái)”變成“順手用”的實(shí)操習(xí)慣6.1 環(huán)境變量和alias重復(fù)勞動(dòng)自動(dòng)化如果你的機(jī)器人項(xiàng)目固定在某個(gè)工作空間每次開(kāi)終端都要source環(huán)境日積月累非常煩。我會(huì)在.bashrc里加幾行別名把最長(zhǎng)、最容易打錯(cuò)的命令縮短alias cwcd ~/robot_ws source install/setup.bash alias rbros2 launch mybot_bringup mybot_launch.py alias kbotpkill -f bringup這里不建議盲目把source /opt/ros/humble/setup.bash寫(xiě)進(jìn)全局.bashrc因?yàn)橥粋€(gè)終端里如果加載了多個(gè)ROS版本容易互相污染。我的習(xí)慣是每個(gè)項(xiàng)目建一個(gè)專(zhuān)屬環(huán)境文件進(jìn)入項(xiàng)目前手動(dòng)加載這樣換項(xiàng)目不會(huì)產(chǎn)生靈異提問(wèn)。如果在真機(jī)運(yùn)行的時(shí)候要啟動(dòng)一整套系統(tǒng)我通常會(huì)寫(xiě)一個(gè)啟動(dòng)腳本腳本先把固定參數(shù)配好再按順序拉起節(jié)點(diǎn)。腳本里不要直接用sudo開(kāi)各種服務(wù)建議把需要特權(quán)操作的命令單獨(dú)抽出來(lái)用systemd或polkit管理這樣系統(tǒng)重啟后也能自動(dòng)恢復(fù)機(jī)器人服務(wù)不至于每次都要手動(dòng)敲一串長(zhǎng)長(zhǎng)的啟動(dòng)命令。6.2 tmux一套保留完整調(diào)試現(xiàn)場(chǎng)的辦法機(jī)器人調(diào)試往往需要同時(shí)盯好幾個(gè)終端一個(gè)看導(dǎo)航狀態(tài)一個(gè)盯驅(qū)動(dòng)日志一個(gè)隨時(shí)準(zhǔn)備發(fā)指令。對(duì)SSH連接來(lái)說(shuō)如果斷線(xiàn)重連原先終端里的進(jìn)程和輸出就都丟了。用tmux可以解決tmux new -s robot進(jìn)入tmux后按CtrlB再按C可以開(kāi)新窗口按CtrlB再按%可以左右分屏按CtrlB再按”是上下分屏。最實(shí)用的地方在于即使SSH斷開(kāi)tmux里的session還在后臺(tái)跑重新連接后執(zhí)行tmux attach -t robot現(xiàn)場(chǎng)就完整地找回來(lái)了。我用這個(gè)方法把一個(gè)導(dǎo)航調(diào)試過(guò)程保持了幾天中間反復(fù)斷網(wǎng)重連但所有終端狀態(tài)都還在效率提升非常明顯。6.3 建立一份屬于你自己的機(jī)器人命令速查清單每個(gè)機(jī)器人項(xiàng)目的接口都不一樣別人給的命令再全也未必完全匹配你的車(chē)。我強(qiáng)烈建議你從接手第一個(gè)機(jī)器人項(xiàng)目開(kāi)始就建立一份自己的“命令速查.md”內(nèi)容按這幾類(lèi)記錄每次部署時(shí)用到的網(wǎng)絡(luò)配置和SSH登錄方式、底盤(pán)和機(jī)械臂的驅(qū)動(dòng)使能方法、所有關(guān)鍵話(huà)題名稱(chēng)和消息類(lèi)型、廠(chǎng)商文檔里藏得比較深的服務(wù)接口、現(xiàn)場(chǎng)解決問(wèn)題時(shí)使用的排查命令。格式不用復(fù)雜Markdown表格就夠了。寫(xiě)文檔的最大價(jià)值不在于“以后忘了能翻”而在于記錄過(guò)程中你會(huì)被迫梳理接口之間的關(guān)系。這比單純背命令有效得多。我也是從第一臺(tái)機(jī)器人開(kāi)始這樣做現(xiàn)在累積的速查筆記已經(jīng)成了整個(gè)團(tuán)隊(duì)接手新項(xiàng)目時(shí)的第一手資料。最后再說(shuō)一個(gè)我的個(gè)人習(xí)慣每次現(xiàn)場(chǎng)解決完一個(gè)疑難問(wèn)題我都會(huì)順手往速查清單里補(bǔ)一條“現(xiàn)象命令結(jié)論”的記錄。半年后翻出來(lái)看很多當(dāng)初覺(jué)得玄乎的問(wèn)題背后原因其實(shí)都非常樸素。機(jī)器人常用命令從來(lái)不是背會(huì)的是在每一次現(xiàn)場(chǎng)折騰里用會(huì)的。希望這篇分享能幫你把那些“對(duì)著屏幕不知道敲什么”的時(shí)刻壓縮得更短把省下來(lái)的時(shí)間拿去處理真正的機(jī)器人工程問(wèn)題。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
婷婷色在线| 狠狠综合网| 日韩一级成人毛片免费观看 | 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | A啊啊在线观看| 免费观看网黄| 中文字幕乱妇免费视频| 亚欧色图在线激情| 亚洲毛片久久| 任你干在线视频| 欧美黄色大香蕉一区二区| 思思热一热婷婷热一热| 久偷拍欧美日韩三区| 成人国产精品三级A片| 天天干18禁| 蜜臀AV成人精品蜜臀AV久久| 女人妻一区| 中文字幕成人理论在线| 国产在线激情视频| 国产在线视频午夜精华在| 高清无码91| 精品国产国产AV| 国产13区| 一道本东京热加勒比一区二区三区| 福利视频一区二区微拍| 欧美黑人精品一区二区| 欧美日韩另类在线播放| av在线播放国产一区| 深夜激情| 欧美操逼录像国产黄色国产| 91综合国产精品| 麻豆福利视频导航| 大香蕉操久久| 欧美精品偷拍| 淫骚熟女一区二区三区| 欧美情色贴图| 蜜乳av一区二区三区| 骚乳在线| 亚洲色图综合网| 日本一片一区| 亚洲精品美女操逼| 97精选久久| 大屁股熟女一区二区三区| 97在线欧洲| 五月丁香六月| 啊啊啊好大好湿| 天天爽夜夜欢视| 久久亚洲天天做| 久久精品人体| 91欧美长吊| 激情五月婷婷| 久久亚州高清| 男人 天堂 日 亚洲| 极品色www影院| 秋霞久久亚洲精品成人| 国产Aα| caoni国产亚洲av| 久热影视| 久久男女激情视频网站| 曰韩精品九九无码| 国产白嫩精品久久| 天天综合网亚洲综合网| 天堂成人网| 欧美se综合| 国产三级中文字幕粉嫩| 色欧洲| 亚洲一区二区AV| 麻豆久久精品亚洲精品88| 1240青青草一区二区三区视频天爱 | 四虎在线观看视频| 欧美一区二区一级岛国大片| 18禁美女裸体无遮挡啪啪| 国产日韩欧美亚洲精品95 | 伊人 俄罗斯 a v| 少妇内射www在线观看视频 | 人人操AV| 超碰97男人| 国产亚卅97| 98福利在线视频| 日本免费一区二区不卡| 精品人妻一区二区三区日产乱码| 亚州操逼图| 大香蕉丝袜一级片| 搡老女人老妇女老妇老熟女怎么读| sss视频华人在线| 久久九七| 精品美女久久久久| 中文字幕在线观看二区三区| 熟妇熟女视频一区二区三区| 欧美变态激情网| 丝袜天堂网| A级在线视频| 午夜.DJ高清在线观看免费7| 视频在线观看一二三区| 久久久96精品| 黄色一区二区秘书性感| 三级三级三级日本99| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 久久久天堂| av一区二区三区不卡| 蜜乳中文字幕a在线| 在线人人人人人人精品超| 久久日韩毛| asc国产精品| 国产在线综合网| 国产视频不卡在线观看| 国产传媒美日韩av| 国产一级高清免费观看| 国产热RE99久久6国产精品首 | 国产无码精品久久久久久| 8050无码八戒| 亚洲91综合| 天天色天天干天天射| 丁香五月激情综合| 91亚洲电影| 中文字幕 国产区| 密臀AV在线| 亚洲AV秘无码一区..| 激情五月婷婷综合| 精品一级| 防屏蔽在线视频| 97伊人| 日韩丝袜二区| 99最新日韩偷拍视频| 亚洲国产91精品一区二区久久| 91原创在线观看| 欧美丝袜中文字幕07在线| 亚洲精品国产精品乱码不99| 欧美综合传媒| 97人人超| 男女无套 免费网站| 99色色网| 亚洲人成网站7777| 欧美日韩一干二干| 丁香五月天激情网站| 强奸熟女一区二区三区| 日本超碰在线国产一区| 很很操在线| 午夜福利在线视频1000| 99国产精品视频尤物| 超碰久在线天天做| 日本一本道A级黄色毛片试看60分钟| 97超碰欧美手机在线| 亚洲成人久久一区二区| 亚洲熟女乱色一区二区三区久久久| 国产女人和拘做爰视频| 美女t无毒不卡不卡| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 丝袜剧情| 一卡二卡三卡| 久久伊人在线五区| 亚洲欧洲日韩天堂av| 精品综合久久久久久97| 大香蕉久久| 91在线视频国产网站| 亚洲国产精品久久久久婷婷青年| 秋霞一级A片黄色视频| 色香在线| 色色综合网站| 手机午夜电影神马久久| 国产精品91ai| 日韩欧美操逼xxx| 久久99草| 自拍偷拍 日韩无码| 久久久久久久| 动漫区日韩区欧美区| 美女极品一区二区三区| 超碰人妻97| 啊啊啊啊二区好大| 97精彩视频网站| 色欲三区| 在线观看亚洲成人精品| 一区二区三区四区在线不卡| 日本一区二区三区精品| 国产精品自在线发布| 久久少妇| 色偷偷超碰亚洲| 67194无码不卡| 国产高清26uuu| 熟妇色99| AV男人天堂网| 亚洲精品久久一区二区三区蜜桃臀| www.99色| 伊人五月天| 亚欧操逼片在线观看| 国产性感在线观看| 激情综合亚洲| 色色色天美视频| 91被操| 99热销国产这里有精品| 伊人网在线观看| 丝袜美腿91| www.高清无码诱惑一区.com | 韩国一区二区精品亚洲| 婷色五月天| 五十路六十路七十路熟婆| 亚州男人天堂| 中韩中文字幕在线观看| 后入福利视频| 久久九精品| oumeisetupian| 日本人体九九九九九九| 国产亚卅97| 五月开心网| 婷婷综合在线| 去干网最新版| 久久五月婷| 欧美不卡二区| 日韩AV一起草| 成人网站 免费观看| 无色无码| 五月天激情四射| 欧美性爱一级操| 国产高清无码一区三区二区| 午夜超爽| 少妇3P性爱自拍| 天天操天天干一区二区 | 亚洲囯产精品女人久久久| 波多野结衣之双飞调教在线播放| 丁香九月婷婷| 精品国产乱码久久久久久蜜臀| 欧美天天影院| 欧美 色 亚洲| 日本阿v天堂在线观看| 欧美综合1性辶| 亚洲视频精选| 久久久性| 超97在线精品视频| 国产女生在线| 久久天天摸| 9久久9综合| 9久久9综合| 国产成人主播| 69麻豆天美| 九九久久综合| 人妻激情偷乱视频一区二区三区 | 亚爽爽爽爽爽爽爽爽| 啊好爽快点-国产一区二区三区撒尿在线-成人AV | 欧美激情一| 国产一区在线播放| 三男一女不戴套的A片| 日韩av不卡在线看| 欧美成人性爱视频大全| 亚洲天堂东京热| 操操操操网黑人| 天操天操夜操夜月月年年操操 | 久久久久13| 国产夫妻一区二区| 超碰在线成人电影| 亚洲国产精品成人久久蜜臀| 日本Xx性爱| 婷婷伊人网| 精产国品一区二三产品| 夜夜嗨一区二区三区三州加勒比| 中日韩一区二区三区欧美| 91碰超| 99操碰| 欧美天天综| 国产美女91| 中国AV美女| 婷婷丁香六月| 亚码人妻| 天天激情综合站| 国产一区二区视频在线播放| 精品美女少妇一区二区三区| 丰满人妻-区二区三区| 天堂俺去俺来也www久久婷婷| 黄色毛片A片| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 国产精品熟女一区二区三区| 日韩av影片在线观看| 日韩人妻资源在线看| 91日产欧美| 极品销魂美女一区二区| 国产日韩欧美三级片| 欧美亚洲AN| 啊啊啊免费视频| 伊人激情五月天一区二区| 中文字幕精品人妻丝袜| 日本精品999| 丁香婷婷啪啪| 97国产精选| h无码动漫在线观看| 色一射色一射| 中文字幕在线观| 国产精品无码论坛| 97亚洲欧美日韩| 2017大香蕉| 五月色综合| 国产99999久久精品| 美国精品国产精品| 嗯嗯嗯啊啊啊干死我吧| 国内亚洲精彩视频在线| 欲香欲色天天天综合和网| 亚洲伊人久久综合97| 精品区9| 日韩大香蕉精品在线视频| 明星性猛交ⅹxxx乱大交| 久久久一热在线播放| 农村妇女精品一二区| 97国产成人精品免费视频| 亚洲综合贴图91 | 亚洲欧洲无码97久久精品| 日韩兔费看黄片| 骚逼高潮久久精品| 无码137片内射在线影院| 久久超碰久| 男人午夜天堂| 99999精品成人| 激情视频图片| 天天操夜夜操狠很操| 99亚洲精品| 啊v在线观看视频| 久99| 大色综合| 干b在线性社区| 天天看夜夜看日日干| 天天享受天天看| 老熟妇一区二区三区…| 丰满人妻一区二区中文| 素人播放一区| 国产真乱mangent| 欧美色色人| 性爱乱伦网址| 天美精品原创av片国产| 久久仑合| 国产福利精品最新在线| 2019天天干| 福利天堂| 夜夜爽77777| 蜜乳中文字幕a在线| 歐美性天天| 精品伊人久久久大香线蕉小说| 四虎精品永久在线观看| 亚州乱码中文字幕综合久久久| 99视频这有这里有精品| 极品人妻少妇综合| 色哟哟-国产专区| 色哟哟511老熟女| 亚洲黄色电影| 欧美影音在线| 丁香五月天视频| 国产女人极品高潮毛片| 日本在线999| 欧美人妻一区二区| 嗯嗯,啊啊,国产精品| 97网站在线观看| 日产狠狠干| 人妻天天爽天天爽三区| 男人的天堂无码| 国产乱伦亚洲| 国产欧美日韩一区二区三区| 91视频女生| 色欲天天综合久久久无码网中文| 久久久九九| 国产精品3| 欧美少妇性乱| 亚洲日韩一区电影| 成人亚欧免费视频| 亚洲欧美综合网| AV99热18这里只有精品| 丁香五月天堂网| 成年女人黄网站| 日本性感人妻91| 中文字幕免费在线观看 | 国产性爱欧美性爱在线| 国产馆极品诱惑| 国产精品自拍欧美在线| 日韩免费在线视频观看| 女色综合| 97视频在线看| 性一级黄色录像片网站导航| 96一区二区三区| 夜夜福利| www.AV有限公司一区| 97网址www| 丁香五月天啪啪| 青青草天天亲夜夜操网| 免费伦费视频在线观看| 超碰无码加勒比| 尤物视频视频官网| 肏逼视频日本| 一级毛片电影免费看| 伊香蕉综合久久久久久久噜噜噜| 欧美综合自拍亚洲综合图| 77国产精品| 综合网亚| 欧美 亚洲 另类 综合| 亚洲一区二区三区麻豆传媒| 免费农村成人少妇人妻Aa一区二区视频| 激情AV| 亚洲aV无码成人在线观看| 青青草中日韩在线| 国产少妇与亚洲av| 免费精品无码一级毛片牛牛影视 | 北京美女一区二区| 欧美第一页| 欧洲精品一二三在线| 三级片大波波| AV一二区| 亚洲色香| 国产情色第一第二页在线观看| 麻豆伊人网| 麻豆婷婷成人一二三| 超碰精品| 国产视频小说| 伊人久久亚洲色欲综合网站 | 色哟哟511老熟女| 亚州操逼图| 操比国产| 麻豆天美电影一区二区| 夜夜嗨一区二区| 麻豆影音天美视频| 91亚洲欧美综合高清在线| 蜜臀va69| 欧美成人精品欧美一级乱黄一区二… | 亚洲影视第一页| 少妇熟女视频一二三区| 91久久久亚洲| 免费一级精品啪啪视频| 成年女人18级毛片毛片免费观看| 精品一区二区啪啪啪| 动漫片子网站3黄| 白丝少妇一区二区| 97超碰美女| 国产家庭乱伦表演| 嗯嗯,好大,好爽,好骚| 欧美很很操视频| 成人免费性爱视视| 在线观看一级α片刺激高潮视频| a一区二区三区乱码在线| 日韩性爱网址| 久久一区无码| 丰满欧美放荡少妇在线| 精品九九| 99精品在线观看| 超碰天天久久79| 亚洲 欧美 第一页| A一区片| 探花激情视频| 婷婷五月成人| 欧美肥臀在线| 中文字幕一区电影在线观看| 人妻啊啊人妻啊| 久久久精品视频欧州站| 久久九色| 99精品无码| 美日韩一二三区| 色欧洲| 强奸乱伦αv片| 亚州再线| 偷拍盗拍亚洲色图图片| 色色色999| 久久久久亚洲一区女同性恋中文字幕| 在线午夜成人无码视频| 91蜜桃婷婷狠狠久久综合9色| 国产精品第二页| 免费在线看黄片av| 亚洲无码99| 国产精品97超碰| 欧美日韩免费性爱| 目产99999久久999| 热思思免费视频| 91色艳| 国产91美女视频| 亚洲性爱无码乱伦av| 五十路人妻在线| 肏逼福利网站| 国产精品小视频一区二区三区| 亚洲欧美变态| 性爱av在线免费观看| 亚洲综合性网址| se01国产在线视频| 亚洲精品骚逼| 日韩人妻制服丝袜av| av大香蕉网站| 色屁屁影院www国产| 国产有码一区| 人人看黄色视频| 99国产精品在线观看| 婷婷爽人人婷婷爽视频| 欧美天堂日韩三级国产传媒| 久久精品国产Aⅴ| 久久一区,青青青青草视频在线播放| 91 丝袜在线播放| 熟女人妻av在线资源,黄色的资源| 超碰色美女| 97色婷婷| 女人高潮抽搐喷水视频网站| 国产精品禁久久久精品| 五月丁香影视| 亚洲精品久久久久毛片A片拉屎| 亚洲夜色在线| 亚洲 无码 偷拍| 天美传媒Av在线| 午夜啪啪片| 97国产精品在线观看| 日本久久精品| 在线αⅴ| 久久久久久九九九九九九| 免费在线观看国内色片网站网址| 中文字幕AV中出| 蜜色网色哟哟| 粉嫩绯色AV一区二区在线| 玖玖爱视频网站| 国产精品久久久亚洲一区| 一级性爱视频免费在线| 久偷拍欧美日韩三区| 亚洲AV成人无码一区二区三区在线观看| yazhououmeizongya| 天天添天天干电影| 国产亚洲欧美每日在线| 伦理第一页| 四季AV综合网址| 亚洲图片偷拍视频区| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 黄色视频高清无码网站| 嫩草 我啊~嗯~在线| 日本一级一级一级一级| 1级黄色夫妻对换性交免费看| 情色五月天就去干| 人妻久热在线| 国产免费一区在线观看| 成人免费视瓶| 亚洲精品欧洲色| 91天堂视频| AV大香蕉| 国产亚洲精品一区二区三区| 国产区在线| SUV一区二区在线看| 婷婷久久大香蕉| 99国产精品视频尤物| 超碰人人干天天射| 超碰视97中文| 日韩超碰精品综合| 91neishe| 色哟哟的毛片| 久久东京国产精品视频| 操逼不卡中文字幕| 久久精品国产精品一区 | 熟女六十路| 老熟女乱伦片| 91亚洲色图| 我爱操| 亚州欧美总和| 久久蜜色情在线视频xxx免费观看| 午夜人妻精品综合在线| 日本女人操逼| 26uuu性物| 激情黄色片在线观看| 91欧美网| 一本色道久久综合精品婷婷| 国产AB视频| 成人熟女区| 一区二区日韩欧美久久| 色五月综合网| 超碰精品在线| 国模精品一区二区三区苹果色戒| 国产精品熟女丝袜一区二区| 欧美日韩性爱操大逼| 奇米四色影视777久久久| 在线有码中文字幕| 欧美欧美啪啪视频| 一区二区三区免费视频入口| 在线视频 亚洲精品| 亚洲在线欧美| 欧美亚洲自拍另类人妻| a片在线播放| 狠狠久久手机视频精品| 四虎午夜影院| 国产精品黄色三级av| 国产精品点击进入在线影院| 午夜超爽| 亚洲国产麻豆一区二区三区| 成人性爱高清视频免费看| 婷婷丁香五月激情啪啪| 欧美色色色| 玖玖综合.com| 91伊人大香蕉| 97色妞| av日韩中文字幕| 人妻喷水| 91视频精品| 先锋影音av先锋一区| 天天色天天干天天射| 777奇米影视777四色| 91呆哥人妻| 视频二区美腿丝袜制服人妻欧美| 熟女丰满人妻一区| 午夜毛片高清免费不卡| 国产青视频| 蘋果手機免費看成人Av| 玖玖爱视频网站| 亚洲精品久久久久久久蜜桃臀| 人妻一二三区| 天天视频综合在线观看视频| 六月婷激情福利天堂69| 少妇内射www在线观看视频| 9 9无尺码天堂网| 欧美日韩久久精品爱爱| 精品丝袜无码一区二区三APP| 2019久久久久久久久福利| 婷婷丁香六月| 欧美第38页| 色97欧美| 国产精品直播在线观看直播| 亚洲日韩成人性爱视频| 噜噜噜无码AV一级一级久久影院| 97内射偷拍| 亚洲91网。| 欧美专利1区2区3区4区5区免费| 1区2区3区视频| 久久久久精| 国产三级多多影院2022国产AA一级毛片无码 | 男人天堂综合| 久久超碰网| 91午夜无码| 69超碰综合| 外站AV在线| 国精精品无码一二三区水多多| 精品人妻一区二区三区鲁大师| 无码外流操逼视频| 日本三级日本三级99| 日韩精品99久久久久久中文字幕| 热热色AV| 美国aaaaa一级黄片| 中文伊人大香蕉视频| 精品白丝一区| 大香蕉琪琪日本女优不卡| 亚洲欧美人妻| 五月激情视频| 一级黄碟| 尤物黄色在线观看网站| 色欲天天综合网| 校园春色欧美| 亚洲精品啪视频| 射丝袜高跟鞋99| 农村女一级毛卡片| 色情五月婷婷| 婷婷10月天青娱乐| 久久鲁干| 久久熟女久| 色翁荡息又大又硬又粗又爽| 一区,二区,三区网站| 91肉丝| 精品久久視頻在线| 青青草公开在线免费不卡视频| 欧美日韩国内不卡| 4虎在线视频| 亚洲国产一区二区入口| 亚洲精品1区| av无线看| 我中文字幕6区| 久久男人天堂| 不卡九肏| 久久riav中文精品| 久久国模av| 亚洲日韩精品一区视频在线| 好看的久久不射无码影视影院| 7777奇米影视久久| 先锋音影AV| 伦伦成年午夜免费视频| 香蕉大久久久| 色欲天天综合网| 天天欧美97| 亚洲中文制服诱惑| 色综合av综合久久| 天天干天天日天天射黄色片| 国产免a费看黄片在线| 久久久久久久久久黄色网 | 亚洲aV无码成人在线观看| 内射黑丝袜| 日韩精品人妻中文字幕有码午| 亚洲欧美国产精品久久久久久久| 久久无码精品| 一级特级aaaa毛片免费观看| 区一在线观看| 熟女91网| 青青青操| 人人操人人插人人摸人人干| 综合色久欲| 91站街按摩店老熟女熟女| 熟女精品日韩一区二区三区| 天天插天天舔舔天天干| 26uuu偷拍亚洲欧洲综合| 超碰欧美97资源| 狠狠色婷婷7777久| 亚洲日韩在线a不卡99精品| 91精品人妻一区二区-全集完整版免费正片国语-B02AV | 大香蕉啪啪啪啪在线| 日本黄色大片一级视频免费麻豆| 欧美激色| 欧美夜夜狠| 精品丝袜无码一区二区三APP| 18禁久极品美女久久哦哟呀!| 日韩中文字幕在线视频观看| 九九人妻| 亚洲、日韩、综合、另类| 日本欧美一区二区三区免费| 精品免费囯产一区二区三区| 狠狠夜色午夜久久综合在线| 天天爽天天干| 老司机天天操| 黄骗免费网站| 97超碰中文字幕| 久久的网站啊啊啊啊啊| 超碰成人国产| 一级做a爰片性色毛片久久| 亚洲日韩狠狠撸视频| 欧美性区| 99热色精品| 亚欧视频在线| 午夜性刺激视频免费观看| 欧美肥臀在线| 人妻激情在线视频| 男人天堂站| 中文字幕 人妻不满 在线视频| 看一级特黄a大一片| 久久精品国产99久久,亚洲日韩久久日本一区一区三区 | 在线视频免费观看午夜| 青青草依人大香蕉| 精品一区二区三区四区外站 | 人爽不卡视频| 中 文字幕一区二区三四 五 区日 日 骚 | 天天综合在线4| 婷婷五月天久久久| 国产色精品午夜大片| 无遮挡一级毛片视频免费的| 成人国产视频在线观看| 国产一区二区三区影片| 超碰碰小说97| 精品久久九| 综合色图,成人综合网| 亚洲制服aⅴ中文字幕| 亚洲日韩美女丝袜美腿人妻视频| 免费99精品国产自在在线| 东京热一区二区三区四区五区六区| 二色av| 久久精品国产亚洲AV成人直播| 欧美十八禁视频| 久久精品国产亚洲AV先锋| 91中文字幕制服丝袜免费视频| 欧美综合 站| 久久999久| 东京热男人的天堂网| 国产成人精品日本视频| 人人干人人操人人..com| 亚洲无码国产精品久久| 操国产逼| 亚洲无码超碰免费| 无码操逼天堂| 久久久少妇诱惑精品视频| 亚洲欧美日韩免费电影| www.色吧5.com| 91欧美丝袜| 福利在线视频一区二区| 人妻夜夜爽天天爽三区麻豆AV网站| 精品v1区| 观看视频图片一区二区三区| 亚洲暴力强奸AV| 精品人妻中文字幕4399| 欧美性爱第一区| 国产中文字幕曰本毛片| 久久无码一区二区二三区性色| 最新av网站在线观看| 韩国成人精品久久久免费看| 99热99在线播放激情| 亚洲操逼视频网站| 一区二区三区四区色图| 五月天人妻综合| 日本媚薬中文字幕在线| CCYY草草影院地址入口| 一区二区三区亚洲| www久久99| 久久久国产成人一区二区三区在线 | 中文字幕精品免费一区二区| 欧美不卡在线一区二区| 手机在线观看不卡无码av| 久久婷婷五月天| 亚洲国产综合久久久性感熟妇| 亚洲的天堂网| 国产9熟妇视频网站| 在线日韩精品一区二区三区| 先锋色眉乱伦资源| 丁香五月性| 青草香蕉网| 亚洲狠狠入| 91啪啪| 91操人| 日日日啊啊啊| Julia Annxxxxx| 久久精品福利影院| 日韩美女,国产传媒,视频一区| 麻豆精品天美| 久久国产乱子伦精品免费女,网站| 丰满人妻区一区二区三| 丁香五月天啪啪| 国产三级多多影院2022国产AA一级毛片无码 | 久久久久9999| 操九九九九九九| 午夜福利在线视频1000| 99999国产| 国产亚洲中文不卡二区| 久久综合五月天| 少妇第一页| 久9精品| 人人摸人人干人人拍97| 亚洲激情 欧美色图| 亚洲97网站| 成人小说视频在线精品欧美| 五月天激情网站| 欲射影视| 日韩av无码网站| 五月丁香婷婷综合| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 偷窥自拍亚洲色图| 操国产高清| 啊啊啊啊啊啊啊在线| 国产不卡片| 欧美亚洲国内自拍| 老鸭窝日丰县女人| 老熟妇一区二区三区…| 欧美色图天堂网m| 精品人妻一区二区三区不卡断| 亚洲成人一区二区精品| 九九九九日本| 激情五月天中文字幕色| 天天日夜夜爽| 欧美日韩亚洲天堂| 在线啊v一区| 啊啊啊啊啊舒服| 亚洲中文日韩欧美大香蕉视频| 校园春色欧美色图| 另类图片欧美激情综合| caopeng97| 精品人妻一区二区免费蜜桃视频| 日韩另类色图| 91精品国产综合久久久蜜臀酒店| 717影院理论午夜伦八戒| 老司机午夜精品福利视频一区二区 | 好吊色在线观看| 中文字幕免费在线观看| 久久久麻豆精品| 亚洲自拍青操视频| 色婷婷狠狠18禁| 亚洲AV色图| 91人妻最真实刺激绿帽| 黑人操一区二区| 全球成人中文在线| 天天影视射综合网| 欧美十八禁视频| 97视频在线免费看| av一区二区三区不卡| 久久最新视频免费观看| 熟妇xxxxx性春色| 中 文字幕一区二区三四 五 区日 日 骚| 收看日本人日bb| 91撸色网 玖玖网 欧美| 亚洲字幕一区二区| 亚洲天天精品| 国产亚洲综合欧美一区| 狠狠入| 99热| 91福利网在线观看| 亚州色图狠狠干| 国产精品色片一区二区| 乱色老一区二区三区的观看方式| 99久久综合| 精品视频一二三中文| 欧美日韩99精品麻豆传媒| 51国产午夜精品视频| 无码操逼天堂| 超碰AV在线| 91天天| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 欧美性色综合网| 精品欧美А∨无码黑人大荫蒂| 欧美特黄视频网站| 黄色大片一区二区密桃丝袜| 老熟妇一区二区三区| 欧美毛片在线网| 蜜乳Av成人片网站| 天天欲望网| 热99这里只有精品| 天美传媒AV在线| 蜜臀亚洲综合一二三四区| 亚洲精品aa久久伊人| 91搡老女人老妇女老熟女歌词翻译| 麻豆区99999| 日韩人妻中文视频| 亚洲高清视频在线免费观看| 久久久一区二区| 国产日韩在线播放| 老司机午夜精品视频| 熟妇无码视频三区| 丁香五月性| 午夜福利无毒不卡| 9久久久久久| 久久久专区| 婷婷五月天综合网| 另类 日韩 熟女| 久久久久女教师免费一区| 丝袜喷水在线| 天堂精品在线| 日本肏逼视频在线观看| 国语av狠狠色丁香婷婷综合激情| 超碰精品| 人妻五十路在线| 97操综合| 五月激情影院| 亚洲97成人在线观看| 亚洲九九视频| 熟女高潮合集-永久久久-成人AV | 丁香六月天| 另类一区| 1769国内精品视频| 日本男人天堂| 欧美狠狠狠| 欧美综合网1| 中文在线久久字幕| 五月婷婷六月色| 无码免费精品高清| 午夜亚洲国产理论秋霞| 26uuu最新| 亚洲一区二区三区婷婷| 97在线亚洲| 97国产精品在线观看| 欲女人妻性色av| 97视频7| 亚洲永久AV无码精品秋霞| 国产原创自拍| 日本精品一区二区中文字幕| 福利操逼| 国产精品激情久久久久久久| 夜夜天天噜狠狠爱2021| 秋霞一集毛片观看| AⅤ片水多多| 18禁在线视频| 粉嫩av一区二区三区天美传媒 | 亚州日韩97| 香蕉免费一区二区三区不读 | 精品无码一二三四区| 黄色高清久久无码依人| 激情五月综合网| 亚洲一区日韩| 婷婷六月色| 午夜天堂精品久久久久91| 欧美色色色| 91啪啪视频| 欧美性少妇| 亚洲精品97在线| 欧美精品自慰系列寂寞少妇| 国产精品第一区第一页| 欧美在线电影| 蜜桃网熟妇| 丝袜天堂网| 女一区二区| 久久天天躁日日躁狠狠躁| 天天射天天操天天干天天吃2018| 免费成人自拍视频在线| 91狠狠| 中国AAAAAA黄色片| 香蕉热人人精品| 国产精品探花视频| 欧亚在线视频| 日本三级韩国三级99| 久久日韩毛| 免費人妻夜夜爽天天爽爽一区| 嫩草影院永久在线制服丝袜| 蜜桃精品视频一区二区三区| 国产区在线| 91东北熟女| 不卡一区二区日本视频| 色色婷婷丁香| 人人考人人摸人人干| 日韩一区二区精品视频| 91 国产丝袜在线放观看| 国产黄色动态精品| 九九九九九九九九九九九九九九九女| 亚洲欧美日韩电影网站一区 | 日本操逼视频导航| 中日高清无码操逼视频| 26uuu国产成人综合| 狠狠色婷婷7777久| 人妻碰碰碰碰碰碰| 九九夜精品九九在线| 碰超人人在线一区二区三区| 久久婷婷苹果| 成人av性爱电影在线观看| 国产亚洲精品农村妇女| 久久精品国产精品亚洲艾通辽熟妇 | 国产三级多多影院2022国产AA一级毛片无码 | 一本大道久| 亚洲综合999| 中文字幕日韩人妻视频一区二区三区| 熟女激情综合网| 成人免费在线网站| 97精品国产97久久久久久| 久久香蕉超碰97国产精品| 99精品无码| 一二三区操逼国产91| 亚洲天堂人妻熟妇视频| 首页亚洲国产高跟丝袜诱惑视频| 日韩欧美女优电影| 综合视频91| 91亚洲网| 91成人久久| 97精品一二区| 99在线视频播放| 亚洲熟女人妻中文字幕一区二区 | 香蕉久久国产AV一区二区| 涩五月婷婷| 97网址97| 国产精品一二三区18| 亚洲国产ⅴ高清在线观看| 婷婷久久五月| 美女啪欧美一区| 亚洲天堂久久久久久粉红视频| AAA久久| 国产AV线| 欧美综合91| 狠狠干婷婷| 91天堂丝袜美腿| 午夜福利精品| 欧洲乱码视频| 日韩欧美操逼xxx| 丁香五月偷拍| 青青草原香蕉日本Ap| 久久久久久久伊人精品| 成人精品视频一区二区| 免费成人自拍视频在线| 久久久久久久久久久免费精品| 七久久久| 91情色| 青青草在线成人视频| 999综合网| 五月婷婷六月丁香| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 51久久夜色精品国产麻豆| 在线女人91| 视频国产欧美在线播放| 亚洲精品男人的天堂| 欧洲自拍第一页| 成年女人18级毛片毛片免费观看| 97在线观看免费| 亚洲熟女中文字幕在线| 男人天堂 天天射| 天天操夜夜操狠很操| 国产精品不卡一区二区三区| 大香蕉强奸乱伦| 亚洲性少妇| 8050无码八戒| 裸模AV女优| 成人无遮挡毛片免费看| 第四色色综合91| 国产9 9在线 | 亚洲| 天堂伊人久久| 亚洲精品aa久久伊人| 无码精品啪啪啪一区二区三区三州| 国产AV高清AV无码| 青娱乐黄色录像| 91丨国产丨白浆| 国产又粗又大硬免费色网视频| 亚洲棕合电彰| 性饥渴少妇av无码毛片| 老熟女熟妇| 大二网站亚洲| 中文字幕精品一区二区精品| 日韩综合色图| 青青草日逼视频| 国产又黄又粗的视频| 婷婷15月天青娱乐| 综合激情二| 日本熟妇色熟妇在线视频播放| 青娱乐久久艹| 极品人妻少妇综合| 97干日韩| 国产久久久久久| 欧美黄色图片| 中国zzijzzijzzwww精品| 天天澡天天爽日日av| 国产精品制服丝袜清纯唯美| 日韩少妇无吗| 午夜丁香婷婷| 日本二三四区| 日韩99神马视频播放| 国产美女91视频| 夜色AV无码手机在线影院| 久久欧美激情| 97碰碰日本乱偷人妻中文的| 久久国内| 啊啊啊啊操死我| 亚洲美女 晚间男人天堂 | 蜜桃天美传媒AV一区二区三区| 色色综合网站| 中文字幕日韩专区精品系列 | 最近2018中文字幕在线高清第一页| 操淫穴亚洲五月丁香| 久热伊人99re| 370p日韩欧美亚洲精品| 九九九九免费高| 99国产人成精品| 天天日B夜夜干B时时操B| 精品一区二区国产日韩| 男人的天堂VA| 国产乱弄免费在线视频。| 青青操轻轻| 国产成年免费大片黄在线观看| 蜜臀久久99精品久久久电影| 黄色av播放免不| 青青草视频爽一爽| 久青草影院| 少妇一级婬片免费放一级a性色.| 国产伦精品| 欧美色道啊| 精品无码久久久久| 精爱久久| ,国产乱人伦精品一区二区三区| 女人被添高潮免费视频| 三级日本一区二区三区| 亚洲天天更新| 伊色久人大在线| 久久久久96| 国产一区二区在线播放,久久亚洲精品中文字幕第一区,亚洲精品在线中文字幕视频 | 在线国产一区二区av| WWW.操逼.COM| 精品无码少妇| 97在线观看免费| 亚洲精品97在线| 天天干一干| 秋霞欧美性爰视频| 亚洲囯产精品女人久久久| 亚洲男人天堂2017| 伊人嫩草| 操逼999| aaa淫乱视频| 3571色综合一区二区二区| 国产 v乱码一区二| 韩国一级婬片A片无码天美| 四虎精品永久在线播放| 日韩图色| 天天欲望网| 性高潮久久久久久久久久久| 日本免费一区二区不卡| 丁香婷婷激情五月天无毒不卡| 狼人综合婷婷激情四射| 3p国产欧美99热| 国产欧美亚洲精品a第2页| 韩国午夜理伦三级好看| 欧美黄片免费在线观看视频| 97伊人网| 国产97色在线 | 亚洲| 日日玩天天干| 亚洲蜜臀精品视频久久| 久久精品操| 天天噜| 中国农村熟妇毛片视频| 性爱Av免费| 日本国产欧美一区三区二区| 97色碰|