化實戰(zhàn)指南)
1. 服務器響應緩慢的常見癥狀與初步判斷當服務器出現(xiàn)性能問題時通常會表現(xiàn)出以下幾種典型癥狀以Linux系統(tǒng)為例SSH登錄延遲輸入命令后長時間無響應或連接建立耗時超過3秒HTTP請求超時網頁加載時間超過5秒或API響應時間超過正常值的3倍系統(tǒng)監(jiān)控異常通過top命令觀察到CPU負載持續(xù)高于核心數(shù)的70%內存使用率超過90%Swap交換分區(qū)頻繁讀寫磁盤I/O等待時間超過50ms經驗提示建議先執(zhí)行uptime查看平均負載正常值應小于CPU核心數(shù)。例如4核機器負載長期高于4就需要警惕。2. 系統(tǒng)性排查的完整流程2.1 資源占用分析三板斧CPU瓶頸檢測# 實時監(jiān)控CPU使用率 top -c # 按CPU占用排序 shift P # 查看每個CPU核心的詳細負載 mpstat -P ALL 1內存泄漏排查# 查看內存總量和使用情況 free -h # 檢測內存泄漏進程 smem -s swap -r | head -10磁盤I/O檢查# 查看磁盤讀寫速度 iostat -x 1 # 檢查磁盤空間 df -Th # 定位大文件 du -sh /* | sort -rh | head -102.2 網絡性能深度檢測對于Web服務器需要特別關注網絡層指標檢測項正常值范圍異常處理建議TCP連接數(shù)1000(常規(guī)服務器)檢查netstat -ant丟包率0.1%ping -c 100 目標IP帶寬利用率70%iftop -nNP實時監(jiān)控連接延遲200mstraceroute 目標IP實測技巧使用mtr工具結合--tcp參數(shù)可以同時檢測路由和TCP性能mtr --report --tcp --port 80 example.com3. 高頻問題解決方案庫3.1 MySQL數(shù)據(jù)庫拖慢案例現(xiàn)象PHP應用響應慢但CPU/內存占用不高排查步驟檢查慢查詢日志SHOW VARIABLES LIKE slow_query_log%;臨時解決方案SET GLOBAL long_query_time 1; SET GLOBAL slow_query_log 1;永久優(yōu)化方案# my.cnf配置 [mysqld] slow_query_log 1 slow_query_log_file /var/log/mysql-slow.log long_query_time 1 log_queries_not_using_indexes 13.2 日志文件爆滿應急處理典型場景/var分區(qū)使用率100%處理流程# 1. 快速釋放空間 truncate -s 0 /var/log/syslog # 2. 輪轉日志 logrotate -f /etc/logrotate.conf # 3. 預防性配置 vim /etc/logrotate.d/自定義規(guī)則4. 高級診斷工具鏈4.1 內核級性能分析# 安裝perf工具 apt install linux-tools-common # 采樣CPU使用 perf top -p pgrep nginx # 生成火焰圖 perf record -F 99 -ag -- sleep 30 perf script | FlameGraph/stackcollapse-perf.pl | FlameGraph/flamegraph.pl output.svg4.2 全鏈路追蹤方案對于微服務架構建議采用OpenTelemetry埋點Jaeger可視化追蹤PrometheusGrafana監(jiān)控看板配置示例# docker-compose.yml片段 jaeger: image: jaegertracing/all-in-one ports: - 16686:16686 - 6831:6831/udp5. 長效優(yōu)化機制建設5.1 自動化監(jiān)控體系推薦組合方案基礎監(jiān)控Node Exporter Prometheus日志分析Loki Grafana告警通知Alertmanager 企業(yè)微信/釘釘5.2 性能基線管理建立服務器健康檔案# 采集系統(tǒng)基準數(shù)據(jù) cat EOF baseline.sh #!/bin/bash echo CPU: $(grep model name /proc/cpuinfo | wc -l) cores echo MEM: $(free -h | awk /Mem/{print $2}) echo DISK: $(lsblk -d -o NAME,ROTA,SIZE | grep -v NAME) EOF我在實際運維中發(fā)現(xiàn)90%的服務器性能問題都源于配置不當或資源監(jiān)控缺失。建議至少每周檢查一次/var/log/messages中的內核告警這對預防突發(fā)性性能下降非常有效 Linux服務器性能問題排查與優(yōu)化實戰(zhàn)指南
1. 服務器響應緩慢的常見癥狀與初步判斷當服務器出現(xiàn)性能問題時通常會表現(xiàn)出以下幾種典型癥狀以Linux系統(tǒng)為例SSH登錄延遲輸入命令后長時間無響應或連接建立耗時超過3秒HTTP請求超時網頁加載時間超過5秒或API響應時間超過正常值的3倍系統(tǒng)監(jiān)控異常通過top命令觀察到CPU負載持續(xù)高于核心數(shù)的70%內存使用率超過90%Swap交換分區(qū)頻繁讀寫磁盤I/O等待時間超過50ms經驗提示建議先執(zhí)行uptime查看平均負載正常值應小于CPU核心數(shù)。例如4核機器負載長期高于4就需要警惕。2. 系統(tǒng)性排查的完整流程2.1 資源占用分析三板斧CPU瓶頸檢測# 實時監(jiān)控CPU使用率 top -c # 按CPU占用排序 shift P # 查看每個CPU核心的詳細負載 mpstat -P ALL 1內存泄漏排查# 查看內存總量和使用情況 free -h # 檢測內存泄漏進程 smem -s swap -r | head -10磁盤I/O檢查# 查看磁盤讀寫速度 iostat -x 1 # 檢查磁盤空間 df -Th # 定位大文件 du -sh /* | sort -rh | head -102.2 網絡性能深度檢測對于Web服務器需要特別關注網絡層指標檢測項正常值范圍異常處理建議TCP連接數(shù)1000(常規(guī)服務器)檢查netstat -ant丟包率0.1%ping -c 100 目標IP帶寬利用率70%iftop -nNP實時監(jiān)控連接延遲200mstraceroute 目標IP實測技巧使用mtr工具結合--tcp參數(shù)可以同時檢測路由和TCP性能mtr --report --tcp --port 80 example.com3. 高頻問題解決方案庫3.1 MySQL數(shù)據(jù)庫拖慢案例現(xiàn)象PHP應用響應慢但CPU/內存占用不高排查步驟檢查慢查詢日志SHOW VARIABLES LIKE slow_query_log%;臨時解決方案SET GLOBAL long_query_time 1; SET GLOBAL slow_query_log 1;永久優(yōu)化方案# my.cnf配置 [mysqld] slow_query_log 1 slow_query_log_file /var/log/mysql-slow.log long_query_time 1 log_queries_not_using_indexes 13.2 日志文件爆滿應急處理典型場景/var分區(qū)使用率100%處理流程# 1. 快速釋放空間 truncate -s 0 /var/log/syslog # 2. 輪轉日志 logrotate -f /etc/logrotate.conf # 3. 預防性配置 vim /etc/logrotate.d/自定義規(guī)則4. 高級診斷工具鏈4.1 內核級性能分析# 安裝perf工具 apt install linux-tools-common # 采樣CPU使用 perf top -p pgrep nginx # 生成火焰圖 perf record -F 99 -ag -- sleep 30 perf script | FlameGraph/stackcollapse-perf.pl | FlameGraph/flamegraph.pl output.svg4.2 全鏈路追蹤方案對于微服務架構建議采用OpenTelemetry埋點Jaeger可視化追蹤PrometheusGrafana監(jiān)控看板配置示例# docker-compose.yml片段 jaeger: image: jaegertracing/all-in-one ports: - 16686:16686 - 6831:6831/udp5. 長效優(yōu)化機制建設5.1 自動化監(jiān)控體系推薦組合方案基礎監(jiān)控Node Exporter Prometheus日志分析Loki Grafana告警通知Alertmanager 企業(yè)微信/釘釘5.2 性能基線管理建立服務器健康檔案# 采集系統(tǒng)基準數(shù)據(jù) cat EOF baseline.sh #!/bin/bash echo CPU: $(grep model name /proc/cpuinfo | wc -l) cores echo MEM: $(free -h | awk /Mem/{print $2}) echo DISK: $(lsblk -d -o NAME,ROTA,SIZE | grep -v NAME) EOF我在實際運維中發(fā)現(xiàn)90%的服務器性能問題都源于配置不當或資源監(jiān)控缺失。建議至少每周檢查一次/var/log/messages中的內核告警這對預防突發(fā)性性能下降非常有效