linux系統監控集合 （私人備用）

  需要監控Linux伺服器系統性能嗎？嘗試下面這些系統内置或附件的工具吧。大多數Linux發行版本都裝備了大量的監控工具。這些工具提供了能用作取得相關資訊和系統活動的量度名額。你能使用這些工具發現造成性能問題可能原因。此次讨論到的工具隻是分析和調試伺服器下面問題時最基本工具中的一部分。

1.找出瓶頸

2.硬碟（存儲）瓶頸

3.CPU及記憶體瓶頸

4.網絡瓶頸

#1: top - 程序活動

top提供一個目前運作系統實時動态的視圖，也就是正在運作程序。在預設情況下，顯示系統中CPU使用率最高的任務，并每5秒鐘重新整理一次。

常用熱鍵

t顯示摘要資訊開關.m顯示記憶體資訊開關.A分類顯示系統不同資源的使用大戶。有助于快速識别系統中資源消耗多的任務。f添加删除所要顯示欄位.o調整所要顯示欄位的順序.r調整一個正在運作的程序Nice值.k結束一個正在運作的程序.z彩色/黑白顯示開關

#2:vmstat-系統活動、硬體及系統資訊

使用vmstat指令可以得到關于程序、記憶體、記憶體分頁、堵塞IO、traps及CPU活動的資訊。

# vmstat 3

輸出樣例：

procs-----------memory---------- ---swap-- -----io---- --system-- -----cpu------ r bswpd free buff cache si so bi bo in cs us sy id wa st 0 0 0 2540988 5221885130400 0 0 2 32 4 2 4 1 96 0 0 1 0 0 2540988 522188 5130400 0 0 0 720 1199 6651 0 99 0 0 0 0 0 2540956 522188 5130400 0 0 0 0 1151 1569 4 1 95 0 0 0 0 02540956 522188 5130500 0 0 0 6 1117 439 1 0 99 0 0 0 0 0 2540940 522188 51305120 0 0 536 1189 932 1 0 98 0 0 0 0 0 2538444 522188 5130588 0 0 0 0 1187 1417 41 96 0 0 0 0 0 2490060 522188 5130640 0 0 0 18 1253 1123 5 1 94 0 0顯示記憶體使用詳細資訊# vmstat -m顯示記憶體活動/不活動的資訊

# vmstat -a

相關連結：How do I find out Linux Resource utilization to detect systembottlenecks?

#3:w - 顯示誰已登入，他們正在做什麼？

w指令顯示系統目前使用者及其運作程序的資訊。

# w username # w vivek

17:58:47 up 5 days, 20:28, 2users, load average: 0.36, 0.26, 0.24 USER TTY FROM LOGIN@ IDLE JCPU PCPU WHATroot pts/0 10.1.3.145 14:55 5.00s 0.04s 0.02s vim /etc/resolv.conf root pts/110.1.3.145 17:43 0.00s 0.03s 0.00s w

#4：uptime - 告訴系統已經運作了多久？

uptime指令過去隻顯示系統運作多久。現在，可以顯示系統運作多久、目前有多少的使用者登入、在過去的1，5，15分鐘裡平均負載時多少。

# uptime

輸入樣例：

18:02:41 up 41 days, 23:42, 1user, load average: 0.00, 0.00, 0.00

1可以被認為是最優的負載值。負載是會随着系統不同改變得。單CPU系統1-3和SMP系統6-10都是可能接受的。

#5：ps - 顯示程序

ps指令顯示目前運作程序的快照。使用-A或-e顯示所有程序。

# ps -A

PID TTY TIME CMD 1 ? 00:00:02init 2 ? 00:00:02 migration/0 3 ? 00:00:01 ksoftirqd/0 4 ? 00:00:00 watchdog/05 ? 00:00:00 migration/1 6 ? 00:00:15 ksoftirqd/1 .... ..... 4881 ? 00:53:28java 4885 tty1 00:00:00 mingetty 4886 tty2 00:00:00 mingetty 4887 tty3 00:00:00mingetty 4888 tty4 00:00:00 mingetty 4891 tty5 00:00:00 mingetty 4892 tty600:00:00 mingetty 4893 ttyS1 00:00:00 agetty 12853 ? 00:00:00 cifsoplockd 12854? 00:00:00 cifsdnotifyd 14231 ? 00:10:34 lighttpd 14232 ? 00:00:00 php-cgi54981 pts/0 00:00:00 vim 55465 ? 00:00:00 php-cgi 55546 ? 00:00:00bind9-snmp-stat 55704 pts/1 00:00:00 psps與top非常相似，但ps提供更多的資訊。輸出長格式# ps -Al輸出附加全格式（顯示程序在執行時傳入的參數）# ps -AlF顯示程序結構

# ps -AlFH

在程序後顯示線程

# ps -AlLm

列印伺服器上所有程序

# ps ax # ps axu

列印程序樹

# ps -ejH # ps axjf # pstree

列印安全資訊

# ps -eoeuser,ruser,suser,fuser,f,comm,label # ps axZ # ps -eM

檢視使用Vivek使用者名運作的程序

# ps -U vivek -u vivek u

設定自定義輸出格式

# ps -eopid,tid,class,rtprio,ni,pri,psr,pcpu,stat,wchan:14,comm # ps axostat,euid,ruid,tty,tpgid,sess,pgrp,ppid,pid,pcpu,comm # ps-eopid,tt,user,fname,tmout,f,wchan

隻顯示Lighttpd的程序ID

# ps -C lighttpd -o pid=

或者

# pgrep lighttpd

# pgrep -u vivek php-cgi

顯示PID為55977的程序名稱

# ps -p 55977 -o comm=

找出消耗記憶體最多的前10名程序

# ps -auxf | sort -nr -k 4 |head -10

找出使用CPU最多的前10名程序

# ps -auxf | sort -nr -k 3 |head -10

#6:free- 記憶體使用情況

free指令顯示系統中空閑的、已用的實體記憶體及swap記憶體,及被核心使用的buffer。

# free

total used free sharedbuffers cached Mem: 12302896 9739664 2563232 0 523124 5154740 -/+buffers/cache: 4061800 8241096 Swap: 1052248 0 1052248相關連結：Linux Find Out Virtual MemoryPAGESIZELinux Limit CPU Usage Per ProcessHow much RAM does my Ubuntu / FedoraLinux desktop PC have?

#7:iostat- CPU平均負載，硬碟活動

iostat指令可報告中央處理器（CPU）的統計資訊，各種裝置、分區及網絡檔案系統輸入/輸出的統計資訊。

# iostat

Linux 2.6.18-128.1.14.el5(www03.nixcraft.in) 06/26/2009 avg-cpu: %user %nice %system %iowait %steal%idle 3.50 0.09 0.51 0.03 0.00 95.86 Device: tps Blk_read/s Blk_wrtn/s Blk_readBlk_wrtn sda 22.04 31.88 512.03 16193351 260102868 sda1 0.00 0.00 0.00 2166 180sda2 22.04 31.87 512.03 16189010 260102688 sda3 0.00 0.00 0.00 1615 0相關連結：Linux Track NFS Directory /Disk I/O Stats#8:sar - 搜集和報告系統活動 sar指令用來搜集、報告和儲存系統活動資訊。檢視網路計數器，輸入： # sar -n DEV | more 顯示最近24小時網絡計數器 # sar -n DEV -f /var/log/sa/sa24 | more 你亦可以用sar顯示實時情況 # sar 4 5 輸出樣例： Linux 2.6.18-128.1.14.el5(www03.nixcraft.in)   06/26/2009 06:45:12PM       CPU    %user     %nice   %system  %iowait    %steal     %idle 06:45:16PM       all     2.00      0.00     0.22      0.00     0.00     97.78 06:45:20PM       all     2.07      0.00     0.38      0.03     0.00     97.52 06:45:24PM       all     0.94      0.00     0.28      0.00     0.00     98.78 06:45:28PM       all     1.56      0.00     0.22      0.00      0.00    98.22 06:45:32 PM      all      3.53     0.00      0.25     0.03      0.00     96.19Average:         all      2.02     0.00      0.27     0.01      0.00     97.70 相關連結：How to collect Linux systemutilization data into a file #9:mpstat - 多處理器使用率 mpstat指令可以顯示所有可用處理器的使用情況，處理器編号從0開始。mpstat -P ALL顯示每個處理器的平均使用率。 # mpstat -P ALL 輸出樣例： Linux 2.6.18-128.1.14.el5 (www03.nixcraft.in)  06/26/2009 06:48:11 PM CPU   %user  %nice    %sys %iowait    %irq   %soft%steal   %idle    intr/s 06:48:11 PMall    3.50    0.09   0.34    0.03    0.01   0.17    0.00   95.86   1218.04 06:48:11PM    0    3.44    0.08   0.31    0.02    0.00   0.12    0.00   96.04   1000.31 06:48:11PM    1    3.10   0.08    0.32    0.09   0.02    0.11    0.00  96.28     34.93 06:48:11 PM   2    4.16    0.11   0.36    0.02    0.00   0.11    0.00   95.25     0.00 06:48:11 PM    3    3.77   0.11    0.38    0.03   0.01    0.24    0.00  95.46     44.80 06:48:11 PM   4    2.96    0.07   0.29    0.04    0.02   0.10    0.00   96.52     25.9106:48:11 PM    5    3.26   0.08    0.28    0.03   0.01    0.10    0.00  96.23     14.98 06:48:11 PM   6    4.00    0.10   0.34    0.01    0.00   0.13    0.00   95.42     3.75 06:48:11 PM    7    3.30   0.11    0.39    0.03   0.01    0.46    0.00  95.69     76.89 相關連結：Linux display each multiple SMP CPU processors utilizationindividually. #10: pmap - 程序的記憶體使用 pmap指令可以顯示程序的記憶體映射，使用這個指令可以找出造成記憶體瓶頸的原因。 # pmap -d PID 顯示PID為47394程序的記憶體資訊。 # pmap -d 47394 輸出樣例： 47394:  /usr/bin/php-cgi Address          Kbytes Mode Offset          Device    Mapping 0000000000400000    2584 r-x--0000000000000000 008:00002 php-cgi 0000000000886000     140rw--- 0000000000286000 008:00002 php-cgi00000000008a9000      52 rw--- 00000000008a9000000:00000   [ anon ] 0000000000aa8000     76 rw--- 00000000002a8000 008:00002 php-cgi 000000000f678000   1980 rw--- 000000000f678000 000:00000   [ anon ]000000314a600000     112 r-x-- 0000000000000000 008:00002ld-2.5.so 000000314a81b000       4 r----000000000001b000 008:00002 ld-2.5.so000000314a81c000       4 rw--- 000000000001c000008:00002 ld-2.5.so 000000314aa00000    1328 r-x--0000000000000000 008:00002 libc-2.5.so 000000314ab4c000    2048----- 000000000014c000 008:00002 libc-2.5.so ..... ...... .. 00002af8d48fd000      4 rw--- 0000000000006000 008:00002 xsl.so00002af8d490c000      40 r-x-- 0000000000000000008:00002 libnss_files-2.5.so 00002af8d4916000    2044 -----000000000000a000 008:00002 libnss_files-2.5.so00002af8d4b15000       4 r---- 0000000000009000008:00002 libnss_files-2.5.so00002af8d4b16000       4 rw--- 000000000000a000008:00002 libnss_files-2.5.so 00002af8d4b17000 768000 rw-s- 0000000000000000000:00009 zero (deleted) 00007fffc95fe000      84rw--- 00007ffffffea000 000:00000   [ stack ] ffffffffff600000   8192 ----- 0000000000000000 000:00000   [ anon ] mapped:933712K    writeable/private: 4304K    shared:768000K 最後一行非常重要： *mapped: 933712K 記憶體映射所占空間大小 * writeable/private: 4304K 私有位址空間大小 * shared: 768000K 共享位址空間大小相關連結：Linux find the memory used bya program / process using pmap command

#11和#12: netstat和ss - 網絡相關資訊

netstat可以顯示網絡連結、路由表資訊、接口統計資訊、僞裝連結和多點傳播成員(multicastmemberships),ss指令用來顯示網絡套接字資訊，它允許顯示類似netstat一樣的資訊。關于ss和netstat使用，可參考下列資源。

相關連結：

ss: Display Linux TCP / UDPNetwork and Socket InformationGet Detailed Information About Particular IPaddress Connections Using netstat Command

#13:iptraf - 網絡實時資訊

iptraf是一個可互動式的IP網絡監控工具。它可以生成多種網絡統計資訊包括：TCP資訊、UDP數量、ICMP和OSPF資訊、以太網負載資訊、節點狀态、IP校驗錯誤等。有下面幾種資訊格式：

不同網絡TCP連結傳輸量不同網絡接口IP傳輸量不同協定網絡傳輸量不同TCP/UDP端口和不同包大小網絡傳輸量不同第二層位址網絡傳輸量

 圖02：一般接口資訊：不同網絡接口IP傳輸量

 圖03：不同網絡TCP連結傳輸量

#14：tcpdump：詳細的網絡流量分析

tcpdump是一個簡單網絡流量轉儲工具，然而要使用好需要對TCP/IP協定非常熟悉。例如要顯示關于DNS的網絡流量，輸入：

# tcpdump -i eth1 'udp port53'

顯示所有進出80端口IPv4HTTP包，也就是隻列印包含資料的包。例如：SYN、FIN包和ACK-only包輸入：

# tcpdump 'tcp port 80 and(((ip[2:2] - ((ip[0]&0xf)<<2)) - ((tcp[12]&0xf0)>>2)) !=0)'

顯示所有到的FTP會話，輸入：

# tcpdump -i eth1 'dst202.54.1.5 and (port 21 or 20'

顯示所有到192.168.1.5的HTTP會話

# tcpdump -ni eth0 'dst192.168.1.5 and tcp and port http'

用wireshark浏覽轉儲檔案中的詳細資訊，輸入：

# tcpdump -n -i eth1 -s 0 -woutput.txt src or dst port 80

#15:strace- 系統調用

追蹤系統調用和型号，這對于調試Web伺服器和其他伺服器非常有用。了解怎樣追蹤程序和他功能。

#16:/proc檔案系統 - 各種核心資訊

/proc目錄下檔案提供了很多不同硬體裝置和核心的詳細資訊。更多詳情參見Linuxkernel /proc。一般/proc例如：

# cat /proc/cpuinfo # cat/proc/meminfo # cat /proc/zoneinfo # cat /proc/mounts

#17:Nagios- 伺服器及網絡監控

Nagios 是一款非常流行的系統及網絡監控軟體。你可以輕松監控所有的主機、網絡裝置及服務。它能在發生故障和重新恢複後發送警訊。FAN是"FullyAutomated Nagios"的縮寫。FAN的目标就是由Nagios社群提供Nagios的安裝。為了使安裝Nagios伺服器更加容易，FAN提供一個标準ISO格式的CD光牒鏡像。此發行版中還會包含一組增強使用者使用體驗的工具。

#18:Cacti- 基于Web的監控工具

Cacti是一套完成的網絡圖形化解決方案，基于RRDTool的資料存儲和圖形化功能。Cacti提供一個快速的輪詢器、進階的圖形化模闆、多種資料采集方法和使用者管理功能。這些功能都擁有非常友好易用的界面，確定可以部署在一個包含數百台裝置的複雜網絡中。它提供關于網絡、CPU、記憶體、已登入使用者、Apache、DNS等資訊。關于怎樣在CentOS / RHEL安裝配置Cacti，詳見:http://www.cyberciti.biz/faq/fedora-rhel-install-cacti-monitoring-rrd-software/

#19:KDESystem Guard

KSysguard是在KDE桌面下一個網絡化的系統監控工具。這個工具可以通過SSH會話運作。它提供很多功能，例如可以監控本機和遠端主機的用戶端/伺服器架構，前端圖形界面使用所謂傳感器得到資訊并展現出來。傳感器傳回的可以是一個簡單的數值或是一組表格的資訊。針對不同的資訊類型，提供一個或多個顯示。這些顯示被組織多個工作表中，可以工作表可以獨體儲存和加載。是以，KSysguard不隻是一個簡單的任務管理器，還是一個可以控制多台伺服器的強大工具。

 圖05：KDE System Guard

詳細用法參見： the KSysguard handbook

#20:GnomeSystem Monitor

System Monitor可以顯示系統基本資訊、監控系統程序、系統資源及檔案系統使用率。你也可以使用System Monitor監控和修改系統行為。盡管沒有KDE System Guard功能強大，但其提供的基本資訊對于入門使用者還是非常有用的。

* 顯示關于計算機硬體和軟體的各種基本資訊。 *Linux核心版本 *GNOME版本 * 硬體 * 安裝的記憶體 * 處理器及其速度 * 系統狀态 * 目前可用的硬碟空間 * 程序 * 記憶體及交換空間 * 網絡使用率 * 檔案系統 * 所有挂載的檔案系統及其基本資訊

 圖06：The Gnome System Monitorapplication

運維人員的基本具備工具

說到工具，在行外可以說是技能，在行内我們一般稱為工具，就是運維必須要掌握的工具。

我就大概列出這幾方面，這樣入門就基本沒問題了。

Linux系統如果是學習可以選用Redhat或CentOS，特别是CentOS在企業中用得最多，當然還會有其它版本的，但學習者還是以這2個版本學習就行，因為這兩個版本都是兄弟，沒差別的，有空可以再研究一下SUSE，有些公司也喜歡用。

工具如下：

1、Linux系統基礎

這個不用說了，是基礎中的基礎，連這個都不會就别幹了，參考書籍，可以看鳥哥linux基礎篇，至少要掌握這書60%内容，沒必須全部掌握，但基本指令總得會吧。

2、網絡服務

服務有很多種，每間公司都會用到不同的，但基礎的服務肯定要掌握，如FTP, DNS,SAMBA, 郵件, 這幾個大概學一下就行，LAMP和LNMP是必須要熟練，我所指的不是光光會搭建，而是要很熟悉裡面的相當配置才行，因為公司最關鍵的絕對是WEB伺服器，是以nginx和apache要熟悉，特别是nginx一定要很熟悉才行，至少有些公司還會用tomcat，這個也最好學一下。其實網絡服務方面不用太擔心，一般公司的環境都已經搭建好，就算有新伺服器或讓你整改，公司會有相應的文檔讓你參照來弄，不會讓你亂來的，但至少相關的配置一定要學熟，而且肯定是編譯安裝多，那些子產品要熟悉一下他的作用，特别是PHP那些子產品。

這上面2點隻是基礎，也是必要條件，不能說是工具，以下才是真正的要掌握的工具。

3、shell腳本和另一個腳本語言

shell是運維人員必須具備的，不懂這個連入職都不行，至少也要寫出一些系統管理腳本，最簡單也得寫個監控CPU，記憶體比率的腳本吧，這是最最最基本了，别以為會寫那些猜數字和計算什麼數的，這些沒什麼作用，隻作學習意義，寫系統腳本才是最有意義，而另一個腳本語言是可選的，一般是3P，即python, perl和php，php就不需要考慮了，除非你要做開發，我個人建議學python會比較好，難實作自動化運維，perl是文本處理很強大，反正這兩個學一個就行了。

4、sed和awk工具

必須要掌握，在掌握這兩個工具同時，還要掌握正規表達式，這個就痛苦了，正則是最難學的表達式，但結合到sed和awk中會很強大，在處理文本内容和過濾WEB内容時十分有用，不過在學shell的同時一般會經常結合用到的，是以學第3點就會順便學第4點。

5、文本處理指令

sort, tr, cut, paste, uniq, tee等，必學，也是結合第3點時一并學習的。

6、資料庫

首選mysql，别問我為什麼不學sqlserver和oracle，因為Linux用得最多絕對是mysql，增删改查必學，特别要學熟查，其它方面可能不太需要，因為運維人員使用最多還是查，哪些優化和開發語句不會讓你弄的。

7、防火牆

不學不行，防火牆也算是個難點，說難不難，說易不易，最重要弄懂規則，如果學過CCNA的朋友可能會比較好學，因為iptables也有NAT表，原理是一樣的，而FILTER表用得最多，反正不學就肯定不合格。

8、監控工具

十分十分重要，我個人建議，最好學這3個，cacti，nagios，zabbix，企業用得最多應該是nagios 和 zabbix，反正都學吧，但nagios會有點難，因為會涉及到用腳本寫自動監控，那個地方很難。

9、叢集和熱備

這個很重要，肯定要懂的，但到了公司就不會讓你去弄，因為新手基本不讓你碰，叢集工具有很多，最好學是LVS，這是必學，最好也學學nginx叢集，反向代理，還有熱備，這個就更多工具能實作了，像我公司是自己開發熱備工具的，mysql熱備也要學，就是主從複制，這個别告訴我容易，其實不容易的，要學懂整個流程一點也不容易，隻照着做根本沒意思。

10、資料備份

不學不行，工具有很多，但至少要把RAID的原理弄懂，特别是企業最常用的1+0或0+1，自己做實驗也要弄出來，備份工具有很多，如tar, dump, rsync等，最好多了解一下。

算了，說到這10點已經夠你受了，應該可以入門了，因為有些技術會比較難學，例如apache和nginx中還有些很重要的技術，如系統調優和服務優化，還有程式優化，這些在沒接觸工作前很難學習到的，是以先把這10點學了吧，估計要學熟至少3個月不止，就腳本那部分已經讓你很吃力了，我建議是先學熟shell，等工作後再學另一門腳本語言，這樣會比較好。