sar(System Activity Reporter系統(tǒng)活動情況報告)是目前 Linux 上最為全面的系統(tǒng)性能分析工具之一,可以從多方面對系統(tǒng)的活動進(jìn)行報告,
包括:文件的讀寫情況、系統(tǒng)調(diào)用的使用情況、磁盤I/O、CPU效率、內(nèi)存使用狀況、進(jìn)程活動及IPC有關(guān)的活動等。
本文主要以CentOS 6.3 x64系統(tǒng)為例,介紹sar命令。
1、sar命令常用格式
sar [options] [-A] [-o file] t [n]
其中:
t為采樣間隔,n為采樣次數(shù),默認(rèn)值是1;
-o file表示將命令結(jié)果以二進(jìn)制格式存放在文件中,file 是文件名。
options 為命令行選項,sar命令常用選項如下:
-A:所有報告的總和
-P:設(shè)定CPU
-u:輸出CPU使用情況的統(tǒng)計信息
-v:輸出inode、文件和其他內(nèi)核表的統(tǒng)計信息
-d:輸出每一個塊設(shè)備的活動信息
-n:匯報網(wǎng)絡(luò)情況
-q:匯報隊列長度和負(fù)載信息
-r:輸出內(nèi)存和交換空間的統(tǒng)計信息
-b:顯示I/O和傳送速率的統(tǒng)計信息
-a:文件讀寫情況
-c:輸出進(jìn)程統(tǒng)計信息,每秒創(chuàng)建的進(jìn)程數(shù)
-R:輸出內(nèi)存頁面的統(tǒng)計信息
-y:終端設(shè)備活動情況
-w:輸出系統(tǒng)交換活動信息
2. CPU資源監(jiān)控
例如,每10秒采樣一次,連續(xù)采樣3次,觀察CPU 的使用情況,并將采樣結(jié)果以二進(jìn)制形式存入當(dāng)前目錄下的文件sys_info中,需鍵入如下命令:
代碼如下:
sar -u -o sys_info 10 3
屏幕顯示如下:
17:06:16 CPU %user %nice %system %iowait %steal %idle
17:06:26 all 0.00 0.00 0.20 0.00 0.00 99.80
17:06:36 all 0.00 0.00 0.20 0.00 0.00 99.80
17:06:46 all 0.00 0.00 0.10 0.00 0.00 99.90
Average: all 0.00 0.00 0.17 0.00 0.00 99.83
輸出項說明:
CPU:all 表示統(tǒng)計信息為所有 CPU 的平均值。
%user:顯示在用戶級別(application)運(yùn)行使用 CPU 總時間的百分比。
%nice:顯示在用戶級別,用于nice操作,所占用 CPU 總時間的百分比。
%system:在核心級別(kernel)運(yùn)行所使用 CPU 總時間的百分比。
%iowait:顯示用于等待I/O操作占用 CPU 總時間的百分比。
%steal:管理程序(hypervisor)為另一個虛擬進(jìn)程提供服務(wù)而等待虛擬 CPU 的百分比。
%idle:顯示 CPU 空閑時間占用 CPU 總時間的百分比。
注意說明:
(1). 若 %iowait 的值過高,表示硬盤存在I/O瓶頸
(2). 若 %idle 的值高但系統(tǒng)響應(yīng)慢時,有可能是 CPU 等待分配內(nèi)存,此時應(yīng)加大內(nèi)存容量
(3). 若 %idle 的值持續(xù)低于1,則系統(tǒng)的 CPU 處理能力相對較低,表明系統(tǒng)中最需要解決的資源是 CPU 。
由于sys_info是二進(jìn)制文件中的內(nèi)容, 當(dāng)你用cat看sys_info時發(fā)現(xiàn)全都是亂碼,呵呵,別著急,sar為你準(zhǔn)備了-f filename選項,你只要用-f設(shè)定要讀取的信息存儲文件,就可以清晰地讀出信息了。
比如
代碼如下:
sar -f sys_info
。
如果我的CPU是多核處理器,那么sar能知道某一個核的運(yùn)行信息么?
完全沒問題的。有一個選項-P,就是用來為多核處理器而設(shè)計的。
當(dāng)在使用sar命令而沒有設(shè)定-P選項時,sar會根據(jù)所有核給出一個宏觀匯報,也就是平均的值。
如果使用了-P選項來指定某一個核,那么就會針對這個單獨(dú)的核給出具體性能信息。
當(dāng)使用-P ALL時,sar就會根據(jù)每一個核都給出其具體性能信息,然后再給出一個總的性能信息。
比如,我這里有一個至強(qiáng)處理器的CPU,是雙核CPU,看看-P的使用方法吧:
代碼如下:
sar -P ALL 1 1
Linux 2.6.9 10/16/2009
10:59:38 PM CPU %user %nice %system %iowait %idle
10:59:39 PM all 2.12 0.00 2.87 0.00 95.01
10:59:39 PM 0 0.00 0.00 1.98 0.00 98.02
10:59:39 PM 1 9.00 0.00 7.00 0.00 84.00
sar會根據(jù)處理器的每一個核給出性能信息。當(dāng)我們想查看第6個核的信息時,其輸出如下:
代碼如下:
sar -P 0 1 1
3. inode、文件和其他內(nèi)核表監(jiān)控
例如,每10秒采樣一次,連續(xù)采樣3次,觀察核心表的狀態(tài),需鍵入如下命令:
代碼如下:
sar -v 10 3
屏幕顯示如下:
17:10:49 dentunusd file-nr inode-nr pty-nr
17:10:59 6301 5664 12037 4
17:11:09 6301 5664 12037 4
17:11:19 6301 5664 12037 4
Average: 6301 5664 12037 4
輸出項說明:
dentunusd:目錄高速緩存中未被使用的條目數(shù)量
file-nr:文件句柄(file handle)的使用數(shù)量
inode-nr:索引節(jié)點(diǎn)句柄(inode handle)的使用數(shù)量
pty-nr:使用的pty數(shù)量
4. 內(nèi)存和交換空間監(jiān)控
例如,每10秒采樣一次,連續(xù)采樣3次,監(jiān)控內(nèi)存分頁:
代碼如下:
sar -r 10 3
屏幕顯示如下:
10:02:52 PM kbmemfree kbmemused %memused kbbuffers kbcached kbcommit %commit
10:03:02 PM 2289016 1632096 41.62 204860 1218352 333068 8.49
10:03:12 PM 2288388 1632724 41.64 204860 1218352 333068 8.49
10:03:22 PM 2288544 1632568 41.64 204860 1218352 333068 8.49
Average: 2288649 1632463 41.63 204860 1218352 333068 8.49
輸出項說明:
kbmemfree:這個值和free命令中的free值基本一致,所以它不包括buffer和cache的空間.
kbmemused:這個值和free命令中的used值基本一致,所以它包括buffer和cache的空間.
%memused:這個值是kbmemused和內(nèi)存總量(不包括swap)的一個百分比.
kbbuffers和kbcached:這兩個值就是free命令中的buffer和cache.
kbcommit:保證當(dāng)前系統(tǒng)所需要的內(nèi)存,即為了確保不溢出而需要的內(nèi)存(RAM+swap).
%commit:這個值是kbcommit與內(nèi)存總量(包括swap)的一個百分比.
5. 內(nèi)存分頁監(jiān)控
例如,每10秒采樣一次,連續(xù)采樣3次,監(jiān)控內(nèi)存分頁:
代碼如下:
sar -B 10 3
屏幕顯示如下:
輸出項說明:
pgpgin/s:表示每秒從磁盤或SWAP置換到內(nèi)存的字節(jié)數(shù)(KB)
pgpgout/s:表示每秒從內(nèi)存置換到磁盤或SWAP的字節(jié)數(shù)(KB)
fault/s:每秒鐘系統(tǒng)產(chǎn)生的缺頁數(shù),即主缺頁與次缺頁之和(major + minor)
majflt/s:每秒鐘產(chǎn)生的主缺頁數(shù).
pgfree/s:每秒被放入空閑隊列中的頁個數(shù)
pgscank/s:每秒被kswapd掃描的頁個數(shù)
pgscand/s:每秒直接被掃描的頁個數(shù)
pgsteal/s:每秒鐘從cache中被清除來滿足內(nèi)存需要的頁個數(shù)
%vmeff:每秒清除的頁(pgsteal)占總掃描頁(pgscank+pgscand)的百分比
6. I/O和傳送速率監(jiān)控
例如,每10秒采樣一次,連續(xù)采樣3次,報告緩沖區(qū)的使用情況,需鍵入如下命令:
代碼如下:
sar -b 10 3
屏幕顯示如下:
18:51:05 tps rtps wtps bread/s bwrtn/s
18:51:15 0.00 0.00 0.00 0.00 0.00
18:51:25 1.92 0.00 1.92 0.00 22.65
18:51:35 0.00 0.00 0.00 0.00 0.00
Average: 0.64 0.00 0.64 0.00 7.59
輸出項說明:
tps:每秒鐘物理設(shè)備的 I/O 傳輸總量
rtps:每秒鐘從物理設(shè)備讀入的數(shù)據(jù)總量
wtps:每秒鐘向物理設(shè)備寫入的數(shù)據(jù)總量
bread/s:每秒鐘從物理設(shè)備讀入的數(shù)據(jù)量,單位為 塊/s
bwrtn/s:每秒鐘向物理設(shè)備寫入的數(shù)據(jù)量,單位為 塊/s
7. 進(jìn)程隊列長度和平均負(fù)載狀態(tài)監(jiān)控
例如,每10秒采樣一次,連續(xù)采樣3次,監(jiān)控進(jìn)程隊列長度和平均負(fù)載狀態(tài):
代碼如下:
sar -q 10 3
屏幕顯示如下:
19:25:50 runq-sz plist-sz ldavg-1 ldavg-5 ldavg-15
19:26:00 0 259 0.00 0.00 0.00
19:26:10 0 259 0.00 0.00 0.00
19:26:20 0 259 0.00 0.00 0.00
Average: 0 259 0.00 0.00 0.00
輸出項說明:
runq-sz:運(yùn)行隊列的長度(等待運(yùn)行的進(jìn)程數(shù))
plist-sz:進(jìn)程列表中進(jìn)程(processes)和線程(threads)的數(shù)量
ldavg-1:最后1分鐘的系統(tǒng)平均負(fù)載(System load average)
ldavg-5:過去5分鐘的系統(tǒng)平均負(fù)載
ldavg-15:過去15分鐘的系統(tǒng)平均負(fù)載
8. 系統(tǒng)交換活動信息監(jiān)控
例如,每10秒采樣一次,連續(xù)采樣3次,監(jiān)控系統(tǒng)交換活動信息:
代碼如下:
sar - W 10 3
屏幕顯示如下:
19:39:50 pswpin/s pswpout/s
19:40:00 0.00 0.00
19:40:10 0.00 0.00
19:40:20 0.00 0.00
Average: 0.00 0.00
輸出項說明:
pswpin/s:每秒系統(tǒng)換入的交換頁面(swap page)數(shù)量
pswpout/s:每秒系統(tǒng)換出的交換頁面(swap page)數(shù)量
9. 設(shè)備使用情況監(jiān)控
例如,每10秒采樣一次,連續(xù)采樣3次,報告設(shè)備使用情況,需鍵入如下命令:
代碼如下:
# sar -d 10 3 –p
屏幕顯示如下:
17:45:54 DEV tps rd_sec/s wr_sec/s avgrq-sz avgqu-sz await svctm %util
17:46:04 scd0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
17:46:04 sda 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
17:46:04 vg_livedvd-lv_root 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
17:46:04 vg_livedvd-lv_swap 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
其中:
參數(shù)-p可以打印出sda,hdc等磁盤設(shè)備名稱,如果不用參數(shù)-p,設(shè)備節(jié)點(diǎn)則有可能是dev8-0,dev22-0
tps:每秒從物理磁盤I/O的次數(shù).多個邏輯請求會被合并為一個I/O磁盤請求,一次傳輸?shù)拇笮∈遣淮_定的.
rd_sec/s:每秒讀扇區(qū)的次數(shù).
wr_sec/s:每秒寫扇區(qū)的次數(shù).
avgrq-sz:平均每次設(shè)備I/O操作的數(shù)據(jù)大小(扇區(qū)).
avgqu-sz:磁盤請求隊列的平均長度.
await:從請求磁盤操作到系統(tǒng)完成處理,每次請求的平均消耗時間,包括請求隊列等待時間,單位是毫秒(1秒=1000毫秒).
svctm:系統(tǒng)處理每次請求的平均時間,不包括在請求隊列中消耗的時間.
%util:I/O請求占CPU的百分比,比率越大,說明越飽和.
(1). avgqu-sz 的值較低時,設(shè)備的利用率較高。
(2). 當(dāng)%util的值接近 100% 時,表示設(shè)備帶寬已經(jīng)占滿。
10、要判斷系統(tǒng)瓶頸問題,有時需幾個 sar 命令選項結(jié)合起來
懷疑CPU存在瓶頸,可用 sar -u 和 sar -q 等來查看
懷疑內(nèi)存存在瓶頸,可用 sar -B、sar -r 和 sar -W 等來查看
懷疑I/O存在瓶頸,可用 sar -b、sar -u 和 sar -d 等來查看
11、利用sar來做個后臺監(jiān)控程序,可以實(shí)時匯報機(jī)器性能情況。sar能放后臺運(yùn)行么
借助linux的后臺符就可以了,別忘了把標(biāo)準(zhǔn)輸出重定向哦,方法是這樣的:
代碼如下:
sar -o monitor.res interval count >/dev/null 2>&1 &