理論上追求sy越小us越大越好
b. 專門察看cpu的工具，可以看 mpstat
具體指標可以man mpstat
例如：
CPU %usr %nice %sys %iowait %irq %soft %steal %guest %idle
all 5.81 0.05 6.92 7.03 0.00 0.04 0.00 0.00 80.15
0 6.75 0.06 5.53 17.43 0.00 0.07 0.00 0.00 70.17
1 5.46 0.00 7.70 2.45 0.00 0.00 0.00 0.00 84.39
2 6.20 0.12 6.38 6.06 0.00 0.00 0.00 0.00 81.24
3 4.85 0.00 8.09 2.18 0.00 0.09 0.00 0.00 84.79
可以看到比vmstat詳細了許多。
c. top從進程的角度看cpu
Tasks: 170 total, 1 running, 168 sleeping, 0 stopped, 1 zombie
Cpu(s): 4.1%us, 7.3%sy, 0.0%ni, 88.3%id, 0.2%wa, 0.0%hi, 0.0%si, 0.0%st
Mem: 8087420k total, 6244888k used, 1842532k free, 181312k buffers
Swap: 4088504k total, 0k used, 4088504k free, 2359388k cached
PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
1952 lysu 20 0 2643m 2.1g 2.1g S 25 27.3 8:51.22 VirtualBox
2420 lysu 20 0 1329m 812m 76m S 6 10.3 4:29.38 java
1146 root 20 0 169m 24m 13m S 5 0.3 0:52.43 Xorg
d.cpu調度隊列深度
還是用vmstat看procces的r部分
Procs
r: The number of processes waiting for run time.
b: The number of processes in uninterruptible sleep.
2. 內存相關
a. 看內存使用情況還是用vmstat
procs -----------memory---------- ---swap-- -----io---- -system-- ----cpu----
r b swpd free buff cache si so bi bo in cs us sy id wa
0 0 0 1752528 182916 2436380 0 0 176 93 692 1237 5 7 83 5
0 0 0 1747808 182916 2441180 0 0 0 168 2867 3812 2 5 92 0
0 0 0 1747932 182916 2440540 0 0 0 0 2751 3776 2 7 91 0
0 0 0 1747932 182916 2440540 0 0 0 0 3019 4469 2 7 91 0
0 0 0 1747932 182924 2440540 0 0 0 40 2624 3608 3 6 90 2
主要關注free部分和swap的page-in和page-out，當free不足的時候swap出入都會增加。
b.或用top，或察看/proc/meminfo的內容
lysu@lysu-Latitude-E5420:~$ tail /proc/meminfo
VmallocChunk: 34359318356 kB
HardwareCorrupted: 0 kB
AnonHugePages: 0 kB
HugePages_Total: 0
HugePages_Free: 0
HugePages_Rsvd: 0
HugePages_Surp: 0
Hugepagesize: 2048 kB
DirectMap4k: 57344 kB
DirectMap2M: 8232960 kB
c. 察看鎖搶占使用pidstat -w
lysu@lysu-Latitude-E5420:~$ pidstat -w -I -p 5712 5
Linux 3.0.0-13-generic (lysu-Latitude-E5420) 2011-12-11 _x86_64_ (4 CPU)
20:52:02 PID cswch/s nvcswch/s Command
20:52：07 5712 0.00 0.00 chrome
20:52：12 5712 0.40 0.00 chrome
20:52：17 5712 0.00 0.00 chrome
20:52：22 5712 0.20 0.00 chrome
cswch/s 表示進程在一秒內因為訪問鎖或其他因素主動放棄當前上下文而發生切換的情況。
要計算主動上下文切換消耗的時鐘頻率，可以，（cswch/s）/（虛擬處理器數）*80000/(計算機總時鐘頻率)...如果比例為3%~5%。
nvswch/s表示被動的放棄上下文而發生切換，過高的被動切換表示可能運行的線程數目超過cpu一時所能提供的，應對策略是把進程set到固定的cpu上？不解
3. 網絡IO
一般使用netstat來看網絡情況，可以看到收發多少包，但無法看使用率
使用nicstat看網絡使用率
4. 磁盤IO
a. 使用iostat，察看b%部分可以知道磁盤使用率
如想區分系統和用戶io可以加-xm磁盤io過高，可以通過換更快的磁盤/把io分到多個磁盤上/調整程序使用緩存
b. 使用lsof察看進程使用的文件
lsof -c 進程名lysu@lysu-Latitude-E5420:~$ sudo lsof -c thunderbird
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME
thunderbi 6674 lysu cwd DIR 8,1 4096 17825794 /home/lysu
thunderbi 6674 lysu rtd DIR 8,1 4096 2 /
thunderbi 6674 lysu txt REG 8,1 39512 5386054 /usr/lib/thunderbird-8.0/thunderbird-bin
thunderbi 6674 lysu mem REG 8,1 27032 528062 /lib/x86_64-linux-gnu/libnss_dns-2.13.so
thunderbi 6674 lysu mem REG 8,1 10368 524353 /lib/libnss_mdns4_minimal.so.2
lsof也可以列出指定目錄或文件被那些進程訪問，具體情況man lsof
c. inotify
(
http://www.infoq.com/cn/articles/inotify-linux-file-system-event-monitoring)
使用lsof是主動去輪詢，而inotify是有變化通知我們里面的inotifywatch、inotifywait也可以用來看某文件夾被其他程序更改的情況
lysu@lysu-Latitude-E5420:~$ inotifywait -r -m ~/.thunderbird/
Setting up watches. Beware: since -r was given, this may take a while!
Watches established.
/home/lysu/.thunderbird/lxbmhh1d.default/ImapMail/mail.qunar-1.com/ OPEN INBOX
/home/lysu/.thunderbird/lxbmhh1d.default/ImapMail/mail.qunar-1.com/ ACCESS INBOX
/home/lysu/.thunderbird/lxbmhh1d.default/ImapMail/mail.qunar-1.com/ ACCESS INBOX
/home/lysu/.thunderbird/lxbmhh1d.default/ImapMail/mail.qunar-1.com/ CLOSE_NOWRITE,CLOSE INBOX