帐号:密码:下次自动登录{url:/nForum/slist.json?uid=guest&root=list-section}{url:/nForum/nlist.json?uid=guest&root=list-section}
贴数:19&分页:inolddays发信人: inolddays (inolddays), 信区: LinuxApp
标&&题: [问题]是什么导致了服务器CPU IOWait忽然飘高？
发信站: 水木社区 (Fri Nov 16 18:21:25 2012), 站内 && 对着top命令输出的日志看了一天，查找问题。
不知道什么原因忽然之间IOWait就高了。
导致服务器上运行的程序出现问题。 && 有哪个好心人告诉我怎么定位出问题的进程么？
我在网上看的资料，最多的就是找到cpu status D 状态的进程。
但是很不幸，IOWait升高时，进程中没有D状态的。
这就很诡异了。 && 日志如下：
=====正常=====
11:51:53&&up 189 days, 19:59,&&3 users,&&load average: 0.53, 1.05, 1.14
104 processes: 102 sleeping, 1 running, 1 zombie, 0 stopped
CPU states:&&cpu&&&&user&&&&nice&&system&&&&irq&&softirq&&iowait&&&&idle &&&&&&&&&&&&total&&&&0.1%&&&&0.1%&&&&0.9%&& 0.1%&&&& 0.1%&& 31.6%&& 66.6% &&&&&&&&&&&&cpu00&&&&0.1%&&&&0.0%&&&&1.1%&& 0.3%&&&& 0.3%&& 28.1%&& 69.5% &&&&&&&&&&&&cpu01&&&&0.0%&&&&0.1%&&&&0.6%&& 0.0%&&&& 0.0%&& 35.2%&& 63.7%
Mem:&& 511952k av,&&484096k used,&& 27856k free,&&&&&& 0k shrd,&& 24908k buff &&&&&&&&&&&&&&&&&&&& 311492k actv,&& 60884k in_d,&&&&6912k in_c
Swap: 2096472k av,&&689560k used, 1406912k free&&&&&&&&&&&&&&&&&& 41888k cached &&&& PID USER&&&& PRI&&NI&&SIZE&&RSS SHARE STAT %CPU %MEM&& TIME CPU COMMAND &&8768 root&&&&&&18&& 0&&548M -10M&&1696 S&&&& 0.4
381:56&& 0 /usr/jav &&&& 1 root&&&&&&15&& 0&& 520&&476&& 452 S&&&& 0.0&&0.0&& 7:41&& 0 init &&&& 2 root&&&&&&RT&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 0 migration/0 &&&& 3 root&&&&&&RT&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 1 migration/1 &&&& 4 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 0 keventd &&&& 5 root&&&&&&34&&19&&&& 0&&&&0&&&& 0 SWN&& 0.0&&0.0&& 0:00&& 0 ksoftirqd/0 &&&& 6 root&&&&&&34&&19&&&& 0&&&&0&&&& 0 SWN&& 0.0&&0.0&& 0:00&& 1 ksoftirqd/1 &&&& 9 root&&&&&&16&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:03&& 1 bdflush &&&& 7 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&&16:59&& 0 kswapd &&&& 8 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 6:57&& 1 kscand &&&&10 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&&13:33&& 0 kupdated &&&&11 root&&&&&&25&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 0 mdrecoveryd &&&&15 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0 914:45&& 0 kjournald &&&&79 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 0 khubd &&3255 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 1 kjournald &&3601 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:02&& 1 eth0 &&3675 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:01&& 1 eth1 &&3722 root&&&&&&15&& 0&& 636&&592&& 544 S&&&& 0.0&&0.1&&75:01&& 0 syslogd -m 0 &&3726 root&&&&&&15&& 0&& 464&&400&& 396 S&&&& 0.0&&0.0&& 0:00&& 0 klogd -x &&3737 root&&&&&&15&& 0&& 460&&444&& 392 S&&&& 0.0&&0.0&&12:47&& 1 irqbalance &&3746 rpc&&&&&& 15&& 0&& 604&&520&& 516 S&&&& 0.0&&0.1&& 0:00&& 1 portmap &&3766 rpcuser&& 25&& 0&& 696&&616&& 612 S&&&& 0.0&&0.1&& 0:00&& 1 rpc.statd &&3780 root&&&&&&RT&& 0&& 560&&452&& 424 S&&&& 0.0&&0.0&& 0:06&& 0 /sbin/auditd &&3911 root&&&&&&16&& 0&&&&1036 S&&&& 0.0&&0.2&& 1:02&& 0 /usr/sbin/ssh &&3927 root&&&&&&15&& 0&& 788&&664&& 660 S&&&& 0.0&&0.1&& 0:00&& 1 xinetd -staya &&3945 root&&&&&&15&& 0&& 408&&316&& 312 S&&&& 0.0&&0.0&& 0:00&& 1 /usr/sbin/vsf &&3965 root&&&&&&15&& 0&&&&1084 S&&&& 0.0&&0.2&&10:46&& 1 sendmail: acc &&3974 smmsp&&&& 15&& 0&&&&1144 S&&&& 0.0&&0.2&& 0:02&& 1 sendmail: Que &&3985 root&&&&&&15&& 0&& 452&&408&& 388 S&&&& 0.0&&0.0&& 4:24&& 1 gpm -t imps2&&&&3996 bin&&&&&& 15&& 0&& 944&&536&& 504 S&&&& 0.0&&0.1&& 0:04&& 0 /usr/sbin/can &&4027 root&&&&&&21&& 0&& 564&&468&& 464 S&&&& 0.0&&0.0&&16:17&& 0 crond &&4046 wnn&&&&&& 25&& 0&&&& 504 S&&&& 0.0&&0.0&& 0:00&& 1 /usr/bin/jser &&4110 xfs&&&&&& 15&& 0&&&& 592 S&&&& 0.0&&0.1&& 0:04&& 0 xfs -droppriv &&4140 daemon&&&&15&& 0&& 576&&548&& 504 S&&&& 0.0&&0.1&& 0:05&& 1 /usr/sbin/atd &&4160 root&&&&&&15&& 0&& 408&&384&& 344 S&&&& 0.0&&0.0&& 0:30&& 0 mdadm --monit &&4174 root&&&&&&15&& 0 12164&&11M&&1376 S&&&& 0.0&&2.3&& 0:53&& 1 mdmpd &&4184 root&&&&&&21&& 0&& 480&&420&& 416 S&&&& 0.0&&0.0&& 0:00&& 1 /sbin/agetty&&&&4185 root&&&&&&15&& 0&&&&1032 S&&&& 0.0&&0.2&& 0:00&& 1 /usr/bin/gdm- &&4238 root&&&&&&16&& 0&&&&1260 S&&&& 0.0&&0.2&& 0:00&& 0 /usr/bin/gdm- &&4239 root&&&&&&15&& 0 &&1108 S&&&& 0.0&&0.3 707:48&& 0 /usr/bin/X11/ &&4575 dascom&&&&15&& 0&&&& 636 S&&&& 0.0&&0.1&& 0:06&& 1 nodeAgent &&5934 dascom&&&&15&& 0&& 460&&400&& 360 S&&&& 0.0&&0.0&& 0:07&& 0 ./smspguard &&6356 eax&&&&&& 15&& 0&& 424&&404&& 364 S&&&& 0.0&&0.0&& 0:07&& 1 ./smspguard
17311 root&&&&&&15&& 0&&&&1268 S&&&& 0.0&&0.2&& 0:00&& 0 /usr/bin/gnom
17329 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 Z&&&& 0.0&&0.0&& 0:00&& 0 Xsession &def
17379 root&&&&&&15&& 0&& 860&&684&& 652 S&&&& 0.0&&0.1&& 0:32&& 1 /usr/bin/ssh-
17387 root&&&&&&15&& 0&&&& 968 S&&&& 0.0&&0.2&& 0:18&& 1 /usr/libexec/
17396 root&&&&&&15&& 0&&&& 824 S&&&& 0.0&&0.1&& 0:00&& 1 /usr/libexec/
17398 root&&&&&&15&& 0&&&&1228 S&&&& 0.0&&0.2&& 0:00&& 0 gnome-setting
17407 root&&&&&&15&& 0&& 940&&724&& 632 S&&&& 0.0&&0.1&& 6:05&& 1 fam
17413 root&&&&&&15&& 0&&&& 656 S&&&& 0.0&&0.1&& 0:00&& 1 chinput
17570 root&&&&&&15&& 0&&&& 884 S&&&& 0.0&&0.1&& 0:01&& 1 /usr/bin/meta
17667 root&&&&&&15&& 0&&&&2540 S&&&& 0.0&&0.6&& 5:42&& 0 gnome-panel -
17669 root&&&&&&15&& 0&&&&1364 S&&&& 0.0&&0.3&& 9:33&& 1 nautilus --no
17671 root&&&&&&15&& 0&&&&1324 S&&&& 0.0&&0.2 115:41&& 1 magicdev --sm
17680 root&&&&&&15&& 0&&&&1376 S&&&& 0.0&&0.3&& 9:57&& 1 eggcups --sm-
17682 root&&&&&&15&& 0&&&&1116 S&&&& 0.0&&0.2&& 3:17&& 0 pam-panel-ico
17684 root&&&&&&25&&10&&&&2404 S N&& 0.0&&0.6&&1346m&& 0 /usr/bin/pyth
17685 root&&&&&&15&& 0&& 532&&508&& 460 S&&&& 0.0&&0.0&& 2:19&& 1 /sbin/pam_tim
17777 root&&&&&&15&& 0&&&&1240 S&&&& 0.0&&0.2&& 0:00&& 0 /usr/libexec/ &&3087 root&&&&&&15&& 0&&&&2164 S&&&& 0.0&&0.4&& 5:49&& 1 ntpd -x
20165 ect&&&&&& 15&& 0&& 428&&408&& 364 S&&&& 0.0&&0.0&& 0:04&& 0 ./smspguard
20174 ect&&&&&& 15&& 0 &&3268 S&&&& 0.0&&0.9 244:28&& 0 ./smsproxyd -
17906 dascom&&&&15&& 0&&&& 636 S&&&& 0.0&&0.1&& 0:03&& 1 nodeAgent
21106 eax&&&&&& 24&& 0 &&2156 S&&&& 0.0&&0.7 490:13&& 1 ./smsproxyd - &&4864 dascom&&&&23&& 0&&&&1776 S&&&& 0.0&&1.6 284:05&& 0 /home/dascom/
17641 dascom&&&&23&& 0 &&1728 S&&&& 0.0&&1.8 329:46&& 0 ./SSMN_UMProx
19287 ect&&&&&& 15&& 0&&&&1660 S&&&& 0.0&&1.5 218:52&& 1 ECT_SMSREPLY&& 27025 dascom&&&&21&& 0 &&1520 S&&&& 0.0&&1.7 220:53&& 0 ./DC3G_SMSREP
32587 root&&&&&&15&& 0&&&&1244 S&&&& 0.0&&0.2&& 0:00&& 1 smbd -D
32591 root&&&&&&15&& 0&&&&1384 S&&&& 0.0&&0.3&& 0:54&& 1 nmbd -D
32747 root&&&&&&15&& 0&&&&1700 S&&&& 0.0&&0.4&& 0:11&& 1 smbd -D &&4783 root&&&&&&15&& 0&& 796&&684&& 680 S&&&& 0.0&&0.1&& 0:00&& 1 rpc.rquotad &&4787 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:02&& 0 nfsd &&4788 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:04&& 1 nfsd &&4789 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:04&& 1 nfsd &&4790 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:04&& 0 nfsd &&4791 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:05&& 0 nfsd &&4792 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:04&& 1 nfsd &&4793 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:03&& 1 nfsd &&4794 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:03&& 1 nfsd &&4795 root&&&&&&24&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 1 lockd &&4796 root&&&&&&24&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 1 rpciod &&4802 root&&&&&&15&& 0&& 724&&588&& 584 S&&&& 0.0&&0.1&& 0:00&& 1 rpc.mountd
32120 dascom&&&&15&& 0&&&&2020 S&&&& 0.0&&0.5&&47:17&& 1 ./smsproxyd -
10013 dascom&&&&15&& 0&&&&1708 S&&&& 0.0&&1.5&&20:55&& 1 /home/dascom/
10153 dascom&&&&15&& 0&&&&1720 S&&&& 0.0&&1.6&&26:27&& 1 /home/dascom/
10236 dascom&&&&15&& 0&&&&1772 S&&&& 0.0&&1.6&&19:12&& 0 /home/dascom/ &&3893 dascom&&&&22&& 0 &&1816 S&&&& 0.0&&1.7&&96:27&& 0 EAX_UMProxy -
21806 dascom&&&&15&& 0&&&&1752 S&&&& 0.0&&0.6&& 3:02&& 0 DC3G_SMSSUB - &&4988 dascom&&&&15&& 0&&&&1760 S&&&& 0.0&&0.5&& 1:27&& 0 DC3G_SMSSUB - &&4479 dascom&&&&25&& 0 &&1592 S&&&& 0.0&&1.8&&18:21&& 0 DC3G_HB6GClos
14167 root&&&&&&15&& 0&&&&1192 S&&&& 0.0&&0.2&& 0:43&& 1 cupsd
11789 ect&&&&&& 25&& 0 12904&&10M&&3460 S&&&& 0.0&&2.0&&11:34&& 0 ./ECT_UMProxy
25206 daemon&&&&20&& 0&& 568&&500&& 496 S&&&& 0.0&&0.0&& 0:00&& 1 /usr/sbin/atd
25207 dascom&&&&25&& 2&&&&1012 S N&& 0.0&&0.1&& 0:00&& 1 sh
25208 dascom&&&&26&& 2&&&& 968 S N&& 0.0&&0.1&& 0:00&& 1 /bin/bash
25209 dascom&&&&17&& 2&&&& 892 R N&& 0.0&&0.2&& 1:34&& 1 top -bc -d 10
29799 root&&&&&&21&& 0&&&&1552 S&&&& 0.0&&0.3&& 0:00&& 0 sshd: dascom&& 29801 dascom&&&&15&& 0&&&&1856 S&&&& 0.0&&0.4&& 0:00&& 0 sshd: dascom@
29802 dascom&&&&25&& 0&&&&1176 S&&&& 0.0&&0.2&& 0:00&& 1 -bash &&9344 root&&&&&&21&& 0&&&&1556 S&&&& 0.0&&0.3&& 0:00&& 1 sshd: dascom&&&&9346 dascom&&&&15&& 0&&&&1760 S&&&& 0.0&&0.4&& 0:00&& 1 sshd: dascom@ &&9347 dascom&&&&15&& 0&&&&1260 S&&&& 0.0&&0.2&& 0:00&& 0 -bash &&&& =====不正常===== &&11:52:03&&up 189 days, 20:00,&&3 users,&&load average: 4.12, 1.78, 1.37
104 processes: 102 sleeping, 1 running, 1 zombie, 0 stopped
CPU states:&&cpu&&&&user&&&&nice&&system&&&&irq&&softirq&&iowait&&&&idle &&&&&&&&&&&&total&&&&3.4%&&&&0.0%&&&&4.4%&& 0.6%&&&& 0.8%&& 84.5%&&&&5.9% &&&&&&&&&&&&cpu00&&&&2.7%&&&&0.0%&&&&4.5%&& 1.2%&&&& 1.7%&& 77.6%&& 11.8% &&&&&&&&&&&&cpu01&&&&4.1%&&&&0.0%&&&&4.2%&& 0.0%&&&& 0.0%&& 91.4%&&&&0.0%
Mem:&& 511952k av,&&490380k used,&& 21572k free,&&&&&& 0k shrd,&& 25116k buff &&&&&&&&&&&&&&&&&&&& 317180k actv,&& 60924k in_d,&&&&6856k in_c
Swap: 2096472k av,&&689560k used, 1406912k free&&&&&&&&&&&&&&&&&& 41876k cached &&&& PID USER&&&& PRI&&NI&&SIZE&&RSS SHARE STAT %CPU %MEM&& TIME CPU COMMAND &&8768 root&&&&&&18&& 0&&548M&&-4M&&1696 S&&&& 0.4
381:56&& 0 /usr/jav &&&& 8 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.1&&0.0&& 6:57&& 1 kscand &&&& 1 root&&&&&&15&& 0&& 520&&476&& 452 S&&&& 0.0&&0.0&& 7:41&& 0 init &&&& 2 root&&&&&&RT&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 0 migration/0 &&&& 3 root&&&&&&RT&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 1 migration/1 &&&& 4 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 0 keventd &&&& 5 root&&&&&&34&&19&&&& 0&&&&0&&&& 0 SWN&& 0.0&&0.0&& 0:00&& 0 ksoftirqd/0 &&&& 6 root&&&&&&34&&19&&&& 0&&&&0&&&& 0 SWN&& 0.0&&0.0&& 0:00&& 1 ksoftirqd/1 &&&& 9 root&&&&&&16&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:03&& 1 bdflush &&&& 7 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&&16:59&& 1 kswapd &&&&10 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&&13:33&& 1 kupdated &&&&11 root&&&&&&25&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 0 mdrecoveryd &&&&15 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0 914:45&& 0 kjournald &&&&79 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 0 khubd &&3255 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 1 kjournald &&3601 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:02&& 1 eth0 &&3675 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:01&& 1 eth1 &&3722 root&&&&&&15&& 0&& 636&&592&& 544 S&&&& 0.0&&0.1&&75:01&& 1 syslogd -m 0 &&3726 root&&&&&&15&& 0&& 464&&400&& 396 S&&&& 0.0&&0.0&& 0:00&& 0 klogd -x &&3737 root&&&&&&15&& 0&& 460&&444&& 392 S&&&& 0.0&&0.0&&12:47&& 0 irqbalance &&3746 rpc&&&&&& 15&& 0&& 604&&520&& 516 S&&&& 0.0&&0.1&& 0:00&& 1 portmap &&3766 rpcuser&& 25&& 0&& 696&&616&& 612 S&&&& 0.0&&0.1&& 0:00&& 1 rpc.statd &&3780 root&&&&&&RT&& 0&& 560&&452&& 424 S&&&& 0.0&&0.0&& 0:06&& 0 /sbin/auditd &&3911 root&&&&&&16&& 0&&&&1036 S&&&& 0.0&&0.2&& 1:02&& 0 /usr/sbin/ssh &&3927 root&&&&&&15&& 0&& 788&&664&& 660 S&&&& 0.0&&0.1&& 0:00&& 1 xinetd -staya &&3945 root&&&&&&15&& 0&& 408&&316&& 312 S&&&& 0.0&&0.0&& 0:00&& 1 /usr/sbin/vsf &&3965 root&&&&&&15&& 0&&&&1084 S&&&& 0.0&&0.2&&10:46&& 0 sendmail: acc &&3974 smmsp&&&& 15&& 0&&&&1144 S&&&& 0.0&&0.2&& 0:02&& 1 sendmail: Que &&3985 root&&&&&&15&& 0&& 452&&408&& 388 S&&&& 0.0&&0.0&& 4:24&& 0 gpm -t imps2&&&&3996 bin&&&&&& 15&& 0&& 944&&536&& 504 S&&&& 0.0&&0.1&& 0:04&& 0 /usr/sbin/can &&4027 root&&&&&&20&& 0&& 564&&468&& 464 S&&&& 0.0&&0.0&&16:17&& 1 crond &&4046 wnn&&&&&& 25&& 0&&&& 504 S&&&& 0.0&&0.0&& 0:00&& 1 /usr/bin/jser &&4110 xfs&&&&&& 15&& 0&&&& 592 S&&&& 0.0&&0.1&& 0:04&& 0 xfs -droppriv &&4140 daemon&&&&15&& 0&& 576&&548&& 504 S&&&& 0.0&&0.1&& 0:05&& 1 /usr/sbin/atd &&4160 root&&&&&&15&& 0&& 408&&384&& 344 S&&&& 0.0&&0.0&& 0:30&& 0 mdadm --monit &&4174 root&&&&&&15&& 0 12164&&11M&&1376 S&&&& 0.0&&2.3&& 0:53&& 1 mdmpd &&4184 root&&&&&&21&& 0&& 480&&420&& 416 S&&&& 0.0&&0.0&& 0:00&& 1 /sbin/agetty&&&&4185 root&&&&&&15&& 0&&&&1032 S&&&& 0.0&&0.2&& 0:00&& 1 /usr/bin/gdm- &&4238 root&&&&&&16&& 0&&&&1260 S&&&& 0.0&&0.2&& 0:00&& 0 /usr/bin/gdm- &&4239 root&&&&&&15&& 0 &&1108 S&&&& 0.0&&0.3 707:48&& 0 /usr/bin/X11/ &&4575 dascom&&&&15&& 0&&&& 636 S&&&& 0.0&&0.1&& 0:06&& 1 nodeAgent &&5934 dascom&&&&15&& 0&& 460&&400&& 360 S&&&& 0.0&&0.0&& 0:07&& 0 ./smspguard &&6356 eax&&&&&& 15&& 0&& 424&&404&& 364 S&&&& 0.0&&0.0&& 0:07&& 1 ./smspguard
17311 root&&&&&&15&& 0&&&&1268 S&&&& 0.0&&0.2&& 0:00&& 0 /usr/bin/gnom
17329 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 Z&&&& 0.0&&0.0&& 0:00&& 0 Xsession &def
17379 root&&&&&&15&& 0&& 860&&684&& 652 S&&&& 0.0&&0.1&& 0:32&& 0 /usr/bin/ssh-
17387 root&&&&&&15&& 0&&&& 968 S&&&& 0.0&&0.2&& 0:18&& 0 /usr/libexec/
17396 root&&&&&&15&& 0&&&& 824 S&&&& 0.0&&0.1&& 0:00&& 1 /usr/libexec/
17398 root&&&&&&15&& 0&&&&1228 S&&&& 0.0&&0.2&& 0:00&& 0 gnome-setting
17407 root&&&&&&15&& 0&& 940&&724&& 632 S&&&& 0.0&&0.1&& 6:05&& 0 fam
17413 root&&&&&&15&& 0&&&& 656 S&&&& 0.0&&0.1&& 0:00&& 1 chinput
17570 root&&&&&&15&& 0&&&& 884 S&&&& 0.0&&0.1&& 0:01&& 1 /usr/bin/meta
17667 root&&&&&&15&& 0&&&&2540 S&&&& 0.0&&0.6&& 5:42&& 1 gnome-panel -
17669 root&&&&&&15&& 0&&&&1364 S&&&& 0.0&&0.3&& 9:33&& 1 nautilus --no
17671 root&&&&&&15&& 0&&&&1324 S&&&& 0.0&&0.2 115:41&& 1 magicdev --sm
17680 root&&&&&&15&& 0&&&&1376 S&&&& 0.0&&0.3&& 9:57&& 1 eggcups --sm-
17682 root&&&&&&15&& 0&&&&1116 S&&&& 0.0&&0.2&& 3:17&& 0 pam-panel-ico
17684 root&&&&&&25&&10&&&&2404 S N&& 0.0&&0.6&&1346m&& 0 /usr/bin/pyth
17685 root&&&&&&15&& 0&& 532&&508&& 460 S&&&& 0.0&&0.0&& 2:19&& 1 /sbin/pam_tim
17777 root&&&&&&15&& 0&&&&1240 S&&&& 0.0&&0.2&& 0:00&& 0 /usr/libexec/ &&3087 root&&&&&&15&& 0&&&&2164 S&&&& 0.0&&0.4&& 5:49&& 1 ntpd -x
20165 ect&&&&&& 15&& 0&& 428&&408&& 364 S&&&& 0.0&&0.0&& 0:04&& 0 ./smspguard
20174 ect&&&&&& 15&& 0 &&3268 S&&&& 0.0&&0.9 244:28&& 0 ./smsproxyd -
17906 dascom&&&&15&& 0&&&& 636 S&&&& 0.0&&0.1&& 0:03&& 1 nodeAgent
21106 eax&&&&&& 24&& 0 &&2156 S&&&& 0.0&&0.7 490:13&& 1 ./smsproxyd - &&4864 dascom&&&&23&& 0&&&&1776 S&&&& 0.0&&1.6 284:05&& 0 /home/dascom/
17641 dascom&&&&23&& 0 &&1728 S&&&& 0.0&&1.8 329:46&& 0 ./SSMN_UMProx
19287 ect&&&&&& 15&& 0&&&&1660 S&&&& 0.0&&1.5 218:52&& 1 ECT_SMSREPLY&& 27025 dascom&&&&21&& 0 &&1520 S&&&& 0.0&&1.7 220:53&& 0 ./DC3G_SMSREP
32587 root&&&&&&15&& 0&&&&1244 S&&&& 0.0&&0.2&& 0:00&& 1 smbd -D
32591 root&&&&&&15&& 0&&&&1384 S&&&& 0.0&&0.3&& 0:54&& 1 nmbd -D
32747 root&&&&&&15&& 0&&&&1700 S&&&& 0.0&&0.4&& 0:11&& 1 smbd -D &&4783 root&&&&&&15&& 0&& 796&&684&& 680 S&&&& 0.0&&0.1&& 0:00&& 1 rpc.rquotad &&4787 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:02&& 0 nfsd &&4788 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:04&& 1 nfsd &&4789 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:04&& 1 nfsd &&4790 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:04&& 0 nfsd &&4791 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:05&& 0 nfsd &&4792 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:04&& 1 nfsd &&4793 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:03&& 1 nfsd &&4794 root&&&&&&15&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:03&& 1 nfsd &&4795 root&&&&&&24&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 1 lockd &&4796 root&&&&&&24&& 0&&&& 0&&&&0&&&& 0 SW&&&&0.0&&0.0&& 0:00&& 1 rpciod &&4802 root&&&&&&15&& 0&& 724&&588&& 584 S&&&& 0.0&&0.1&& 0:00&& 1 rpc.mountd
32120 dascom&&&&15&& 0&&&&2020 S&&&& 0.0&&0.5&&47:17&& 1 ./smsproxyd -
10013 dascom&&&&15&& 0&&&&1708 S&&&& 0.0&&1.5&&20:55&& 0 /home/dascom/
10153 dascom&&&&15&& 0&&&&1720 S&&&& 0.0&&1.6&&26:27&& 1 /home/dascom/
10236 dascom&&&&15&& 0&&&&1772 S&&&& 0.0&&1.6&&19:12&& 0 /home/dascom/ &&3893 dascom&&&&22&& 0 &&1816 S&&&& 0.0&&1.7&&96:27&& 0 EAX_UMProxy -
21806 dascom&&&&15&& 0&&&&1752 S&&&& 0.0&&0.6&& 3:02&& 0 DC3G_SMSSUB - &&4988 dascom&&&&15&& 0&&&&1760 S&&&& 0.0&&0.5&& 1:27&& 0 DC3G_SMSSUB - &&4479 dascom&&&&25&& 0 &&1592 S&&&& 0.0&&1.8&&18:21&& 0 DC3G_HB6GClos
14167 root&&&&&&15&& 0&&&&1192 S&&&& 0.0&&0.2&& 0:43&& 1 cupsd
11789 ect&&&&&& 25&& 0 12904&&10M&&3460 S&&&& 0.0&&2.0&&11:34&& 0 ./ECT_UMProxy
25206 daemon&&&&20&& 0&& 568&&500&& 496 S&&&& 0.0&&0.0&& 0:00&& 1 /usr/sbin/atd
25207 dascom&&&&25&& 2&&&&1012 S N&& 0.0&&0.1&& 0:00&& 1 sh
25208 dascom&&&&26&& 2&&&& 968 S N&& 0.0&&0.1&& 0:00&& 1 /bin/bash
25209 dascom&&&&17&& 2&&&& 892 R N&& 0.0&&0.2&& 1:34&& 1 top -bc -d 10
29799 root&&&&&&21&& 0&&&&1552 S&&&& 0.0&&0.3&& 0:00&& 0 sshd: dascom&& 29801 dascom&&&&15&& 0&&&&1856 S&&&& 0.0&&0.4&& 0:00&& 0 sshd: dascom@
29802 dascom&&&&25&& 0&&&&1176 S&&&& 0.0&&0.2&& 0:00&& 1 -bash &&9344 root&&&&&&21&& 0&&&&1556 S&&&& 0.0&&0.3&& 0:00&& 1 sshd: dascom&&&&9346 dascom&&&&15&& 0&&&&1760 S&&&& 0.0&&0.4&& 0:00&& 1 sshd: dascom@ &&9347 dascom&&&&15&& 0&&&&1260 S&&&& 0.0&&0.2&& 0:00&& 0 -bash
-- && ※ 来源:·水木社区 ·[FROM: 119.255.56.*]
Pass the shadow发信人: hiei (Pass the shadow), 信区: LinuxApp
标&&题: Re: [问题]是什么导致了服务器CPU IOWait忽然飘高？
发信站: 水木社区 (Fri Nov 16 18:33:37 2012), 站内 &&&&可能是内存不足，用swap了，大量的磁盘IO肯定iowait超高了
-- && ※ 来源:·水木社区 ·[FROM: 116.236.216.*]
Pass the shadow发信人: hiei (Pass the shadow), 信区: LinuxApp
标&&题: Re: [问题]是什么导致了服务器CPU IOWait忽然飘高？
发信站: 水木社区 (Fri Nov 16 18:35:27 2012), 站内 && 如果用的是虚拟机，也可能是主机负载太高了，你被其他的虚拟机影响了
-- && ※ 来源:·水木社区 ·[FROM: 116.236.216.*]
解灵运发信人: xielingyun (解灵运), 信区: LinuxApp
标&&题: Re: [问题]是什么导致了服务器CPU IOWait忽然飘高？
发信站: 水木社区 (Fri Nov 16 18:40:27 2012), 站内 && iostat -x 1 -m看下是不是盘坏了
-- && ※ 来源:·水木社区 ·[FROM: 1.202.198.*]
I wanna be发信人: iwannabe (I wanna be), 信区: LinuxApp
标&&题: Re: [问题]是什么导致了服务器CPU IOWait忽然飘高？
发信站: 水木社区 (Fri Nov 16 18:49:35 2012), 站内 && swap用了太多了，vmstat看看swap out/in的值 &&&& 【 在 inolddays (inolddays) 的大作中提到: 】
: 对着top命令输出的日志看了一天，查找问题。
: 不知道什么原因忽然之间IOWait就高了。
: 导致服务器上运行的程序出现问题。
: ...................
&& -- && ※ 来源:·水木社区 newsmth.net·[FROM: 211.99.222.*]
老变态の新常态发信人: cppgx (s# 巛), 信区: LinuxApp
标&&题: Re: [问题]是什么导致了服务器CPU IOWait忽然飘高？
发信站: 水木社区 (Fri Nov 16 20:41:31 2012), 站内 && 这可不一定。 && 不过甭管是不是内存不足，iotop 一看就知道。 && 【 在 hiei (Pass the shadow) 的大作中提到: 】
:&&可能是内存不足，用swap了，大量的磁盘IO肯定iowait超高了
&&&& -- && ※ 来源:·水木社区 newsmth.net·[FROM: 208.117.34.*]
ABC发信人: yaozhenguo (好想你), 信区: LinuxApp
标&&题: Re: [问题]是什么导致了服务器CPU IOWait忽然飘高？
发信站: 水木社区 (Fri Nov 16 23:04:12 2012), 站内 && swap都用了 689560k 这么多了，很大的肯能就是swap用的太多了。
有程序申请内存要做页面交换。 &&&&&& 【 在 inolddays (inolddays) 的大作中提到: 】
: 对着top命令输出的日志看了一天，查找问题。
: 不知道什么原因忽然之间IOWait就高了。
: 导致服务器上运行的程序出现问题。
: ...................
前途虽然渺茫
但仍充满希望 &&&& ※ 来源:·水木社区 newsmth.net·[FROM: 114.246.99.*]
inolddays发信人: inolddays (inolddays), 信区: LinuxApp
标&&题: Re: [问题]是什么导致了服务器CPU IOWait忽然飘高？
发信站: 水木社区 (Mon Nov 19 13:12:35 2012), 站内 && 从下面的日志分析上看，正常和不正常的情况下，SWap的用量是一样的呀？
并且，我看了日志其它地方，Swap一直这么多用量，貌似不是这个原因造成的&&&&IOWait高吧？
另外，这个机器的linux内核版本比较低，Linux WebServer 2.4.21-15.ELsmp #1 SMP Thu Apr 22 00:18:24 EDT
i686 i386 GNU/Linux
有些命令也用不了。。
真桌急呀。。。
眼看着BUG没法儿找到哇。。 && =====正常=====&& 11:51:53&&up 189 days, 19:59,&&3 users,&&load average: 0.53, 1.05, 1.14&& 104 processes: 102 sleeping, 1 running, 1 zombie, 0 stopped&& CPU states:&&cpu&&&&user&&&&nice&&system&&&&irq&&softirq&&iowait&&&&idle&&&&&&&&&&&&&& total&&&&0.1%&&&&0.1%&&&&0.9%&& 0.1%&&&& 0.1%&& 31.6%&& 66.6%&&&&&&&&&&&&&& cpu00&&&&0.1%&&&&0.0%&&&&1.1%&& 0.3%&&&& 0.3%&& 28.1%&& 69.5%&&&&&&&&&&&&&& cpu01&&&&0.0%&&&&0.1%&&&&0.6%&& 0.0%&&&& 0.0%&& 35.2%&& 63.7%&& Mem:&& 511952k av,&&484096k used,&& 27856k free,&&&&&& 0k shrd,&& 24908k buff&&&&&&&&&&&&&&&&&&&&&&&&311492k actv,&& 60884k in_d,&&&&6912k in_c&& Swap: 2096472k av,&&689560k used, 1406912k free&&&&&&&&&&&&&&&&&& 41888k cached&&&&&& =====不正常=====&&&& 11:52:03&&up 189 days, 20:00,&&3 users,&&load average: 4.12, 1.78, 1.37&& 104 processes: 102 sleeping, 1 running, 1 zombie, 0 stopped&& CPU states:&&cpu&&&&user&&&&nice&&system&&&&irq&&softirq&&iowait&&&&idle&&&&&&&&&&&&&& total&&&&3.4%&&&&0.0%&&&&4.4%&& 0.6%&&&& 0.8%&& 84.5%&&&&5.9%&&&&&&&&&&&&&& cpu00&&&&2.7%&&&&0.0%&&&&4.5%&& 1.2%&&&& 1.7%&& 77.6%&& 11.8%&&&&&&&&&&&&&& cpu01&&&&4.1%&&&&0.0%&&&&4.2%&& 0.0%&&&& 0.0%&& 91.4%&&&&0.0%&& Mem:&& 511952k av,&&490380k used,&& 21572k free,&&&&&& 0k shrd,&& 25116k buff&&&&&&&&&&&&&&&&&&&&&&&&317180k actv,&& 60924k in_d,&&&&6856k in_c&& Swap: 2096472k av,&&689560k used, 1406912k free&&&&&&&&&&&&&&&&&& 41876k cached&& 【 在 hiei 的大作中提到: 】
: 可能是内存不足，用swap了，大量的磁盘IO肯定iowait超高了
&& -- && ※ 来源:·水木社区 ·[FROM: 119.255.56.*]
inolddays发信人: inolddays (inolddays), 信区: LinuxApp
标&&题: Re: [问题]是什么导致了服务器CPU IOWait忽然飘高？
发信站: 水木社区 (Mon Nov 19 14:00:23 2012), 站内 && iostat -x 1信息如下，看不太懂。
avg-cpu:&&%user&& %nice&&&&%sys&& %idle &&&&&&&&&&&&2.37&&&&0.22&&&&3.12&& 94.28 && Device:&&&&rrqm/s wrqm/s&& r/s&& w/s&&rsec/s&&wsec/s&&&&rkB/s&&&&wkB/s avgrq-sz avgqu-sz&& await&&svctm&&%util
/dev/hda&&&& 1.46&&12.13&&1.93&&6.72&& 27.09&&131.60&&&&13.55&&&&65.80&&&&18.34&&&& 0.01&&&&0.06&& 0.01&& 0.01
/dev/hda1&&&&0.00&& 0.00&&0.00&&0.00&&&&0.00&&&&0.00&&&& 0.00&&&& 0.00&&&& 5.17&&&& 0.00&&145.42&&95.60&& 0.00
/dev/hda2&&&&1.46&&11.47&&1.01&&6.31&& 19.73&&131.60&&&& 9.87&&&&65.80&&&&20.68&&&& 0.01&&&&0.55&& 0.13&& 0.10
/dev/hda3&&&&0.00&& 0.65&&0.92&&0.41&&&&7.36&&&&8.90&&&& 3.68&&&& 4.45&&&&12.20&&&& 0.00&&&&1.26&& 1.08&& 0.14
【 在 xielingyun 的大作中提到: 】
: iostat -x 1 -m看下是不是盘坏了
&& -- && ※ 来源:·水木社区 ·[FROM: 119.255.56.*]
解灵运发信人: xielingyun (解灵运), 信区: LinuxApp
标&&题: Re: [问题]是什么导致了服务器CPU IOWait忽然飘高？
发信站: 水木社区 (Tue Nov 20 10:33:00 2012), 站内 && 看样子是swap占了很多
-- && ※ 来源:·水木社区 ·[FROM: 1.202.198.*]
文章数:19&分页: