通过 top
命令查找占用CPU最高的进程PID;
通过top -Hp PID
查找占用CPU最高的线程TID;
对于java
程序,使用jstack
打印线程堆栈信息;
通过printf %x tid
打印出最消耗CPU线程的十六进制;
top
命令查看CPU等待IO时间,即%wa
;iostat -d -x -m 1 10
查看磁盘IO情况;(安装命令 yum install -y sysstat
)sar -n DEV 1 10
查看网络IO情况;ps -e -L h o state,cmd | awk '{if($1=="R"||$1=="D"){print $0}}' | sort | uniq -c | sort -k 1nr
使用vmstat
查看系统纬度的 CPU 负载;
使用 top
查看进程纬度的 CPU 负载;
可以通过 vmstat 从系统维度查看 CPU 资源的使用情况
格式:vmstat -n 1 -n 1
表示结果一秒刷新一次
1 @VM-1-14-centos ~]# vmstat -n 1 2 -----------memory---------- ---swap-- -----io---- -system-- ------cpu----- 3 swpd free buff cache si so bi bo in cs us sy id wa st 4 0 250304 163472 2154300 0 0 1 16 0 4 1 0 98 0 0 5 0 250412 163472 2154332 0 0 0 0 937 1439 1 1 99 0 0 6 0 250428 163472 2154332 0 0 0 4 980 1329 0 0 100 0 0 7 0 250444 163472 2154332 0 0 0 0 854 1227 0 0 99 0 0 8 0 250444 163472 2154332 0 0 0 68 832 1284 0 1 99 1 0 9 0 250016 163472 2154332 0 0 0 0 929 1389 1 1 99 0 0
返回结果中的主要数据列说明:
可以通过 top 从进程纬度来查看其 CPU、内存等资源的使用情况。
1 top - 19:49:59 up 36 days, 23:15, 3 users, load average: 0.11, 0.04, 0.05 2 Tasks: 133 total, 1 running, 131 sleeping, 0 stopped, 1 zombie 3 %Cpu(s): 3.1 us, 3.1 sy, 0.0 ni, 93.8 id, 0.0 wa, 0.0 hi, 0.0 si, 0.0 st 4 KiB Mem : 3880188 total, 241648 free, 1320424 used, 2318116 buff/cache 5 KiB Swap: 0 total, 0 free, 0 used. 2209356 avail Mem 6 PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND 7 1793 mysql 20 0 1608796 236708 9840 S 6.7 6.1 83:36.23 /usr/sbin/mysqld 8 1 root 20 0 125636 3920 2444 S 0.0 0.1 4:34.13 /usr/lib/systemd/systemd 9 2 root 20 0 0 0 0 S 0.0 0.0 0:00.90 [kthreadd] 10 4 root 0 -20 0 0 0 S 0.0 0.0 0:00.00 [kworker/0:0H] 11 6 root 20 0 0 0 0 S 0.0 0.0 0:15.46 [ksoftirqd/0] 12 7 root rt 0 0 0 0 S 0.0 0.0 0:12.02 [migration/0]
问题描述
Linux 系统没有业务程序运行,通过 top 观察,类似如下图所示,CPU 很空闲,但是 load average 却非常高:
问题分析
CPU低而负载高也就是说等待磁盘I/O完成的进程过多,就会导致队列长度过大,这样就体现到负载过大了,但实际是此时CPU被分配去执行别的任务或空闲,具体场景有如下几种:
场景一:磁盘读写请求过多就会导致大量I/O等待
场景二:MySQL中存在没有索引的语句或存在死锁等情况
场景三:外接硬盘故障,常见有挂了NFS,但是NFS server故障
处理办法
等待 I/O 的进程通过处于 uninterruptible sleep 或 D 状态;通过给出这些信息我们就可以简单的查找出处在wait状态的进程。 1 ps -e -L h o state,cmd | awk '{if($1=="R"||$1=="D"){print $0}}' | sort | uniq -c | sort -k 1nr
服务热线
1391-024-6332
Copyright 2015-2018 www.intsavi.com.cn All Rights Reserved
电话:010-62980070 010-62961051 手机:13910246332
版权所有北京赛维博信科技发展有限公司 备案号:京ICP备14043711号-1 京ICP备14043711号-3