首页>国内 > 正文

环球新消息丨Linux性能问题分析流程与性能优化思路

2022-07-15 09:03:52来源:华仔聊技术


【资料图】

排查顺序1. 整体情况top/htop/atop命令查看进程/线程、CPU、内存使用情况,CPU使用情况;dstat 2查看CPU、磁盘IO、网络IO、换页、中断、切换,系统I/O状态;vmstat 2查看内存使用情况,内存状态;iostat -d -x 2查看所有磁盘的IO情况,系统I/O状态;iotop查看IO靠前的进程,系统的I/O状态;perf top查看占用CPU最多的函数,CPU使用情况;perf record -ag -- sleep 15perf report查看CPU事件占比,调用栈,CPU使用情况;sar -n DEV 2查看网卡的吞吐,网卡状态;/usr/share/bcc/tools/filetop -C查看每个文件的读写情况,系统的I/O状态;/usr/share/bcc/tools/opensnoop显示正在被打开的文件,系统的I/O状态;mpstat -P ALL 1单核CPU是否被打爆;ps aux --sort=-%cpu按CPU使用率排序,找出CPU消耗最多进程;ps -eo pid,comm,rss | awk "{m=$3/1e6;s["*"]+=m;s[$2]+=m} END{for (n in s) printf"%10.3f GB %s\n",s[n],n}" | sort -nr | head -20统计前20内存占用;awk "NF>3{s["*"]+=s[$1]=$3*$4/1e6} END{for (n in s) printf"%10.1f MB %s\n",s[n],n}" /proc/slabinfo | sort -nr | head -20统计内核前20slab的占用;2. 进程分析,进程占用的资源pidstat 2 -p进程号,查看可疑进程CPU使用率变化情况;pidstat -w -p进程号,查看可疑进程的上下文切换情况;pidstat -d -p进程号,查看可疑进程的IO情况;lsof -p进程号,查看进程打开的文件;strace -f -T -tt -p进程号,显示进程发起的系统调用;3. 协议栈分析,连接/协议栈状态ethtool -S查看网卡硬件情况;cat /proc/net/softnet_stat/ifconfig eth1查看网卡驱动情况;netstat -nat|awk "{print awk $NF}"|sort|uniq -c|sort -n查看连接状态分布;ss -ntp或者netstat -ntp查看连接队列;netstat -s查看协议栈情况;4. 方法论

RED方法:监控服务的请求数(Rate)、错误数(Errors)、响应时间(Duration)。Weave Cloud在监控微服务性能时提出的思路。

USE方法:监控系统资源的使用率(Utilization)、饱和度(Saturation)、错误数(Errors)。

5. 性能分析工具

Linux 内核的各个子系统出发,汇总了对各个子系统进行性能分析时,你可以选择的工具。不过,虽然这个图是性能分析最好的参考资料之一,它其实还不够具体。比如,当你需要查看某个性能指标时,这张图里对应的子系统部分,可能有多个性能工具可供选择。但实际上,并非所有这些工具都适用,具体要用哪个,还需要你去查找每个工具的手册,对比分析做出选择。

6. CPU分析思路7. 内存分析思路

接着我们来看内存方面。从内存的角度来说,主要的性能指标,就是系统内存的分配和使用、进程内存的分配和使用以及 SWAP 的用量。下面这张图列出了常见的内存性能指标。

8. IO分析思路

从文件系统和磁盘 I/O 的角度来说,主要性能指标,就是文件系统的使用、缓存和缓冲区的使用,以及磁盘 I/O 的使用率、吞吐量和延迟等。下面这张图列出了常见的 I/O 性能指标。

9. 网络分析思路

从网络的角度来说,主要性能指标就是吞吐量、响应时间、连接数、丢包数等。根据 TCP/IP 网络协议栈的原理,我们可以把这些性能指标,进一步细化为每层协议的具体指标。这里我同样用一张图,分别从链路层、网络层、传输层和应用层,列出了各层的主要指标。

10. 基准测试工具

除了性能分析外,很多时候,我们还需要对系统性能进行基准测试。比如,

在文件系统和磁盘 I/O 模块中,我们使用 fio 工具,测试了磁盘 I/O 的性能。在网络模块中,我们使用 iperf、pktgen 等,测试了网络的性能。而在很多基于 Nginx 的案例中,我们则使用 ab、wrk 等,测试 Nginx 应用的性能。

​ ​

关键词: 性能指标 使用情况 文件系统 基准测试 响应时间

相关新闻

Copyright 2015-2020   三好网  版权所有