服务器 Linux 系统的 CPU 持续跑高，CPU占用率较高问题的排查分析 ...

1.    若出現服務的速度變慢，或突然斷開，可以考慮服務器帶寬和 CPU 是否有跑滿或跑高的問題。

复制代码

Linux 系統下，您可以按如下步驟進行排查：
1 定位问题。找到影响带宽和 CPU 跑满或跑高的详细进程。
2 分析处理。排查影响带宽和 CPU 跑满或跑高的进程是否正常，并分类进行处理。
3 对于 正常进程：您需要对程序进行优化或者升级服务器配置。
4 对于 非常进程：您可以手动对进程进行查杀，也可以使用第三方安全工具去查杀。
本文相关配置及说明已在 CentOS 6.5 64 位操作系统中进行过测试。 其它类型及版本操作系统配置可能有所差异。

详细情况请参阅相应操作系统官方文档。
假如服务器 Linux 系统的 CPU 持续跑高，则会对系统稳固性和业务运行造成影响。
本文对 CPU 占用率较高问题的排查分析做扼要说明。
CPU 跑满或跑高的问题定位
若服务器的 CPU 持续跑高，会对系统的稳固性和业务运行造成影响。
Linux 系统下，查看进程的常用下令如下:
• ps -aux
• ps -ef
• top
Linux 系统中，通常使用 top 下令来查看系统的负载问题，并定位耗用较多 CPU 资源的进程。
操作步调：
说明：资源负载非常时，通常无法通过 SSH 进行远程连接或者连接卡顿，发起您通过管理终端进行连接。

• 通过 top 下令查看系统当前的运行情况。
  
• 1. top - 17:27:13 up 27 days,  3:13,  1 user,  load average: 0.02, 0.03, 0.05

  复制代码
• 1. Tasks:  94 total,   1 running,  93 sleeping,   0 stopped,   0 zombie

  复制代码
• 1. %Cpu(s):  0.3 us,  0.1 sy,  0.0 ni, 99.5 id,  0.0 wa,  0.0 hi,  0.0 si,  0.1 st

  复制代码
• 1. KiB Mem:   1016656 total,   946628 used,    70028 free,   169536 buffers

  复制代码
• 1. KiB Swap:        0 total,        0 used,        0 free.   448644 cached Mem

  复制代码
• 1. PID USER      PR  NI    VIRT    RES    SHR S %CPU %MEM     TIME+ COMMAND

  复制代码
• 1. 1 root      20   0   41412   3824   2308 S  0.0  0.4   0:19.01 systemd

  复制代码
• 1. 2 root      20   0       0      0      0 S  0.0  0.0   0:00.04 kthreadd

  复制代码

针对负载问题，您只需关注回显的第一行和第三行信息，详细说明如下。

• top 下令的第一行显示的内容 17:27:13 up 27 days, 3:13, 1 user, load average: 0.02, 0.03, 0.05 依次为 系统当前时间 、系统到目前为止已运行的时间、当前登录系统的用户数量、系统负载，这与直接实行 uptime 下令查询效果一致。
  
• top 下令的第三行会显示当前 CPU 资源的总体使用情况，下方会显示各个进程的资源占用情况。
  
• 通过字母键 P，可以对 CPU 使用率进行倒序分列，进而定位系统中占用 CPU 较高的进程。
  说明：通过字母键 M， 您可以对系统内存使用情况进行排序。假如有多核 CPU，数字键 1 可以显示每核 CPU 的负载状况。
  
• 通过 ll /proc/PID/exe 可以查看每个进程 ID 对应的程序文件。
  CPU 跑满或跑高的分析处理
  CPU 的跑满或跑高，在确认详细的进程效果后，针对非常的进程，您需要通过 top 下令将其终止；而对于 kswapd0 进程导致的内存不敷等问题，您需要对系统进行规格的升级或程序的优化。
  使用 top 直接终止 CPU 消耗较大的进程
  您可以直接在 top 运行界面快速终止相应的非常进程。操作步调如下：
  
• 若您想要终止某个进程，只需按下小写的 k 键。
  
• 输入想要终止的进程 PID （top 输出效果的第一列）。例如，若您想要终止 PID 为 86 的进程，输入 86 后按回车即可。
  
• 操作乐成后，界面会出现类似 Send pid 86 signal [15/sigterm] 的提示信息。按回车确认即可。
  kswapd0 进程占用导致 CPU 较高
  操作系统都用分页机制来管理物理内存，系统会把一部分硬盘空间虚拟成内存使用。由于内存的速度要比磁盘快得多，所以系统要按照某种换页机制将不需要的页面换到磁盘中，将需要的页面调到内存中。
  kswapd0 是虚拟内存管理中负责换页的进程，当服务器内存不敷的时候 kswapd0 会实行换页操作，这个换页操作是十分消耗主机 CPU 资源的。操作步调如下：
  
• 通过 top 下令查看 kswapd0 进程。
  
• 检查该进程是否持续处于非睡眠状态，且运行时间较长。若是，可以初步判断系统在持续地进行换页操作，kswapd0 进程占用了系统大量 CPU 资源。
  
• 您可以通过 free 、ps 等指令进一步查询系统及系统内进程的内存占用情况，做进一步排查分析。
  
• 针对系统当前内存不敷的问题，您可以重启 Apache，开释内存。
  说明：从长远的角度来看，您需要对内存进行升级。
  带宽跑满或跑高的分析处理
  对于正常进程导致的带宽跑满或跑高的问题，需要对服务器的带宽进行升级。对于非常进程，有可能是由于恶意程序问题，或者是部分 IP 恶意访问导致，也可能是服务遭到了 CC 攻击。
  通常情况下，您可以使用 iftop 工具或 nethogs 查看流量的占用情况，进而定位到详细的进程。
  使用 iftop 工具排查
  
• 在服务器内部安装 iftop 流量监控工具。
  
• 1. yum install iftop -y

  复制代码
• 服务器外网带宽被占满时，假如通过远程无法登陆，可通过阿里云终端管理进入到服务器内部，运行下面下令查看流量占用情况：
  
• 1. iftop -i eth1 -P

  复制代码

留意：-P 参数将会显示哀求端口。实行 iftop -i eth0 -P 下令，可以查看通过服务器哪个端口创建的连接，以及内网流量。举例如下：
在上图中，您可以查看到流量高耗的是服务器上 53139 端口和 115.205.150.235 地址创建的连接。
26. 实行 netstat 下令反查 53139 端口对应的进程。
27. netstat -tunlp |grep 53139

• 经反查，服务器上 vsftpd 服务产生大量流量，您可以通过停止服务或使用 iptables 服务来对指定地址进行处理，如屏蔽 IP 地址或限速，以保证服务器带宽可以或许正常使用。
  使用 nethogs 进行排查
  
• 在服务器内部安装 nethogs 流量监控工具。
  
• 1. yum install nethogs -y

  复制代码
• 通过 nethogs 工具来查看网卡上进程级的流量信息，若未安装可以通过 yum、apt-get 等方式安装。举例如下：
  
• 若 eth1 网卡跑满，实行下令 nethogs eth1。
  
• 查看每个进程的网络带宽情况以及进程对应的 PID。
  
• 确定导致带宽跑满或跑高的详细进程。
  
• 若进程确定是恶意程序，可以通过实行 kill -TERM 来终止程序。
  说明：
  假如是 Web 服务程序，您可以使用 iftop 等工具来查询详细 IP 来源，然后分析 Web 访问日记是否为正常流量。
  日记分析可以使用 logwatch 或 awstats 等工具进行。
  使用防御 CC 攻击的软件或者购买鼎峰带防御的香港服务器产品。
  

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。