news 2026/3/30 2:36:43

Linux进程CPU飙高排查手册

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Linux进程CPU飙高排查手册

前言

服务器CPU突然飙到90%以上,告警响个不停。这时候需要快速定位是哪个进程、哪个线程、哪行代码在吃CPU。

这篇整理一套完整的排查流程,从定位进程到找出具体代码行,覆盖Java、Go、Python等常见语言。


一、先看是哪个进程

上去第一件事,top看一眼:

top

输出里重点看这行:

%Cpu(s): 85.2 us, 3.1 sy, 0.0 ni, 10.5 id, 0.0 wa, 0.0 hi, 1.2 si

us高说明是用户程序在吃CPU,wa高说明在等IO。如果us很高,基本就是业务代码的问题。

P排序,罪魁祸首一目了然:

PID USER %CPU %MEM COMMAND 12345 app 156.0 8.2 java -jar app.jar

好家伙,156%,跑满了一个半核心。

二、定位是哪个线程

Java进程里几百个线程呢,得继续缩小范围:

top-H -p12345

-H显示线程级别。果然有个线程98%:

PID USER %CPU COMMAND 12367 app 98.0 java 12368 app 2.3 java

记下这个线程ID:12367

三、定位具体代码

Java的话用jstack:

jstack12345>/tmp/thread.txt

但是jstack里线程ID是16进制的,先转换一下:

printf"%x\n"12367# 304f

然后搜:

grep-A30"nid=0x304f"/tmp/thread.txt

输出:

"worker-1" #23 nid=0x304f runnable at java.util.regex.Pattern$GroupHead.match(Pattern.java:4658) at java.util.regex.Pattern$Loop.match(Pattern.java:4785) at java.util.regex.Pattern$GroupTail.match(Pattern.java:4717) ...(省略一大堆regex相关的栈) at com.example.service.ContentFilter.filter(ContentFilter.java:89)

破案了,正则在疯狂回溯。

四、常见原因与解决

CPU问题基本就那几种:

1)正则回溯

类似这种正则特别危险:

Stringregex="(a+)+b";// 遇到 "aaaaaaaaaaaaaaac" 直接卡死

2)死循环

最傻的bug:

while(list.size()>0){process(list.get(0));// 忘了remove...}

3)频繁Full GC

表现是好几个GC线程都在吃CPU。用这个看:

jstat -gcutil123451000

FGC列如果一直在涨,就是内存泄漏了。

4)锁竞争

top里sy(系统态)高,jstack一看全是BLOCKED状态。

五、一键排查脚本

一个脚本,出问题直接跑,一键收集信息:

#!/bin/bash# cpu_debug.shPID=$1[-z"$PID"]&&echo"用法:$0<pid>"&&exit1DIR="/tmp/cpu_$(date+%H%M%S)"mkdir-p$DIRecho"收集进程$PID信息..."# 线程CPUps-T -p$PID-o tid,%cpu,time --sort=-%cpu|head-20>$DIR/threads.txt# jstackjstack$PID>$DIR/jstack.txt2>/dev/null# 找最忙的线程TOP_TID=$(head-2 $DIR/threads.txt|tail-1|awk'{print $1}')TOP_TID_HEX=$(printf"%x"$TOP_TID)echo"最忙线程:$TOP_TID(0x$TOP_TID_HEX)"grep-A30"nid=0x$TOP_TID_HEX"$DIR/jstack.txtecho"详细信息:$DIR"

用法:./cpu_debug.sh 12345

直接告诉你哪个线程最忙,在执行什么代码。

六、Go程序的排查

Go比较方便,如果开了pprof:

go tool pprof http://localhost:6060/debug/pprof/profile?seconds=30

进去之后top 10看热点函数,list 函数名看具体代码。

不想用命令行的话,加个-http=:8080参数,浏览器看火焰图,更直观。

七、预防措施

建议加个告警:

-alert:HighCPUexpr:100-(avg(irate(node_cpu_seconds_total{mode="idle"}[5m])) * 100)>80for:3m

CPU超过80%持续3分钟就告警。

另外代码里长时间运行的任务最好加个超时,别让一个bug把整个服务拖垮。


总结

CPU排查流程:

1. top/ps 确认哪个进程 ↓ 2. top -H 确认哪个线程 ↓ 3. jstack/pprof/perf 确认哪行代码 ↓ 4. 分析原因(死循环/GC/锁/正则...) ↓ 5. 修复并验证

大多数情况下,问题出在:

  • 业务代码Bug(死循环、正则回溯)
  • 内存问题引发频繁GC
  • 锁竞争严重

掌握这套流程,线上CPU问题基本都能快速定位。


有问题评论区交流。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/3/25 17:01:41

LCD1602仅背光点亮的硬件连接图解说明

LCD1602背光亮但无显示?别急着改代码——这是硬件在对你“眨眼” 你第一次把LCD1602焊上板子,通电——背光“唰”地亮了,心里一喜;可屏幕一片死寂,连两行暗线都不见。你翻遍数据手册、重烧三遍固件、甚至换了个新模块……结果还是一样: 灯亮,字没影 。 这不是玄学,…

作者头像 李华
网站建设 2026/3/28 3:02:58

Qwen3-ASR-0.6B效果展示:越南语顺化方言→中部口音特有声调建模验证

Qwen3-ASR-0.6B效果展示&#xff1a;越南语顺化方言→中部口音特有声调建模验证 1. 为什么这次测试特别值得关注 你可能已经见过不少语音识别模型能听懂标准越南语&#xff0c;但有没有试过让AI听懂顺化话&#xff1f;不是河内的标准腔&#xff0c;也不是胡志明市的南部口音&…

作者头像 李华
网站建设 2026/3/28 22:03:34

工业控制中Keil5安装配置的深度剖析

工业控制中Keil Vision5的实战内功&#xff1a;一个老工程师的调试台笔记 你有没有过这样的经历&#xff1f;凌晨两点&#xff0c;产线停机&#xff0c;PLC固件升级失败&#xff0c;Keil5里红字报错 Error: device not supported &#xff0c;而设备手册上明明写着“Keil ful…

作者头像 李华
网站建设 2026/3/27 22:35:59

灵感画廊5分钟快速上手:零基础玩转Stable Diffusion艺术创作

灵感画廊5分钟快速上手&#xff1a;零基础玩转Stable Diffusion艺术创作 1. 为什么你不需要懂技术&#xff0c;也能画出惊艳作品 你有没有过这样的时刻&#xff1a;脑海里浮现出一幅画面——晨雾中的青瓦白墙、雨夜霓虹下回眸的侧影、或是机械齿轮与藤蔓共生的幻想图景——可…

作者头像 李华
网站建设 2026/3/27 6:50:16

小白必看:Gemma-3-270m文本生成服务从安装到使用的完整教程

小白必看&#xff1a;Gemma-3-270m文本生成服务从安装到使用的完整教程 你是不是也遇到过这些情况&#xff1a;想试试最新的轻量级大模型&#xff0c;但看到“编译”“CUDA”“量化”就头皮发麻&#xff1b;下载了镜像却卡在第一步&#xff0c;不知道点哪里、输什么、等多久&a…

作者头像 李华
网站建设 2026/3/29 19:53:41

系统学习Arduino开发前的环境准备流程

从“连不上板”到“秒传代码”&#xff1a;Arduino开发环境的底层逻辑与实战破局指南你有没有过这样的经历&#xff1f;刚拆开Arduino Uno&#xff0c;满怀期待插上USB线&#xff0c;打开IDE——端口列表空空如也&#xff1b;换根线、重启电脑、重装驱动……最后发现&#xff0…

作者头像 李华