天天看点

记录一次java进程占用cpu超高的问题排查

一、问题现象

 1、top命令显示java使用CPU高达700%多。 

记录一次java进程占用cpu超高的问题排查

2、查看此进程的线程运行情况

top -Hp 18014

记录一次java进程占用cpu超高的问题排查

二、问题排查

1、转换线程号为16进制

        1)在上图CPU占用高的线程列表中,随便找一个线程(比如4370)

        2)用printf转换成16进制

#printf "%x\n" 4370
1112
           

2、用堆栈跟踪工具查看java进程(注意,java进程是用哪个用户启动的就用那个用户查看,否则jstack会有抛出异常)

1)输出到文件中查看
#jstack -l > ./jstack_result18014.txt 18014 
2)直接按进程ID和线程ID查看
#jstack 18014 |grep -A 200 1112
           

3、打开jstack_result.txt文件,查找0x1112

可以查找到如下图信息,基本可以定位是程序应用的日志监控sentry包中使用了不安全的WeakHashMap:

记录一次java进程占用cpu超高的问题排查

4、查看sentry源代码

1)查看程序中引用的sentry日志收集工具jar版本为4.0.0,源代码如下:

记录一次java进程占用cpu超高的问题排查

2)查看sentry5.0.1最新版本的源代码

记录一次java进程占用cpu超高的问题排查

三、问题修正

1. 将原来的sentry4.0改为5.01版本

<dependency>
            <groupId>io.sentry</groupId>
            <artifactId>sentry-spring-boot-starter</artifactId>
            <version>4.0.0</version>
        </dependency>
           

  改为5.0.1如下:

<dependency>
            <groupId>io.sentry</groupId>
            <artifactId>sentry-spring-boot-starter</artifactId>
            <version>5.0.1</version>
        </dependency>
           

2、将java进程停止,重新发版,问题解决。 

继续阅读