记一次CPU占用率较高问题排查

Answer 1

在项目开发调试过程中，我们遇到了服务组件CPU占用率较高的问题。在64G内存、24核CPU的Linux环境下，服务组件在无数据处理情况下，CPU占用率维持在20-30%，引起关注。

我们首先分析可能的原因，结合实际场景，判断可能是代码中有耗CPU的操作。接下来，我们分步骤进行排查：

获取进程ID






查找CPU使用率较高的线程，发现三个线程ID分别为6132、10852、17016。






使用ps命令获取线程详细信息，输出至jstack.txt文件便于观察。






转换操作系统线程ID为16进制，定位到堆栈信息中线程ID=17F4。






定位到异常代码在UploadRunner类的run()方法内，while(true)循环获取阻塞队列元素进行消费。使用的是非阻塞方式poll()方法，导致线程自旋。

排查发现，当前有三个线程在自旋空转，导致CPU占用率持续较高。调整为使用queue.take()方法，让消费线程阻塞获取元素。

验证结果，CPU占用率稳定在0%-1%之间，问题得到解决。

通过分析JDK BlockingQueue阻塞队列的实现方式，了解到调用take()方法后，队列为空时线程会被阻塞等待，从而避免了CPU资源的大量占用。

总结，通过仔细分析jvm运行原理、运用系统命令和排查工具，我们可以有效地定位和解决此类问题。面对复杂情况，关键在于深入理解原理并灵活应用工具。