项目CPU占用过高分析

线上系统突然运行缓慢,如果导致系统不可用,首先导出jsatck和内存信息,重启系统,尽快保证系统的可用性。

1、出现问题的原因

  一种是由计算导致的CPU使用过高,一种是由内存不足垃圾回收导致的CPU使用过高。

  1. 频繁发生FULL GC

  2. 线程太多,上下文不停切换,比如大量线程激烈的锁竞争,线程不停阻塞恢复阻塞。或者产生死锁

  3. 项目出现死循环,比如hashmap并发场景下的死循环

2、排查步骤如下

  1. 执行 top 命令,在linux系统上显示系统各个进程的资源占用状态,找到占用率很高的进程ID 1024

  2. 执行 top -p 1024 -H 命令,查看当前进程下的所有线程信息,找到占用率很高的线程ID 2048,将ID转换成16进制得到800

  3. 执行 jdstack 1024> thread_stack.log 将进程的堆栈信息写入到文件中

  4. 在thread_stack.log根据找到800对应的堆栈信息,根据堆栈信息定位到代码位置

  5. 如果线程为GC线程(VM Thread),使用 jmap -histo> jmap.log 输出java堆中对象的统计信息,可能不停创建大对象,导致频繁GC导致CPU占用很高。或者使用jmap导出dump日志,使用mat工具查看,如果内存使用率不高,但FULL GC频繁,可能是手动调用System.gc()导致的。

3、特殊情况

  1. 不定期出现的接口耗时现象

  接口偶尔会出现响应很慢的情况,思路是通过压测工具不断加大访问力度,那么大多数线程最终会阻塞在问题点,通过这些线程的堆栈信息,找到对应位置

  2. 死锁

  jsatck会自动检测出死锁

4. 小结

  1. 高CPU占用排查步骤

  1. TOP命令找到CPU使用率最高的进程和其线程信息,将线程id转化成16进制
  2. jsatck 进程 打印进程的堆栈信息,根据线程id找到问题线程和它的堆栈信息,分析处理

  2. 高内存占用排查步骤

  1. TOP命令找到占用内存最高的进程
  2. jmap -histo 进程ID 输出进程内对象统计信息,找出问题对象,代码中定位到对象创建位置
  3. 或者jmap导出dump日志,使用mat工具查看

  3. 堆外内存泄漏排查

  使用gdb、strace等工具    

 

 

 

 

参考:

1. https://blog.csdn.net/xinqing5130/article/details/115330920

2. https://blog.csdn.net/qq_34944965/article/details/81107419?utm_medium=distribute.pc_relevant_t0.none-task-blog-2%7Edefault%7EBlogCommendFromMachineLearnPai2%7Edefault-1.control&dist_request_id=1619598633876_23403&depth_1-utm_source=distribute.pc_relevant_t0.none-task-blog-2%7Edefault%7EBlogCommendFromMachineLearnPai2%7Edefault-1.control

3. https://www.cnblogs.com/youxin/p/11229071.html

4. https://blog.csdn.net/wjavadog/article/details/103057408

5. 程序死循环、死锁问题定位

6. 系统运行缓慢,CPU 100%,以及Full GC次数过多问题的排查思路

7. 线上Java 高CPU占用、高内存占用排查思路

posted @ 2021-04-28 17:15  walker993  阅读(679)  评论(0编辑  收藏  举报