jvm最全详解-05-JVM调优工具详解及调优实战[通俗易懂]

2022-09-02 14:45:00 浏览数 (1)

大家好，又见面了，我是你们的朋友全栈君。

jvm最全详解-05-JVM调优工具详解及调优实战

前置启动程序

事先启动一个web应用程序，用jps查看其进程id，接着用各种jdk自带命令优化应用

Jmap

此命令可以用来查看内存信息，实例个数以及占用内存大小

代码语言：javascript复制
jmap -histo 14660  #查看历史生成的实例
代码语言：javascript复制
jmap -histo:live 14660  #查看当前存活的实例，执行过程中可能会触发一次full gc

打开log.txt，文件内容如下：

  • num：序号
  • instances：实例数量
  • bytes：占用空间大小
  • class name：类名称，[C is a char[]，[S is a short[]，[I is a int[]，[B is a byte[]，[[I is a int[][]

堆信息

堆内存dump

代码语言：javascript复制
jmap -dump:format=b,file=eureka.hprof 14660

也可以设置内存溢出自动导出dump文件(内存很大的时候，可能会导不出来)

  1. -XX: HeapDumpOnOutOfMemoryError
  2. -XX:HeapDumpPath=./ （路径）

示例代码：

代码语言：javascript复制
public class OOMTest {
代码语言：javascript复制
代码语言：javascript复制
   public static List<Object> list = new ArrayList<>();
代码语言：javascript复制
代码语言：javascript复制
   // JVM设置
代码语言：javascript复制
   // -Xms10M -Xmx10M -XX: PrintGCDetails -XX: HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=D:jvm.dump
代码语言：javascript复制
   public static void main(String[] args) {
代码语言：javascript复制
      List<Object> list = new ArrayList<>();
代码语言：javascript复制
      int i = 0;
代码语言：javascript复制
      int j = 0;
代码语言：javascript复制
      while (true) {
代码语言：javascript复制
         list.add(new User(i  , UUID.randomUUID().toString()));
代码语言：javascript复制
         new User(j--, UUID.randomUUID().toString());
代码语言：javascript复制
      }
代码语言：javascript复制
   }
代码语言：javascript复制
}

可以用jvisualvm命令工具导入该dump文件分析

Jstack

用jstack加进程id查找死锁，见如下示例

代码语言：javascript复制
public class DeadLockTest {
代码语言：javascript复制
代码语言：javascript复制
   private static Object lock1 = new Object();
代码语言：javascript复制
   private static Object lock2 = new Object();
代码语言：javascript复制
代码语言：javascript复制
   public static void main(String[] args) {
代码语言：javascript复制
      new Thread(() -> {
代码语言：javascript复制
         synchronized (lock1) {
代码语言：javascript复制
            try {
代码语言：javascript复制
               System.out.println("thread1 begin");
代码语言：javascript复制
               Thread.sleep(5000);
代码语言：javascript复制
            } catch (InterruptedException e) {
代码语言：javascript复制
            }
代码语言：javascript复制
            synchronized (lock2) {
代码语言：javascript复制
               System.out.println("thread1 end");
代码语言：javascript复制
            }
代码语言：javascript复制
         }
代码语言：javascript复制
      }).start();
代码语言：javascript复制
代码语言：javascript复制
      new Thread(() -> {
代码语言：javascript复制
         synchronized (lock2) {
代码语言：javascript复制
            try {
代码语言：javascript复制
               System.out.println("thread2 begin");
代码语言：javascript复制
               Thread.sleep(5000);
代码语言：javascript复制
            } catch (InterruptedException e) {
代码语言：javascript复制
            }
代码语言：javascript复制
            synchronized (lock1) {
代码语言：javascript复制
               System.out.println("thread2 end");
代码语言：javascript复制
            }
代码语言：javascript复制
         }
代码语言：javascript复制
      }).start();
代码语言：javascript复制
代码语言：javascript复制
      System.out.println("main thread end");
代码语言：javascript复制
   }
代码语言：javascript复制
}

“Thread-1” 线程名

prio=5 优先级=5

tid=0x000000001fa9e000 线程id

nid=0x2d64 线程对应的本地线程标识nid

java.lang.Thread.State: BLOCKED 线程状态

还可以用jvisualvm自动检测死锁

远程连接jvisualvm

启动普通的jar程序JMX端口配置：

代码语言：javascript复制
java -Dcom.sun.management.jmxremote.port=8888 -Djava.rmi.server.hostname=192.168.65.60 -Dcom.sun.management.jmxremote.ssl=false -Dcom.sun.management.jmxremote.authenticate=false -jar microservice-eureka-server.jar

PS：

-Dcom.sun.management.jmxremote.port 为远程机器的JMX端口

-Djava.rmi.server.hostname 为远程机器IP

tomcat的JMX配置：在catalina.sh文件里的最后一个JAVA_OPTS的赋值语句下一行增加如下配置行

代码语言：javascript复制
JAVA_OPTS="$JAVA_OPTS -Dcom.sun.management.jmxremote.port=8888 -Djava.rmi.server.hostname=192.168.50.60 -Dcom.sun.management.jmxremote.ssl=false -Dcom.sun.management.jmxremote.authenticate=false"

连接时确认下端口是否通畅，可以临时关闭下防火墙

代码语言：javascript复制
systemctl stop firewalld   #临时关闭防火墙

jstack找出占用cpu最高的线程堆栈信息

代码语言：javascript复制
package com.tuling.jvm;
代码语言：javascript复制
代码语言：javascript复制
/**
代码语言：javascript复制
 * 运行此代码，cpu会飙高
代码语言：javascript复制
 */
代码语言：javascript复制
public class Math {
代码语言：javascript复制
代码语言：javascript复制
    public static final int initData = 666;
代码语言：javascript复制
    public static User user = new User();
代码语言：javascript复制
代码语言：javascript复制
    public int compute() {  //一个方法对应一块栈帧内存区域
代码语言：javascript复制
        int a = 1;
代码语言：javascript复制
        int b = 2;
代码语言：javascript复制
        int c = (a   b) * 10;
代码语言：javascript复制
        return c;
代码语言：javascript复制
    }
代码语言：javascript复制
代码语言：javascript复制
    public static void main(String[] args) {
代码语言：javascript复制
        Math math = new Math();
代码语言：javascript复制
        while (true){
代码语言：javascript复制
            math.compute();
代码语言：javascript复制
        }
代码语言：javascript复制
    }
代码语言：javascript复制
}

1，使用命令top -p <pid> ，显示你的java进程的内存情况，pid是你的java进程号，比如19663

2，按H，获取每个线程的内存情况

3，找到内存和cpu占用最高的线程tid，比如19664

4，转为十六进制得到 0x4cd0，此为线程id的十六进制表示

5，执行 jstack 19663|grep -A 10 4cd0，得到线程堆栈信息中 4cd0 这个线程所在行的后面10行，从堆栈中可以发现导致cpu飙高的调用方法

6，查看对应的堆栈信息找出可能存在问题的代码

Jinfo

查看正在运行的Java应用程序的扩展参数

查看jvm的参数

查看java系统参数

Jstat

jstat命令可以查看堆内存各部分的使用量，以及加载类的数量。命令的格式如下：

jstat [-命令选项] [vmid] [间隔时间(毫秒)] [查询次数]

注意：使用的jdk版本是jdk8

垃圾回收统计

jstat -gc pid 最常用，可以评估程序内存使用及GC压力整体情况

  • S0C：第一个幸存区的大小，单位KB
  • S1C：第二个幸存区的大小
  • S0U：第一个幸存区的使用大小
  • S1U：第二个幸存区的使用大小
  • EC：伊甸园区的大小
  • EU：伊甸园区的使用大小
  • OC：老年代大小
  • OU：老年代使用大小
  • MC：方法区大小(元空间)
  • MU：方法区使用大小
  • CCSC:压缩类空间大小
  • CCSU:压缩类空间使用大小
  • YGC：年轻代垃圾回收次数
  • YGCT：年轻代垃圾回收消耗时间，单位s
  • FGC：老年代垃圾回收次数
  • FGCT：老年代垃圾回收消耗时间，单位s
  • GCT：垃圾回收消耗总时间，单位s

堆内存统计

  • NGCMN：新生代最小容量
  • NGCMX：新生代最大容量
  • NGC：当前新生代容量
  • S0C：第一个幸存区大小
  • S1C：第二个幸存区的大小
  • EC：伊甸园区的大小
  • OGCMN：老年代最小容量
  • OGCMX：老年代最大容量
  • OGC：当前老年代大小
  • OC:当前老年代大小
  • MCMN:最小元数据容量
  • MCMX：最大元数据容量
  • MC：当前元数据空间大小
  • CCSMN：最小压缩类空间大小
  • CCSMX：最大压缩类空间大小
  • CCSC：当前压缩类空间大小
  • YGC：年轻代gc次数
  • FGC：老年代GC次数

新生代垃圾回收统计

  • S0C：第一个幸存区的大小
  • S1C：第二个幸存区的大小
  • S0U：第一个幸存区的使用大小
  • S1U：第二个幸存区的使用大小
  • TT:对象在新生代存活的次数
  • MTT:对象在新生代存活的最大次数
  • DSS:期望的幸存区大小
  • EC：伊甸园区的大小
  • EU：伊甸园区的使用大小
  • YGC：年轻代垃圾回收次数
  • YGCT：年轻代垃圾回收消耗时间

新生代内存统计

  • NGCMN：新生代最小容量
  • NGCMX：新生代最大容量
  • NGC：当前新生代容量
  • S0CMX：最大幸存1区大小
  • S0C：当前幸存1区大小
  • S1CMX：最大幸存2区大小
  • S1C：当前幸存2区大小
  • ECMX：最大伊甸园区大小
  • EC：当前伊甸园区大小
  • YGC：年轻代垃圾回收次数
  • FGC：老年代回收次数

老年代垃圾回收统计

  • MC：方法区大小
  • MU：方法区使用大小
  • CCSC:压缩类空间大小
  • CCSU:压缩类空间使用大小
  • OC：老年代大小
  • OU：老年代使用大小
  • YGC：年轻代垃圾回收次数
  • FGC：老年代垃圾回收次数
  • FGCT：老年代垃圾回收消耗时间
  • GCT：垃圾回收消耗总时间

老年代内存统计

  • OGCMN：老年代最小容量
  • OGCMX：老年代最大容量
  • OGC：当前老年代大小
  • OC：老年代大小
  • YGC：年轻代垃圾回收次数
  • FGC：老年代垃圾回收次数
  • FGCT：老年代垃圾回收消耗时间
  • GCT：垃圾回收消耗总时间

元数据空间统计

  • MCMN:最小元数据容量
  • MCMX：最大元数据容量
  • MC：当前元数据空间大小
  • CCSMN：最小压缩类空间大小
  • CCSMX：最大压缩类空间大小
  • CCSC：当前压缩类空间大小
  • YGC：年轻代垃圾回收次数
  • FGC：老年代垃圾回收次数
  • FGCT：老年代垃圾回收消耗时间
  • GCT：垃圾回收消耗总时间
  • S0：幸存1区当前使用比例
  • S1：幸存2区当前使用比例
  • E：伊甸园区使用比例
  • O：老年代使用比例
  • M：元数据区使用比例
  • CCS：压缩使用比例
  • YGC：年轻代垃圾回收次数
  • FGC：老年代垃圾回收次数
  • FGCT：老年代垃圾回收消耗时间
  • GCT：垃圾回收消耗总时间

JVM运行情况预估

用 jstat gc -pid 命令可以计算出如下一些关键数据，有了这些数据就可以采用之前介绍过的优化思路，先给自己的系统设置一些初始性的JVM参数，比如堆内存大小，年轻代大小，Eden和Survivor的比例，老年代的大小，大对象的阈值，大龄对象进入老年代的阈值等。

年轻代对象增长的速率

可以执行命令 jstat -gc pid 1000 10 (每隔1秒执行1次命令，共执行10次)，通过观察EU(eden区的使用)来估算每秒eden大概新增多少对象，如果系统负载不高，可以把频率1秒换成1分钟，甚至10分钟来观察整体情况。注意，一般系统可能有高峰期和日常期，所以需要在不同的时间分别估算不同情况下对象增长速率。

Young GC的触发频率和每次耗时

知道年轻代对象增长速率我们就能推根据eden区的大小推算出Young GC大概多久触发一次，Young GC的平均耗时可以通过 YGCT/YGC 公式算出，根据结果我们大概就能知道系统大概多久会因为Young GC的执行而卡顿多久。

每次Young GC后有多少对象存活和进入老年代

这个因为之前已经大概知道Young GC的频率，假设是每5分钟一次，那么可以执行命令 jstat -gc pid 300000 10 ，观察每次结果eden，survivor和老年代使用的变化情况，在每次gc后eden区使用一般会大幅减少，survivor和老年代都有可能增长，这些增长的对象就是每次Young GC后存活的对象，同时还可以看出每次Young GC后进去老年代大概多少对象，从而可以推算出老年代对象增长速率。

Full GC的触发频率和每次耗时

知道了老年代对象的增长速率就可以推算出Full GC的触发频率了，Full GC的每次耗时可以用公式 FGCT/FGC 计算得出。

优化思路其实简单来说就是尽量让每次Young GC后的存活对象小于Survivor区域的50%，都留存在年轻代里。尽量别让对象进入老年代。尽量减少Full GC的频率，避免频繁Full GC对JVM性能的影响。

系统频繁Full GC导致系统卡顿是怎么回事

  • 机器配置：2核4G
  • JVM内存大小：2G
  • 系统运行时间：7天
  • 期间发生的Full GC次数和耗时：500多次，200多秒
  • 期间发生的Young GC次数和耗时：1万多次，500多秒

大致算下来每天会发生70多次Full GC，平均每小时3次，每次Full GC在400毫秒左右；

每天会发生1000多次Young GC，每分钟会发生1次，每次Young GC在50毫秒左右。

JVM参数设置如下：

代码语言：javascript复制
-Xms1536M -Xmx1536M -Xmn512M -Xss256K -XX:SurvivorRatio=6  -XX:MetaspaceSize=256M -XX:MaxMetaspaceSize=256M
代码语言：javascript复制
-XX: UseParNewGC  -XX: UseConcMarkSweepGC  -XX:CMSInitiatingOccupancyFraction=75 -XX: UseCMSInitiatingOccupancyOnly

大家可以结合对象挪动到老年代那些规则推理下我们这个程序可能存在的一些问题

经过分析感觉可能会由于对象动态年龄判断机制导致full gc较为频繁

为了给大家看效果，我模拟了一个示例程序(见课程对应工程代码：jvm-full-gc)，打印了jstat的结果如下：

代码语言：javascript复制
jstat -gc 13456 2000 10000

对于对象动态年龄判断机制导致的full gc较为频繁可以先试着优化下JVM参数，把年轻代适当调大点：

代码语言：javascript复制
-Xms1536M -Xmx1536M -Xmn1024M -Xss256K -XX:SurvivorRatio=6  -XX:MetaspaceSize=256M -XX:MaxMetaspaceSize=256M
代码语言：javascript复制
-XX: UseParNewGC  -XX: UseConcMarkSweepGC  -XX:CMSInitiatingOccupancyFraction=92 -XX: UseCMSInitiatingOccupancyOnly

优化完发现没什么变化，full gc的次数比minor gc的次数还多了

我们可以推测下full gc比minor gc还多的原因有哪些？

1、元空间不够导致的多余full gc

2、显示调用System.gc()造成多余的full gc，这种一般线上尽量通过-XX: DisableExplicitGC参数禁用，如果加上了这个JVM启动参数，那么代码中调用System.gc()没有任何效果

3、老年代空间分配担保机制

最快速度分析完这些我们推测的原因以及优化后，我们发现young gc和full gc依然很频繁了，而且看到有大量的对象频繁的被挪动到老年代，这种情况我们可以借助jmap命令大概看下是什么对象

查到了有大量User对象产生，这个可能是问题所在，但不确定，还必须找到对应的代码确认，如何去找对应的代码了？

1、代码里全文搜索生成User对象的地方(适合只有少数几处地方的情况)

2、如果生成User对象的地方太多，无法定位具体代码，我们可以同时分析下占用cpu较高的线程，一般有大量对象不断产生，对应的方法代码肯定会被频繁调用，占用的cpu必然较高

可以用上面讲过的jstack或jvisualvm来定位cpu使用较高的代码，最终定位到的代码如下：

代码语言：javascript复制
import java.util.ArrayList;
代码语言：javascript复制
代码语言：javascript复制
@RestController
代码语言：javascript复制
public class IndexController {
代码语言：javascript复制
代码语言：javascript复制
    @RequestMapping("/user/process")
代码语言：javascript复制
    public String processUserData() throws InterruptedException {
代码语言：javascript复制
        ArrayList<User> users = queryUsers();
代码语言：javascript复制
代码语言：javascript复制
        for (User user: users) {
代码语言：javascript复制
            //TODO 业务处理
代码语言：javascript复制
            System.out.println("user:"   user.toString());
代码语言：javascript复制
        }
代码语言：javascript复制
        return "end";
代码语言：javascript复制
    }
代码语言：javascript复制
代码语言：javascript复制
    /**
代码语言：javascript复制
     * 模拟批量查询用户场景
代码语言：javascript复制
     * @return
代码语言：javascript复制
     */
代码语言：javascript复制
    private ArrayList<User> queryUsers() {
代码语言：javascript复制
        ArrayList<User> users = new ArrayList<>();
代码语言：javascript复制
        for (int i = 0; i < 5000; i  ) {
代码语言：javascript复制
            users.add(new User(i,"zhuge"));
代码语言：javascript复制
        }
代码语言：javascript复制
        return users;
代码语言：javascript复制
    }
代码语言：javascript复制
}

同时，java的代码也是需要优化的，一次查询出500M的对象出来，明显不合适，要根据之前说的各种原则尽量优化到合适的值，尽量消除这种朝生夕死的对象导致的full gc

内存泄露到底是怎么回事

再给大家讲一种情况，一般电商架构可能会使用多级缓存架构，就是redis加上JVM级缓存，大多数同学可能为了图方便对于JVM级缓存就简单使用一个hashmap，于是不断往里面放缓存数据，但是很少考虑这个map的容量问题，结果这个缓存map越来越大，一直占用着老年代的很多空间，时间长了就会导致full gc非常频繁，这就是一种内存泄漏，对于一些老旧数据没有及时清理导致一直占用着宝贵的内存资源，时间长了除了导致full gc，还有可能导致OOM。

这种情况完全可以考虑采用一些成熟的JVM级缓存框架来解决，比如ehcache等自带一些LRU数据淘汰算法的框架来作为JVM级的缓存。

发布者：全栈程序员栈长，转载请注明出处：https://javaforall.cn/138476.html原文链接：https://javaforall.cn

jvm java 文件存储

0 人点赞