[JVM教程与调优] 了解JVM 堆内存溢出以及非堆内存溢出

![[JVM教程与调优] 了解JVM 堆内存溢出以及非堆内存溢出.png](https://upload-images.jianshu.io/upload_images/7326374-3eb8e88d3cf4a5a6.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240) 在上一章中我们介绍了JVM运行时参数以及jstat指令相关内容：[[JVM教程与调优] 什么是JVM运行时参数？](https://mp.weixin.qq.com/s?__biz=MzIwMTg3NzYyOA==&mid=2247484251&idx=1&sn=e174ffdc8730676ca729386d4f35757d&chksm=96e67248a191fb5e663339d8aadf8daa312ff06a6c473007b24ff456734247d3740ea56186a2&token=1619516654&lang=zh_CN#rd)。下面我们来介绍一下jmap+MAT内存溢出。 首先我们来介绍一下下JVM的内存结构。 ## JVM内存结构介绍  从图中我们可以看到，`JVM`的内存结构分为两大块。一块叫**堆区**，一块叫**非堆区**。 堆区又分为两大块，一块**Young**，一块叫**Old**。**Young**区又分为**Survivor**区和**Eden**区。**Survivor**区我们又分为S0与S1。可以结合下图进行理解  非堆区呢，是属于我们操作系统的本地内存。它是独立于我们堆区之外的。它在**JDK1.8**里面有一个新的名字，叫`Metaspace`。`Metaspace`里面还包含几个块，其中有一块就是`CCS`,还有一块是`CodeCache`。当然，在我们的Metaspace中还包含很多其他块，这里就不做扩展了。 接下来，我们来通过实战，来更加深入的理解`JVM`结构，以及出现JVM内存溢出的原因。 ## 实战理解 我们通过spring.start快速来生成一个springboot项目。  如图，我们快速的创建一个springboot项目，并将其下载下来。 这里我使用Eclipse，小伙伴们也可以使用IDEA或者其他开发工具也是可以的。 这里我们使用的是SpringBoot工程，如果有的小伙伴对SpringBoot还不太熟悉的，可以上网找一些教程先学习了解一下。 ## 堆内存溢出演示 那么我们如何来构建一个堆内存溢出呢？其实很简单，我们只要定义一个`List`对象，然后通过一个循环不停的往`List`里面塞对象。因为只要Controller不被回收，那么它里面的成员变量也是不会被回收的。这样就会导致List里面的对象越来越多，占用的内存越来越大，最后就把我们的内存撑爆了。 ### 创建User对象 这里我们先创建一个User对象。 ```java /** * 　 *

Title: User

　 *

Description:

　 * @author Coder编程 　 * @date 2020年3月29日 */ @Data @AllArgsConstructor @NoArgsConstructor public class User { private int id; private String name; } ``` 这里面`@Data`、`@AllArgsConstructor`、`@NoArgsConstructor`用的是lombok注解。不会使用的小伙伴，可以在网上查找相关资料学习一下。 ### 创建Controller对象 接下来我们来创建一个Controller来不停的往List集合中塞对象。 ``` /** * 　 *

Title: MemoryController

　 *

Description:

　 * @author Coder编程 　 * @date 2020年3月29日 */ @RestController public class MemoryController { private List userList = new ArrayList(); /** * -Xmx32M -Xms32M * */ @GetMapping("/heap") public String heap() { int i=0; while(true) { userList.add(new User(i++, UUID.randomUUID().toString())); } } } ``` 为了更快达到我们的效果，我们来设置两个参数。 ``` -Xmx32M -Xms32M ``` 一个最大内存，一个最小内存。我们的堆就只有32M，这样就很容易溢出。 ### 访问测试 启动时候设置内存参数。   记得选中我们的`Arguments`，在`JVM` 参数中，将我们的值设置进去。最后点击`Run`运行起来。 然后我们在浏览器中请求： http://localhost:8080/heap 我们再观察控制台打印：  通过打印结果，我们可以看到堆内存溢出了。 >注意： 这里我们测试的时候可以很简单的看出在哪里出现的问题，但是在实际生产环境中并没有那么简单，因此我们需要借助工具，来定位这些问题。后续我们来介绍一下。 ## 非堆内存溢出演示 接下来我们来演示一下非堆内存溢出，我们继续沿用上方代码。 非堆内存主要是MataSpace，那么我们如何构建一个非堆内存溢出呢？ 我们知道MataSpace主要存一些class，filed，method等这些东西。 因此我们继续创建一个List集合，不断的往集合里面塞class。只要List不被回收，那么它里面的class也不会被回收。不停的往里面加之后，就会造成溢出。也就是我们的MataSpace溢出了。 如何来动态生成一些class呢？其实是有很多工具的，比如说：asm ### 引入asm工具包 这里我们引入**asm** jar包。 ```xml asm asm 3.3.1 ``` ### 动态生成类文件 还需要创建动态生成的类文件，这里我们就不做扩展介绍，有兴趣的小伙伴可以自行到网上查阅。 ```java /** * 　 *

Title: Metaspace

　 *

Description: https://blog.csdn.net/bolg_hero/articlehttps://img.qb5200.com/download-x/details/78189621 　 * 继承ClassLoader是为了方便调用defineClass方法，因为该方法的定义为protected

　 * @author Coder编程 　 * @date 2020年3月29日 */ public class Metaspace extends ClassLoader { public static List> createClasses() { // 类持有 List> classes = new ArrayList>(); // 循环1000w次生成1000w个不同的类。 for (int i = 0; i < 10000000; ++i) { ClassWriter cw = new ClassWriter(0); // 定义一个类名称为Class{i}，它的访问域为public，父类为java.lang.Object，不实现任何接口 cw.visit(Opcodes.V1_1, Opcodes.ACC_PUBLIC, "Class" + i, null, "java/lang/Object", null); // 定义构造函数方法 MethodVisitor mw = cw.visitMethod(Opcodes.ACC_PUBLIC, "", "()V", null, null); // 第一个指令为加载this mw.visitVarInsn(Opcodes.ALOAD, 0); // 第二个指令为调用父类Object的构造函数 mw.visitMethodInsn(Opcodes.INVOKESPECIAL, "java/lang/Object", "", "()V"); // 第三条指令为return mw.visitInsn(Opcodes.RETURN); mw.visitMaxs(1, 1); mw.visitEnd(); Metaspace test = new Metaspace(); byte[] code = cw.toByteArray(); // 定义类 Class<?> exampleClass = test.defineClass("Class" + i, code, 0, code.length); classes.add(exampleClass); } return classes; } } ``` ### 创建Controller 接下来我们再原`Controller`新增一个方法nonheap ``` /** * 　 *

Title: MemoryController

　 *

Description:

　 * @author Coder编程 　 * @date 2020年3月29日 */ @RestController public class MemoryController { private List userList = new ArrayList(); private List> classList = new ArrayList>(); /** * -Xmx32M -Xms32M * */ @GetMapping("/heap") public String heap() { int i=0; while(true) { userList.add(new User(i++, UUID.randomUUID().toString())); } } /** * -XX:MetaspaceSize=32M -XX:MaxMetaspaceSize=32M * */ @GetMapping("/nonheap") public String nonheap() { while(true) { classList.addAll(Metaspace.createClasses()); } } } ``` ### 访问测试 这里我们同样在启动的时候也要设置Mataspace的值大小。 ``` -XX:MetaspaceSize=32M -XX:MaxMetaspaceSize=32M ```  接着我们在浏览器中访问地址：localhost:8080/nonheap 以上我们就完成了对**堆内存溢出**以及**非堆内存溢出**的演示。 #### 小插曲 在测试非堆内存溢出的时候，出现了另外一个错误。 java.lang.IncompatibleClassChangeError: Found interface org.objectweb.asm.MethodVisitor, but class was expected 这个异常另外写在[java.lang.IncompatibleClassChangeError](https://www.jianshu.com/p/a2bf3b5f01a5)，小伙伴如果有遇到，可尝试一下是否能够解决 ## 如何查看线上堆内存溢出以及非堆内存溢出 我们主要查看线上的内存映像文件来查看到底是哪里发生了内存溢出。 发生内存溢出的主要原因： 1.内存发生泄漏 2.内存分配不足 假如发生内存泄漏的话，我们就需要找到是哪个地方发生了内存泄漏，一直占用内存没有释放。 下面我们来看一下如何来导出我们的内存映像文件。 主要有两种方式。 1.内存溢出自动导出 -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=./ 第一个参数表示：当发生内存溢出的时候，将内存溢出文件Dump出来。 第二个参数表示：Dump出来的文件存放的目录。 2.使用jmap命令手动导出 如果我们使用第一种命令，在发送内存溢出的时候再去导出，可能就有点晚了。我们可以等程序运行起来一段时间后，就可以使用jmap命令导出来进行分析。 ### 演示内存溢出自动导出 我们需要用到两个命令参数。 ``` -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=./ ```  我们接着运行项目，访问：localhost:8080/heap 查看一下打印结果。  可以看到，当发生了内存溢出后。输出了一个java_pid3972.hprof的文件。 在当前项目的当前文件中，我们就可以找到该文件。 ### 演示jmap命令 option:-heap,-clstats,-dump:,-F   参数都是什么意思呢？ live:只导出存活的对象，如果没有指定，则全部导出 format:导出文件的格式 file:导入的文件 我们刚才的程序还没有关闭，我们来看下程序的pid是多少。 输入：jps -l  我们将其文件导入到桌面中来，输入命令 ``` jmap -dump:format=b,file=heap.hprof 3972 ``` 最后的3972是程序的pid。最后可以看到导出完毕。  还有其他的命令参数，小伙伴们可以去官网[jmap指令](https:/https://img.qb5200.com/download-x/docs.oracle.com/javase/8https://img.qb5200.com/download-x/docs/technotes/tools/unix/jmap.html#CEGCECJB)查看如何使用。这里就不做过多介绍。 下一章节我们将通过命令实战定位JVM发生死循环、死锁问题。 ## 推荐 - [[JVM教程与调优] 什么是JVM运行时参数？](https://mp.weixin.qq.com/s?__biz=MzIwMTg3NzYyOA==&mid=2247484251&idx=1&sn=e174ffdc8730676ca729386d4f35757d&chksm=96e67248a191fb5e663339d8aadf8daa312ff06a6c473007b24ff456734247d3740ea56186a2&token=1619516654&lang=zh_CN#rd) - [[JVM教程与调优] 为什么要学习JVM虚拟机？](https://mp.weixin.qq.com/s?__biz=MzIwMTg3NzYyOA==&mid=2247484247&idx=1&sn=e41732e54d5b57534d312dc9f15f47f0&chksm=96e67244a191fb5287c35c278cff4810939bd70a76cd4190fe7636d06b3ccb07f6aca974ed62&token=89408735&lang=zh_CN#rd) - [[JVM教程与调优] JVM都有哪些参数类型？](https://mp.weixin.qq.com/s?__biz=MzIwMTg3NzYyOA==&mid=2247484247&idx=2&sn=a1f732611bab89f0db84d3ab162e8763&chksm=96e67244a191fb52a4d6b292112cc94c412d3c90a688bc6da533dec8cfe9cfa693af65b16dd5&token=89408735&lang=zh_CN#rd) ## 文末 文章收录至 Github: [https://github.com/CoderMerlin/coder-programming](https://links.jianshu.com/go?to=https%3A%2F%2Fgithub.com%2FCoderMerlin%2Fcoder-programming) Gitee: [https://gitee.com/573059382/coder-programming](https://links.jianshu.com/go?to=https%3A%2F%2Fgitee.com%2F573059382%2Fcoder-programming) 欢迎**关注**并star~