内存溢出

原文： http://blog.51cto.com/13580976/2148192

elasticsearch内存溢出. 错误日志 [2018-06-29T08:40:07,221][ERROR][o.e.b.ElasticsearchUncaughtExceptionHandler] [node02] fatal error in thread [elasticsearch[node02][bulk][T#2]], exiting java.lang.OutOfMemoryError: Java heap space [2018-06-29T08:40:32,504][ERROR][o.e.t.n.Netty4Utils ] fatal error on the network layer at org.elasticsearch.transport.netty4.Netty4Utils.maybeDie(Netty4Utils.java:140) at org.elasticsearch.transport.netty4.Netty4MessageChannelHandler.exceptionCaught(Netty4MessageChannelHandler.java:83) at io.netty.channel.AbstractChannelHandlerContext.invokeExceptionCaught

JVM 自动内存管理机制包括内存动态分配和垃圾自动收集两部分，可能出现的内存异常包括 内存泄漏 和 内存溢出 两种。 内存泄漏 ：已申请的内存空间无法被主动释放或及时回收，导致可用内存越来越少，最终造成内存溢出。 内存溢出 ：空闲内存不足，无法分配新内存给程序，产生原因包括内存短缺（硬件、系统和虚拟机层面的内存限制）、内存需求过大（深度递归、大规模数据库读取）、内存泄漏等。 硬件级内存限制：物理内存与交换区空间总和。 系统级内存限制：处理器/操作系统位数限制内存寻址空间，32位操作系统寻址空间为2GB。 虚拟机级内存限制： -Xms 、 -Xmx 等参数设置 JVM 各内存区域大小。 内存区域 属性 数据结构 存储内容 抛出异常类型 垃圾收集 程序计数器 线程私有 无 正在执行的字节码行号 无（唯一无异常抛出） 无 Java 虚拟机栈 线程私有 ջ Java 方法栈帧 StackOverflowError / OutOfMemoryError 无 本地方法栈 线程私有 ջ Native 方法栈帧 StackOverflowError / OutOfMemoryError 无 Java 堆 线程共享 堆 对象实例 / 数组 OutOfMemoryError 有 方法区 线程共享 堆 类信息 / 常量 / 静态变量/ 即时编译代码 OutOfMemoryError 有 Java

1.在 apache-tomcat-7.0.70\bin\catalina.bat （Linux 系统则在catalina.sh） 文件下的 echo Using CATALINA_BASE: "%CATALINA_BASE%" 上面插入以下代码 1 set JAVA_OPTS=%JAVA_OPTS% -server -XX:PermSize=256M -XX:MaxPermSize=512m 2.在eclispe 中的 window-->Preferences-->java-->Installed JRES-->Edit-->Defalut VM arguments 下添加： -Xms64m -Xmx256m 3.在eclispe 下的 run-->Debug Configurations--> Apache Tomcat-->Arguments 添加： -XX:PermSize=128m -XX:MaxPermSize=256m 4.在eclispe 下的 Run-->Debug Configurations 如图所示 添加： Xms256m -Xmx512m -XX:MaxNewSize=256m -XX:MaxPermSize=256m 来源： https://www.cnblogs.com/xfbb/p/11768820.html

问题说明： 公司内网环境中部署的jenkins代码发版平台突然不能访问了，查看tomcat的catalina.out日志发现报错如下： ? 1 2 3 4 5 6 [root@redmine logs] # tail -f /srv/apache-tomcat-7.0.67/logs/catalina.out ...... Exception in thread "http-bio-8080-exec-5" java.lang.OutOfMemoryError: PermGen space Exception in thread "http-bio-8080-exec-5" java.lang.OutOfMemoryError: PermGen space Exception in thread "http-bio-8080-exec-5" java.lang.OutOfMemoryError: PermGen space ...... 上面报错是由于tomcat内存溢出引起的： ? 1 2 3 [root@redmine logs] # ps -ef|grep tomcat /usr/java/jdk1 .7.0_79 /bin/java -Djava.util.logging.config. file = /srv/apache-tomcat-7 .0.67 /conf

本系列随笔是我在学习周志明的《深入理解JAVA虚拟机》一书时的内容整理。 　　不知不觉又有一个月没写随笔了，这段时间课程的实验和作业比较多，自己学习的时间比较少。而在老早之前我就知道关于JVM是必须要知道的，而本书又是各位前辈推荐的书，现在终于开始要跳出java基础(虽然并不觉得自己的实力够跳出来)，接触一下底层虚拟机的技术了。 　　本次的内容整理从第二部分：自动内存管理机制的第二章：Java内存区域与内存溢出异常讲起。而由于自己的水平原因，我也会在之后的时间里对随笔进行增添和修改，希望自己有所收获！这一章讲的是JVM的基本组成和内存溢出异常。总的来说是这样的，我们都知道一个java源程序需要先经过编译生成.class文件，class字节码文件再由JVM运行(半编译)。而虚拟机技术并不只是java有，java中的虚拟机也并不是只有一种，sun公司(正统的)的虚拟机JVM就是hotspot，关于它的实现是C语言，可以在网上下到源代码。Java虚拟机会将所管理的内存分为以下几个运行时数据区域：线程共享的方法区和堆区，线程隔离的虚拟机栈、本地方法栈和程序计数器。 　　这里还要讲到一个概念：native方法。native方法指的是java调用非java代码的接口，而native方法的计数器值为空。虚拟机栈区即存放基本数据类型的地方，这个区域规定了栈溢出和内存溢出异常

过程描述 ： 开始时服务器一直老是自己就突然挂掉了，几次之后我查看日志，发现一个错误异常：This is very likely to create a memory leak. Stack trace of thread ，我就以为只是单纯的内存溢出，内存不够引起的，然后按照线面的方法加大内存，可是后面又出现了这个问题，只不过出现的频率降低了，以前是1天一次，现在是3天左右一次。 第一次分析： 问题1 ：This is very likely to create a memory leak. Stack trace of thread 说明 ： tomcat内存溢出 ，内存分配过小，jvm默认的内存分配时128m，这个肯定不满足项目的运行。 解决方案 在catalina或者 setclasspathd的文件顶部设置内存大小 JAVA_OPTS="-server -Xms6144m -Xmx6144m -XX:PermSize=1024m -XX:MaxPermSize=1024m" 第二次分析： 按以上方案解决之后，可是过一段时间又出现这个问题了，然后再进一步分许日志 发现有很多类似一下的错误 11-Sep-2019 10:41:46.687 WARNING [Catalina-utility-1] org.apache.catalina.loader

内存溢出 内存溢出的原因：程序在申请内存时，没有足够的内存空间 栈溢出 StackOverflowError OutOfMemoryError 堆溢出 OutOfMemoryError 直接内存 JVM 方法区溢出 Class CGLIb JSP(JSP Java ), OSGi ( ) 内存泄漏 程序在申请内存后，无法释放已申请的内存空间。 ArrayList IO 1. 2. null Java 解决方法：( ) Hash 在集合中，如果修改了对象中的那些参与计算哈希值的字段，会导致无法从集合中单独删除当前对象，造成内存泄露 相同与不同： ：； 内存泄漏：该释放的对象没有释放，多见于自己使用容器保存元素的情况下。 如何避免： 内存溢出：检查代码以及设置足够的空间 内存泄漏：一定是代码有问题 往往很多情况下，内存溢出往往是内存泄漏造成的。 MAT 浅堆和深堆 : Shallow Heap 32 4 int 4 long 8 8 GC 直接 或 间接 访问到的所有对象的集合。通俗地说，就是指仅被对象所持有的对象的集合。深堆是指对象的保留集中所有的对象的浅堆大小之和。 A C D B E A A A C D ( ) A A+C+D E B A incoming outgoing JDK 命令行工具 jps JPS 进程 -m: . hello -l: package jar . -v

内存溢出是指程序在申请内存的时候，没有足够的内存可以分配，导致内存溢出。俗称，内存不够了。 内存泄漏：内存在生命周期完成后，如果得不到及时的释放，就会一直占用内存，造成内存泄漏。随着内存泄漏的堆积，可用的内存空间越来越少，最后会导致内存溢出。

问题的现象： 因为个人对tomcat不熟悉，所以网上找了下tomcat假死的原因，大致有如下几种： 与tomcat连接未关闭/长连接数超过最大连接数 Load过高，超出服务器极限 应用程序出现死锁 JVM GC时间过长，导致应用暂停/JVM内存溢出 按顺序一个一个来排查： top一下， load average不高，说明不是服务器负载太高了 看下是否是死锁的问题 然后使用vim找了下“DEADLOCK”,没有找到，应该是没有出现死锁(最好dump多次，才能更好的定位问题) 使用visualvm查看下tomcat进程的堆栈情况。(怎么使用visualvm看我之前写的那篇文章-“使用visualvm远程监控Java程序”)，发现堆内存占用很大。一段时间后，日志里面也报了错误： 下面的图是我在出现内存溢出后截的: 那么接下来就是分析是哪里导致内存溢出了： 先把heap信息导出来： 使用mat工具分析：(mat网上随便下吧，我想传上去骗点分，老是显示资源已经有了…) ./ParseHeapDump.sh ../tomcat.bin org.eclipse.mat.api:suspects org.eclipse.mat.api:overview org.eclipse.mat.api:top_components 会出来这么三个文件，里面都是html网页，记录了堆信息。