george

  BlogJava :: 首页 :: 联系 :: 聚合  :: 管理
  12 Posts :: 0 Stories :: 17 Comments :: 0 Trackbacks
在生产环境中tomcat内存设置不好很容易出现内存溢出。造成内存原因是不一样的,当然处理方式也不一样。
这里根据平时遇到的情况和相关资料进行一个总结。常见的一般会有下面三种情况:
        1.OutOfMemoryError: Java heap space
        2.OutOfMemoryError: PermGen space
        3.OutOfMemoryError: unable to create new native thread.
对于前两种情况,在应用本身没有内存泄露的情况下可以用设置tomcat jvm参数来解决。(-Xms -Xmx -XX:PermSize  -XX:MaxPermSize)
最后一种可能需要调整操作系统和tomcat jvm参数同时调整才能达到目的。

第一种:是堆溢出。
        在JVM中如果98%的时间是用于GC且可用的 Heap size 不足2%的时候将抛出此异常信息。
        没有内存泄露的情况下,调整-Xms -Xmx参数可以解决。
        -Xms:初始堆大小 
        -Xmx:最大堆大小 
        但堆的大小受下面三方面影响:
        1.相关操作系统的数据模型(32-bt还是64-bit)限制;(32位系统下,一般限制在1.5G~2G;我在2003 server 系统下(物理内存:4G和6G,jdk:1.6)测试 1612M,64为操作系统对内存无限制。)
        2.系统的可用虚拟内存限制;
        3.系统的可用物理内存限制。
        堆的大小可以使用 java -Xmx***M  version 命令来测试。支持的话会出现jdk的版本号,不支持会报错。
         -Xms -Xmx一般配置成一样比较好比如set JAVA_OPTS= -Xms1024m -Xmx1024m

第二种:永久保存区域溢出
        PermGen space的全称是Permanent Generation space,是指内存的永久保存区域。这一部分用于存放Class和Meta的信息,Class在被 Load的时候被放入PermGen space区域,它和和存放Instance的Heap区域不同,GC(Garbage Collection)不会在主程序运行期对PermGen space进行清理,所以如果你的APP会LOAD很多CLASS的话,就很可能出现PermGen space错误。这种错误常见在web服务器对JSP进行pre compile的时候。但目前的hibernate和spring项目中也很容易出现这样的问题。http://www.javaeye.com/topic/80620?page=1 的帖子有讨论的这个问题。可能是由于这些框架会动态class,而且jvm的gc是不会清理PemGen space的,导致内存溢出。
        这一个一般是加大-XX:PermSize  -XX:MaxPermSize 来解决问题。
        -XX:PermSize 永久保存区域初始大小
        -XX:PermSize 永久保存区域初始最大值
        这一般结合第一条使用,比如 set JAVA_OPTS= -Xms1024m -Xmx1024m  -XX:PermSize=128M -XX:PermSize=256M
        有一点需要注意:java -Xmx***M  version 命令来测试的最大堆内存是 -Xmx与 -XX:PermSize的 和 比如系统支持最大的jvm堆大小事1.5G,那  -Xmx1024m  -XX:PermSize=768M 是无法运行的。
        
第三种:无法创建新的线程。
        这种现象比较少见,也比较奇怪,主要是和jvm与系统内存的比例有关。
        这种怪事是因为JVM已经被系统分配了大量的内存(比如1.5G),并且它至少要占用可用内存的一半。有人发现,在线程个数很多的情况下,你分配给JVM的内存越多,那么,上述错误发生的可能性就越大。
        
        产生这种现象的原因如下(从这个blog中了解到原因:http://hi.baidu.com/hexiong/blog/item/16dc9e518fb10c2542a75b3c.html):

        每一个32位的进程最多可以使用2G的可用内存,因为另外2G被操作系统保留。这里假设使用1.5G给JVM,那么还余下500M可用内存。这500M内存中的一部分必须用于系统dll的加载,那么真正剩下的也许只有400M,现在关键的地方出现了:当你使用Java创建一个线程,在JVM的内存里也会创建一个Thread对象,但是同时也会在操作系统里创建一个真正的物理线程(参考JVM规范),操作系统会在余下的400兆内存里创建这个物理线程,而不是在JVM的1500M的内存堆里创建。在jdk1.4里头,默认的栈大小是256KB,但是在jdk1.5里头,默认的栈大小为1M每线程,因此,在余下400M的可用内存里边我们最多也只能创建400个可用线程。

        这样结论就出来了,要想创建更多的线程,你必须减少分配给JVM的最大内存。还有一种做法是让JVM宿主在你的JNI代码里边。

给出一个有关能够创建线程的最大个数的估算公式:

        (MaxProcessMemory - JVMMemory - ReservedOsMemory) / (ThreadStackSize) = Number of threads

        对于jdk1.5而言,假设操作系统保留120M内存:
        1.5GB JVM: (2GB-1.5Gb-120MB)/(1MB) = ~380 threads
        1.0GB JVM: (2GB-1.0Gb-120MB)/(1MB) = ~880 threads
        在2000/XP/2003的boot.ini里头有一个启动选项,好像是:/PAE /3G ,可以让用户进程最大内存扩充至3G,这时操作系统只能占用最多1G的虚存。那样应该可以让JVM创建更多的线程。
        因此这种情况需要结合操作系统进行相关调整。

因此:我们需要结合不同情况对tomcat内存分配进行不同的诊断才能从根本上解决问题。

参考资料(从这些资料中受益良多):
http://www.javaeye.com/topic/80620?page=1
http://ggmm.blog.sohu.com/117545379.html
http://hi.baidu.com/hexiong/blog/item/16dc9e518fb10c2542a75b3c.html
http://www.wujianrong.com/archives/2006/12/javalangoutofmemoryerror_permg.html


posted on 2009-08-18 00:28 georgeliu 阅读(14109) 评论(13)  编辑  收藏 所属分类: java

Feedback

# re: tomcat内存溢出总结 2009-08-18 09:44 agraviton
楼主好文,受益不少,尤其是第三条,以前从没关注过。  回复  更多评论
  

# re: tomcat内存溢出总结 2009-08-18 09:50 戴尔笔记本
不错 好东西  回复  更多评论
  

# re: tomcat内存溢出总结[未登录] 2009-08-18 10:01 cerulean
好文,前两种问题都遇到过  回复  更多评论
  

# re: tomcat内存溢出总结[未登录] 2009-08-18 16:43 八卦狼
不错,好东西,不过我只是遇过第一种情况  回复  更多评论
  

# re: tomcat内存溢出总结 2009-08-18 17:06 海边沫沫
不错,受益匪浅  回复  更多评论
  

# re: tomcat内存溢出总结 2009-08-18 18:56 ruchal
总结的很好,对以后处理错误有清晰的认识了  回复  更多评论
  

# re: tomcat内存溢出总结 2009-08-18 19:32 BeanSoft
博主好人!  回复  更多评论
  

# re: tomcat内存溢出总结 2009-08-20 09:49 Diablo.Wu
对于ibm的jvm没有第二种情况,而且oom的发生也可能是内存碎片(jdk1.4)造成的。  回复  更多评论
  

# re: tomcat内存溢出总结[未登录] 2009-08-20 12:09 george
@Diablo.Wu
恩,是的,个人认为PermGen space的设计,也是sun jdk一个缺陷,没有预见到动态class有如此广泛的应用。
  回复  更多评论
  

# re: tomcat内存溢出总结 2009-08-20 14:45 menlong999
mx和ms不要设置成一样,最好的值为 512m-1536m。这个值是听一个IBM的工程师所说的经验值。mx和ms设置成一样不好,其理由是:最大和最小一样了,很多时候会产生很小的内存碎片,jvm会压缩内存,就像整理内存一样,这样最后整理后内存占用大小会是ms的值,如果最大和最小一样了,整理后内存占用为mx,这样,再去申请较大块内存时,就不能申请。。
这种情况没有遇到过,仅供参考。  回复  更多评论
  

# re: tomcat内存溢出总结 2009-08-22 20:31 雨中滴
这里写错了吧 应该是-XX:MaxPermSize 好几处

这一个一般是加大-XX:PermSize -XX:MaxPermSize 来解决问题。
-XX:PermSize 永久保存区域初始大小
-XX:PermSize 永久保存区域初始最大值
这一般结合第一条使用,比如 set JAVA_OPTS= -Xms1024m -Xmx1024m -XX:PermSize=128M -XX:PermSize=256M
有一点需要注意:java -Xmx***M version 命令来测试的最大堆内存是 -Xmx与 -XX:PermSize的 和 比如系统支持最大的jvm堆大小事1.5G,那 -Xmx1024m -XX:PermSize=768M 是无法运行的。

  回复  更多评论
  

# re: tomcat内存溢出总结 2009-08-25 01:21 高天赐
好啊 很实用   回复  更多评论
  

# re: tomcat内存溢出总结[未登录] 2013-05-10 14:41
太棒了 受益匪浅 永久性内存溢出困扰被人几个月啦   回复  更多评论
  


只有注册用户登录后才能发表评论。


网站导航: