ITPUX技术网

交流 . 资讯 . 分享
Make progress together!
Linux操作系统下Oracle11g R2 RAC 安装配置教程
Oracle数据库培训-备份恢复-性能优化-集群容灾
Oracle数据库DBA高级工程师培训视频

【WebLogic故障处理】一次严重的WebLogic频繁宕机故障处理

内容发布:风哥| 发布时间:2013-12-25 21:38:01
【WebLogic故障处理】一次严重的WebLogic频繁宕机故障处理
环境描述
AIX 5308WebLogic 9.2 MP3 集群(24个应用节点
JDK
IBM Java 5 64-bit JDK (Service Refresh SR6b + IZ08455)


JVM
-Xms2048M –Xmx2048M

Patch ID: NGZ8
      Performance Packserver/native/aix/ppc64/libmuxer.so

系统使用过程中,平均每一个月至少宕机一次,表现为WebLogic服务节点呈挂死现象,业务系统不能使用,只能重启服务节点后系统方能使用,并且在业务系统使用过程中,速度达不到理想的效果。


故障分析
1、WebLogic服务节点挂机现象,经检
WebLogic日志,发现在服务节点挂机之前有出“java/lang/OutOfMemoryError等报错,同时domains目录下也生成有javacoreheapdump等文件。


lJVM内存使用情况


***WARNING*** Java heap is almost exhausted : 0% free Java heap
Dump Event "systhrow" (00040000) Detail "java/lang/OutOfMemoryError" received
Free Java heap size: 9,664 bytes
Allocated Java heap size: 4,294,967,296 bytes
目前分配给Server的4G内存已全部使用,但又未得到新的内存,出现了OutOfMemoryError


l线程使用情况

从线程使用情况看,只有个别线程正在运行,其它线程均在等待或被阻塞。
运行的线程正在进行数据据访问操作


l检查内存使用情况


在重新调整JVM1G的情况下,分析了内存再次溢出的DUMP文件,从下图看出有存内存泄漏问题,而且情况较为严重,一个class共消耗内存670M,这个泄漏对象当前正在进行JDBC数据访问操作。

JVM1G的条件下,根据分析结果表明,目前内存泄漏问题主要表现在两个地方:
1) 对象com.XXXX.XXXX.XXXX.XXXX.model.DefectQueryVO
此对象分别创建了36414次、1239307次。
2) 一系列JDBC操作,这个操作说明在进行数库访问、数据交换。


因此已建议开发商软件工程师检查程序并进行优化。

故障处理结果
将相应的表进行分区处理,优化了数据库,后来使用正常。






上一篇:【WebLogic故障处理】一次严重的WebLogic内存泄漏问题处理过程
下一篇:WebLogic NodeManager故障处理一则
专业提供Oracle数据库服务、主机、存储、备份、中间件等相关技术支持服务,QQ号:176140749
关注ITPUX技术网微信公众号itpux_com  ,了解本站最新技术资料的分享.

欢迎加QQ群,提供超多高质量Oracle/Unix/Linux技术文档与视频教程的下载。

Oracle/Linux/Unix群1-4:199479729   158277749   336282998   189070296   
Oracle/Linux/Unix群5-8:150201289   244609803   522261684   522651731
备注:请勿重复加群,另请注明 from itpux

加群分享视频教程部分如下:

1、公开课视频:Oracle云数据库工程师职业发展前景讲解(免费)
http://edu.51cto.com/course/course_id-8614.html

2、51CTO学院Oracle DBA数据库高级工程师培训(高薪就业.课程介绍)
http://edu.51cto.com/px/train/131?xiaotu

3、Oracle DBA数据库高级工程师培训视频课程1.1(系列78套+七大阶段+上千案例)
套餐视频地址: http://edu.51cto.com/topic/1121.html
回复

使用道具 举报

内容发布:starye_ye| 发布时间:2017-6-29 14:45:03
非常好,可以借鉴这个来排查问题,感谢
回复 支持 反对

使用道具 举报

1框架
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表