如何建立竞价网站,wordpress友言,wordpress阿里云cdn,做英文网站的公司今天一朋友反馈他们的一个数据库hang住了,通过ssh也不能登录系统,他们没有办法重启系统解决问题,现在想让我帮忙找出问题原因分析awr得出询问朋友,他们的库一般session保持在200个左右,这次突然飙升到750以上,属于异常情况分析监听日志看到在截图的时间内,整体访问较频繁,某个i…今天一朋友反馈他们的一个数据库hang住了,通过ssh也不能登录系统,他们没有办法重启系统解决问题,现在想让我帮忙找出问题原因分析awr得出询问朋友,他们的库一般session保持在200个左右,这次突然飙升到750以上,属于异常情况分析监听日志看到在截图的时间内,整体访问较频繁,某个ip访问异常频繁,通过这些信息,初步怀疑是用户的数据库内存使用完,导致系统数据库hang住.查看系统日志Jun 26 14:35:55 result01 kernel: [5613531.566617] Free swap 0kBJun 26 14:35:55 result01 kernel: [5613531.566618] Total swap 2104504kBJun 26 14:35:55 result01 kernel: [5613531.566620] Free swap: 0kBJun 26 14:35:55 result01 kernel: [5613531.591073] 2359296 pages of RAMJun 26 14:35:55 result01 kernel: [5613531.591074] 318236 reserved pagesJun 26 14:35:55 result01 kernel: [5613531.591075] 73353 pages sharedJun 26 14:35:56 result01 kernel: [5613531.591076] 529 pages swap cachedJun 26 14:35:56 result01 kernel: [5613531.591079] Out of Memory: Kill process 8904 (oracle) score 891 and children.Jun 26 14:35:56 result01 kernel: [5613531.591201] Out of memory: Killed process 8904 (oracle).Jun 26 14:35:56 result01 kernel: [5613531.592280] oracle invoked oom-killer: gfp_mask0x201d2, order0, oomkilladj0通过这个日志看出系统内存和交换分区都使用完,因为内存不够,系统开始kill掉部分oracle进程.通过这些确定是系统内存使用完导致hang住可以理解.分析hang住原因为什么session意外的从200添增到750的时候,系统内存被使用完cat /proc/meminfoMemTotal: 8164240 kBSwapTotal: 2104504 kBPageTables: 69732 kBHugePages_Total: 0HugePages_Free: 0HugePages_Rsvd: 0Hugepagesize: 2048 kBsga_target3674210304pga_aggregate_target1732247552从这里得出几个信息:1.数据库总内存8g,swap配置2g2.数据库未使用Hugepage3.数据库设置sga和pga信息内存参数估算数据库总计占用内存为:(36742103041732247552)/1024/10245156M(pga可能未使用完,也可能超过)结合实际sga_target3674210304,会话数.保守估计下Oracle进程占用的系统内存3674210304/(4*1024)*1.5*750/1024/1024960M估算如果使用Hugepage Oracle进程占用系统内存为:3674210304/(2*1024*1024)*1.5*750/1024/10241.9M通过这里分析Oracle总占用内存为:51569606116M通过保守计算留给系统的内存大概为:1.8G左右因为系统的其他操作,最终导致该系统内存耗完,系统和数据库hang住总结说明这是一个实实在在因为linux中因为未配置Hugepage,因为用户突增,导致系统内存消耗光,从而使得系统和数据库hang住的例子.这个库因为sga不是非常大,所以Oracle占用系统内存不是高到离谱,如果sga配置为32g,1000个session,那就会占用12g的系统内存通过这些可以看出在linux中配置Hugepage的优点:Hugepage不光是为了减轻cpu的负担,还可以减少系统内存的消耗;在没有极端的情况下,建议linux的数据库系统配置Hugepage.
