ECS Linux系统出现blocked for more than 120 seconds和hung_task_timeout_secs的解决方法
发布日期:2015-12-16 22:12:6
ECS Linux系统无响应。 在/var/log/message日志中出现大量的 “blocked for more than 120 seconds”和“echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.” 的错误。如下图所示: 问题原因: 默认情况下, Linux最多会使用40%的可用内存作为文件系统缓存。当超过这个阈值后,文件系统会把将缓存中的内存全部写入磁盘, 导致后续的IO请求均同步。将缓存写入磁盘的时候,有一个默认120秒的超时时间。 出现上面的问题是因为IO子系统的处理不够快速,不能在120秒将缓存中的数据全部写入到磁盘的。IO系统响应缓慢,导致越来越多的请求堆积,最终系统内存全部被占用,导致系统失去响应。 解决方法: 根据应用程序的情况,对vm.dirty_ratio,vm.dirty_background_ratio两个参数进行调优设置。 例如,推荐如下设置: # sysctl -w vm.dirty_ratio=10 # sysctl -w vm.dirty_background_ratio=5 # sysctl -p 如果系统永久生效,修改/etc/sysctl.conf文件。加入如下两行: #vi /etc/sysctl.conf vm.dirty_background_ratio = 5 vm.dirty_ratio = 10 重启系统生效。
|