问题的发现
偶然在生产上部署了一个版本之后发现,机器不断重启报警,后经过查询linux日志发现,原来是因为服务占用内存过高被内核给kill掉了。接下来就是查问题,本来以为是内存泄漏,上了pprof工具之后发现,内存占用稳定在2.6g,而top命令则很快看到RES
参数暴涨到12g+(机器内存16g)后被内核杀掉。百思不得其解。后来在翻阅Go1.12发布说明时看到一段话:
On Linux, the runtime now uses
MADV_FREE
to release unused memory. This is more efficient but may result in higher reported RSS. The kernel will reclaim the unused data when it is needed. To revert to the Go 1.11 behavior (MADV_DONTNEED
), set the environment variableGODEBUG=madvdontneed=1
.
原文链接:https://golang.google.cn/doc/go1.12#runtime
这段话的关键在于,Go1.12中使用的新的MADV_FREE
模式,这个模式会更有效的释放无用的内存,但可能会让RSS
增高,RSS是什么呢?Resident Set Size 常驻内存集,而top中RES
参数的含义是进程使用的、未被换出的物理内存大小,也即常驻内存集。看到这里,试着在程序运行时加上这个参数GODEBUG=madvdontneed=1
,果然,内存稳定在2.7g,问题就此解决。
有疑问加站长微信联系(非本文作者)