在使用MongoDB的时候遇到了一个内存占用的问题,爬虫爬过来的图片在库中存的是网络地址,要写一个脚本对图片进行分批下载,所以会对MongoDB频繁查询。
发现使用过程中mongod的服务占用了40.5%的内存
查看相关资料得知3.4版本后,内存默认使用的是(系统内存-1GB)*50%
我通过以下命令启用MongoDB
/usr/bin/mongod --config /etc/mongod.conf --fork --wiredTigerCacheSizeGB 8
关键在于 --wiredTigerCacheSizeGB 8 限制缓存使用内存大小为8GB,这样MongoDB使用的内存就是(8GB-1GB)* 50%
内存降下来咯,美滋滋