必须同时调优ulimit(nofile/nproc)、XFS挂载选项(noatime,barrier=0)和内存参数(vm.swappiness=1等),否则GridFS并发超50即在socket层失败;仅改ulimit或仅调MongoDB配置均无效。

CentOS系统参数不调,GridFS并发一上50就卡在socket层——根本不是MongoDB配置问题,而是ulimit、内核IO策略、文件系统挂载选项这三层被默认值锁死了。
ulimit -n 和 -u 必须同时配,只改 nofile 会启动失败
GridFS高并发时,每个上传/下载请求至少占2个文件描述符+1个线程,mongod自身还要开journal刷盘、TTL清理、复制心跳等后台线程。漏配nproc会导致fork: retry: Resource temporarily unavailable错误,mongod直接起不来。
- 编辑
/etc/security/limits.conf,为运行mongod的用户(如mongod)添加四行: mongod soft nofile 65535mongod hard nofile 65535mongod soft nproc 65535mongod hard nproc 65535- 不能写
*,systemd服务忽略通配符;必须指定用户名 - 确认
/etc/pam.d/system-auth含session required pam_limits.so(CentOS 7 默认有)
systemd服务文件里加 LimitNOFILE 才真正生效
CentOS 7用systemd管理mongod,它绕过limits.conf加载逻辑。即使limits配了,systemctl start mongod启动的进程仍走默认限制(通常是4096)。
- 编辑服务文件:
sudo vi /usr/lib/systemd/system/mongod.service - 在
[Service]段下添加: LimitNOFILE=65535LimitNPROC=65535- 重载并重启:
sudo systemctl daemon-reload && sudo systemctl restart mongod - 验证:
cat /proc/$(pgrep -f "mongod")/limits | grep "Max open files",确认soft/hard值均为65535
禁用atime + 改XFS挂载参数,机械盘读取提速2倍以上
GridFS在机械硬盘上慢,80%是寻道延迟拖垮的。默认atime更新和barrier=1会强制每次写都落盘,让本来就不快的磁盘雪上加霜。
- 编辑
/etc/fstab,将MongoDB数据目录挂载项改为: /dev/sdb1 /data xfs defaults,noatime,nodiratime,barrier=0 0 0- 必须用XFS:ext4对大块顺序IO支持弱,且不支持
nodiratime粒度控制 - 执行
sudo mount -o remount /data立即生效 - 验证:
xfs_info /data确认attr2,inode64,swalloc等标志存在
vm.swappiness=1 + vm.dirty_* 调优,防止GridFS写入触发swap抖动
GridFS批量上传时内存压力陡增,WiredTiger缓存+OS page cache+应用buffer三者叠加,若swappiness过高,内核会主动换出内存页到swap,导致write阻塞在page fault上。
- 执行:
echo "vm.swappiness = 1" | sudo tee -a /etc/sysctl.conf echo "vm.dirty_ratio = 15" | sudo tee -a /etc/sysctl.confecho "vm.dirty_background_ratio = 5" | sudo tee -a /etc/sysctl.confsudo sysctl -p- 关键点:
dirty_background_ratio设太低(如1)会导致background flush太激进,反而抢占CPU;设5是实测平衡点
最容易被忽略的是:这些OS参数调完后,必须重启mongod进程才能生效——不是reload,是完整stop再start,否则旧进程仍跑在旧limits和内存策略下。











