【Docker】如何设置 `wiredTigerCacheSizeGB` 和 `resources.limits.memory`

一、wiredTigerCacheSizeGB

1.1 作用

--wiredTigerCacheSizeGB 是 MongoDB 的一个配置参数，用于 设置 WiredTiger 存储引擎的内存缓存大小。它的核心作用是 通过内存缓存加速数据访问，减少磁盘 I/O，提升数据库性能。

1.2 默认

• 如果未手动设置，MongoDB 默认会：
  • 使用 50% 的可用系统内存减去 1 GB 作为缓存。
  • 例如：服务器有 64 GB 内存 → 默认缓存约 (64*0.5) - 1 = 31 GB。

1.3 何时需要手动设置？

• 服务器专用 MongoDB：可分配更多内存（例如 70%-80% 的物理内存）。
• 共享服务器：需限制缓存大小，避免影响其他服务（如应用进程、操作系统）。
• 容器化环境（如 Docker/K8s）：需显式限制内存，防止 OOM（内存溢出）。

1.4 总结

通过合理配置此参数，可以显著优化 MongoDB 的读写性能，但需根据实际硬件和业务需求调整。

二、resources.limits.memory

在 Kubernetes（K8s）或 Docker Swarm 等容器编排平台中，resources.limits.memory 是一个关键配置项，用于 限制容器可以使用的最大内存资源。它的作用和含义如下：

2.1 作用

• 硬性内存上限：
  指定容器运行时允许分配的最大内存量（例如 30G）。如果容器尝试超过此限制，会被系统强制终止（OOM Killer 触发）。

  • 示例：若容器内存使用达到 30G，Kubernetes 会杀死容器并重启它（状态变为 OOMKilled）。

• 资源调度依据：
  K8s 调度器（Scheduler）根据 limits.memory 决定将 Pod 分配到哪个节点（Node）。如果节点剩余内存不足，则不会调度到该节点。

2.2 配置方式

通常在 Deployment/Pod 的 YAML 文件 或 Docker Compose 文件 中定义：

# Kubernetes 示例
resources:
  limits:
    memory: "30Gi"  # 最大内存限制（二进制单位，30GB）
  requests:
    memory: "5Gi"   # 启动时预留内存（软性保证）

# Docker Compose 示例
deploy:
  resources:
    limits:
      memory: 30G

2.3 与相关参数的关系

2.4 为什么需要设置 limits.memory？

• 避免单个容器耗尽节点内存，影响其他容器或系统进程。
• 提高稳定性：防止内存泄漏导致系统崩溃。
• 资源配额管理：在多租户集群中公平分配资源。

2.5 总结

三、如何设置 wiredTigerCacheSizeGB 和 resources.limits.memory

在 容器化部署（如 Docker/K8s） 中，wiredTigerCacheSizeGB 和 resources.limits.memory 需要协同配置，以避免内存溢出（OOM）或资源浪费。以下是两者的关系及推荐设置方法：

3.1 核心关系

关键点：

• WiredTiger 缓存是 MongoDB 内部的内存分配，而 limits.memory 是容器 外部的硬性限制。
• 若 wiredTigerCacheSizeGB 接近或超过 limits.memory，容器可能因总内存超限被 OOM Killer 终止。

3.2 推荐配置原则

1. 容器总内存（limits.memory）

   • 必须大于 wiredTigerCacheSizeGB，并预留额外内存给：
     • MongoDB 的其他内存开销（连接、聚合、日志等）。
     • 容器内系统进程（如 Shell、监控工具）。
   • 经验公式： limits.memory ≥ wiredTigerCacheSizeGB + 2GB（安全缓冲）
     
     

2. WiredTiger 缓存（wiredTigerCacheSizeGB）

   • 通常设为 50%~70% 的 limits.memory（根据实际负载调整）。
   • 例如：limits.memory: 30G → wiredTigerCacheSizeGB: 20G（留 10G 给其他开销）。

3. Reservations（reservations.memory）

   • 是 软性预留内存，不影响实际限制，但影响调度优先级。
   • 可设为 wiredTigerCacheSizeGB 的 50%~100%（如 5G）。

3.3 具体配置示例

3.3.1 场景：容器内存限制 30GB，预留 5GB

# mongod.conf 或 MongoDB 启动参数
storage:
  wiredTiger:
    engineConfig:
      cacheSizeGB: 20  # 约为 limits.memory 的 2/3

# Docker/K8s 资源配置
deploy:
  resources:
    limits:
      memory: 30G     # 容器最大内存
    reservations:
      memory: 5G      # 预留给容器的内存（软性保证）

3.3.2 为什么这样设置？

1. 安全边界：

   • wiredTigerCacheSizeGB: 20G + MongoDB 其他开销（~5G） + 系统（~5G） ≈ 30G（limits.memory）。
   • 避免因临时内存峰值触发 OOM。

2. 性能优化：

   • 20GB 缓存足够处理大多数高负载查询，同时保留 10GB 给连接池、聚合操作等。

3. 资源调度：

   • reservations: 5G 确保容器启动时至少有 5GB 可用内存（但允许超用）。

3.4 验证与监控

1. 检查容器内存使用

   docker stats <container_id>  # 或 kubectl top pod
   

   • 确保 MEM USAGE 不超过 limits.memory。

2. 查看 MongoDB 缓存状态

   db.serverStatus().wiredTiger.cache
   

   • 关注 "bytes currently in cache" 和 "hit ratio"（理想值 > 95%）。

3. 调整策略

   • 如果缓存命中率低 → 适当增加 wiredTigerCacheSizeGB（需同步调高 limits.memory）。
   • 如果容器频繁 OOM → 降低 wiredTigerCacheSizeGB 或增加 limits.memory。

3.5 常见问题

Q1：能否设 wiredTigerCacheSizeGB: 30 和 limits.memory: 30G？

不推荐！这会导致：

• MongoDB 可能因无法分配额外内存（如连接、临时操作）而崩溃。
• 无缓冲空间，极易触发 OOM。

Q2：reservations.memory 是否必须？

• 非必须，但建议生产环境设置，避免资源竞争。
• 例如：reservations: 5G 可防止其他容器抢占关键资源。

四、总结

• 假设mongodb容器分配30G

通过这种配置，既能最大化利用内存提升性能，又能保证稳定性。