mongodb在centos上的存储优化技巧

1. 选择并优化WiredTiger存储引擎
MongoDB 3.2+默认使用WiredTiger引擎（支持文档级并发与压缩），是CentOS环境下最优选择。配置项需重点关注：

• 启用压缩：通过snappy（平衡性能与压缩比）、zlib（高压缩比，高CPU负载）或zstd（更高压缩比，低延迟）算法减少磁盘占用。示例配置：

  storage:
    engine: wiredTiger
    wiredTiger:
      engineConfig:
        collectionConfig:
          blockCompressor: snappy  # 根据业务需求选择
  

• 调整缓存大小：cacheSizeGB参数设置为服务器总内存的50%-75%（避免占用过多内存导致系统或其他应用饥饿）。例如，8GB内存服务器可设置为6GB：

  storage:
    wiredTiger:
      engineConfig:
        cacheSizeGB: 6
  

2. 优化数据文件存储路径与权限

• 修改默认数据目录：将数据存储从/var/lib/mongo迁移至更大或更高性能的磁盘（如/mnt/data），避免根分区空间不足。步骤：停止MongoDB→创建新目录→修改所有者→复制数据→修改配置文件dbPath→重启服务。
• 确保目录权限：MongoDB用户（通常为mongod）需对新数据目录有读写权限：

  sudo chown -R mongod:mongod /mnt/data
  

3. 定期执行磁盘空间清理

• 压缩集合：使用compact命令整理集合碎片并释放未使用空间（WiredTiger下有效），需注意该操作会锁定集合，建议在低峰期执行：

  use your_database;
  db.runCommand({compact: "your_collection"});
  

• 清理无效数据：删除过期文档（如日志表中的旧数据）或无用数据库（db.dropDatabase()）；定期执行db.collection.stats()监控集合大小，及时清理膨胀数据。

4. 优化索引设计

• 创建合适索引：为高频查询字段（如user_id、order_date）创建单字段索引；为多条件查询创建复合索引（如{user_id: 1, order_date: -1}），避免全表扫描。
• 使用覆盖索引：确保查询字段均包含在索引中（如db.collection.find({status: "active"}, {name: 1, email: 1}).explain("executionStats")），减少磁盘IO。
• 定期维护索引：删除未使用的索引（通过db.collection.aggregate([{listIndexes: 1}, {cursor: {batchSize: 0}}])查看），合并碎片化索引（compact命令或重建索引）。

5. 硬件配置优化

• 使用SSD：SSD的随机读写性能远优于HDD，能显著提升MongoDB的IO密集型操作（如查询、插入）速度。
• 增加内存：MongoDB依赖内存缓存数据和索引，建议内存容量至少为数据量的1/3（如1TB数据至少32GB内存），提高缓存命中率。
• 优化内核参数：关闭透明大页（echo never > /proc/sys/vm/transparent_hugepage/enabled）、调整文件描述符限制（sudo vi /etc/security/limits.conf添加mongod hard nofile 64000）。

6. 分片与复制集扩展

• 分片技术：对于TB级以上数据，通过分片将数据分布到多个服务器（如按user_id分片），提高存储容量与读写性能。需提前规划分片键（避免数据倾斜）。
• 复制集：配置3节点复制集（主节点+2从节点），提高数据可用性与读取性能（可将读请求分发至从节点）。

7. 监控与调优

• 使用内置工具：mongostat监控每秒操作数、mongotop监控集合级IO耗时、explain()分析查询执行计划（判断是否使用索引）。
• 第三方监控：部署Prometheus+Grafana监控集群状态（CPU、内存、磁盘IO、连接数），及时发现性能瓶颈。