Linux服务器JS日志管理方法

Linux服务器JS日志管理方法

一 日志采集与结构化

• 使用成熟的日志库实现多级别、多目标输出与结构化日志：
  • Winston：多传输（Console/File/HTTP）、可自定义格式与级别，适合通用场景。
  • Pino：高性能、默认结构化 JSON，适合高并发与云原生场景。
  • Bunyan：结构化 JSON 输出，便于后续自动化处理与集成。
• 建议在生产环境采用结构化日志（如 JSON），并合理设置级别（如 INFO/WARN/ERROR），开发环境可开启 DEBUG 便于排查。

二 日志轮转与保留

• 应用内轮转（推荐与系统方案二选一或并用）：
  • 使用 winston-daily-rotate-file 按天/按大小切分并压缩归档，示例关键参数：datePattern: ‘YYYY-MM-DD’、zippedArchive: true、maxSize: ‘20m’、maxFiles: ‘14d’。
• 系统级轮转（与进程解耦，稳定可靠）：
  • 在 /etc/logrotate.d/ 创建配置，示例：

    /var/log/nodeapp/*.log {
      daily
      rotate 7
      compress
      delaycompress
      missingok
      notifempty
      create 644 root root
      sharedscripts
      postrotate
        [ ! -f /var/run/nodeapp.pid ] || kill -USR1 `cat /var/run/nodeapp.pid`
      endscript
    }
    

  • 测试与执行：logrotate -d /etc/logrotate.d/nodeapp（语法检查），logrotate -f /etc/logrotate.d/nodeapp（强制执行）。
• 如使用 PM2 托管，可启用内置日志轮转插件（pm2-logrotate），便于按大小与保留天数自动切割与清理。

三 集中式日志与监控告警

• 集中式收集与可视化：
  • ELK Stack（Elasticsearch/Logstash/Kibana）、Graylog、Fluentd 等方案可实现日志的采集、解析、检索、可视化与告警，适合多实例与分布式环境。
• 命令行实时监控与快速排查：
  • 实时查看：tail -f /var/log/nodeapp/app.log
  • 关键字过滤：tail -f /var/log/nodeapp/app.log | grep --color=auto 'ERROR'
  • 分页查看：less +F /var/log/nodeapp/app.log
• 进程管理器的日志能力：
  • PM2：pm2 logs myapi 实时聚合查看应用日志，便于联动告警与快速定位。

四 备份与归档

• 系统级轮转配合压缩归档即可满足多数备份需求；如需离线/异地归档，可结合脚本与定时任务：
  • 示例 Shell 脚本（每日归档并压缩）：

    #!/usr/bin/env bash
    LOG_DIR="/var/log/nodeapp"
    BACKUP_DIR="/backup/logs"
    DATE=$(date +%Y%m%d%H%M%S)
    mkdir -p "$BACKUP_DIR"
    tar czf "$BACKUP_DIR/nodeapp_$DATE.tar.gz" -C "$LOG_DIR" .
    

  • 定时执行：0 2 * * * /usr/local/bin/backup_node_logs.sh >> /var/log/js_log_backup.log 2>&1
• 如需加密归档，可对归档文件使用 GPG 进行对称加密（示例：gpg --symmetric --cipher-algo AES256 file.tar.gz）。

五 安全与合规要点

• 访问控制：设置合适的文件权限（如 644/640），仅允许必要用户与组读取日志，避免敏感信息泄露。
• 脱敏与最小化：日志中避免记录 密码、令牌、身份证号、银行卡号 等敏感信息；必要时在日志库中做脱敏或掩码处理。
• 传输与存储：集中式方案建议启用 TLS 传输；归档与备份介质注意加密与访问控制。
• 审计与合规：对日志的访问、导出与清理建立流程与审计记录，满足合规要求。