Node.js在Ubuntu上的日志备份策略

Node.js 在 Ubuntu 的日志备份策略

一策略总览

采用“本地轮转 + 压缩归档 + 异地备份 + 离线留存”的分层策略，兼顾可用性、成本与合规。
本地优先使用 logrotate 或 PM2 内置日志轮转做按日/按大小切割与压缩；随后用 tar + cron 做按日归档与清理；再通过 rsync 将归档同步到远程存储；关键归档可再做离线或冷备留存。

二本地轮转与压缩

使用 logrotate（系统自带，稳定可靠）
1. 安装：sudo apt-get install -y logrotate
2. 新建配置：sudo nano /etc/logrotate.d/nodejs
3. 示例配置（按日轮转、保留7天、压缩、空文件不轮转、自动创建新文件）：
```
/var/log/node-app/*.log {
    daily
    rotate 7
    compress
    missingok
    notifempty
    create 0640 node node
    copytruncate
    dateext
}
```
  - 说明：使用 copytruncate 可避免应用重开文件句柄；若应用能处理信号，也可在 postrotate 中发送 USR1 触发重新打开日志。测试：sudo logrotate -d /etc/logrotate.d/nodejs；强制运行：sudo logrotate -f /etc/logrotate.d/nodejs。
使用 PM2 管理（若以 PM2 运行 Node.js）
- 安装并启用日志轮转插件：pm2 install pm2-logrotate
- 常用参数：pm2 set pm2-logrotate:max_size 10M；pm2 set pm2-logrotate:retain 7；pm2 set pm2-logrotate:compress true；pm2 set pm2-logrotate:rotateInterval “0 0 * * *”（每天 00:00 轮转）。修改后重启应用生效。

三归档与清理脚本

目标：每日将昨天的日志打包归档，保留7天，输出执行日志便于审计。

示例脚本 backup_logs.sh（按需修改路径与保留天数）：

#!/usr/bin/env bash
set -Eeuo pipefail

SOURCE_DIR="/var/log/node-app"
BACKUP_DIR="/data/backup/node-app"
RETAIN_DAYS=7
DATE=$(date -d "yesterday" +%Y%m%d)   # 归档“昨天”的日志
LOG="backup_${DATE}.log"

mkdir -p "$BACKUP_DIR"

# 打包昨日 .log 文件
tar -czf "$BACKUP_DIR/log_${DATE}.tar.gz" -C "$SOURCE_DIR" ./*.log 2>>"$BACKUP_DIR/$LOG"

if (( $? == 0 )); then
    echo "[$(date)] 备份成功：$BACKUP_DIR/log_${DATE}.tar.gz" >>"$BACKUP_DIR/$LOG"
else
    echo "[$(date)] 备份失败" >>"$BACKUP_DIR/$LOG"
    exit 1
fi

# 清理过期备份
find "$BACKUP_DIR" -type f -mtime +"$RETAIN_DAYS" -name "*.tar.gz" -delete >>"$BACKUP_DIR/$LOG" 2>&1
echo "[$(date)] 清理完成，保留最近 $RETAIN_DAYS 天" >>"$BACKUP_DIR/$LOG"

定时执行（每天 02:00）：
- 赋权：chmod +x /usr/local/bin/backup_logs.sh
- 编辑：crontab -e
- 添加：0 2 * * * /usr/local/bin/backup_logs.sh >> /var/log/backup_nodejs.log 2>&1
验证：tail -f /var/log/backup_nodejs.log 与 /var/log/cron 观察执行情况。

四远程备份与异地容灾

rsync 增量同步到远程主机（适合日常异地备份）
- 命令示例（每天 00:00 同步，–delete 保持两端一致）：
```
0 0 * * * rsync -avz --delete /data/backup/node-app/ user@remote:/backup/node-app/
```
- 如需加密传输与密钥登录，请提前配置 SSH 免密；重要归档可再同步至对象存储或离线介质做长期留存。

五监控验证与常见坑

监控与验证
- 查看系统日志：tail -f /var/log/syslog 或 /var/log/cron 检查定时任务是否执行。
- 查看应用日志：tail -f /var/log/node-app/*.log；若用 PM2：pm2 logs。
- 定期校验备份：随机抽取历史压缩包解压核验；对关键业务可增加“备份成功/失败”告警（如邮件或企业微信机器人）。
常见坑与建议
- 避免日志句柄丢失：使用 copytruncate 或确保应用能正确处理 USR1 信号后再轮转。
- 权限与属主：logrotate 的 create 指令需与运行用户一致（如 node:node），避免应用无法写入。
- 路径与通配：确认日志路径与通配符（如 *.log）匹配实际文件，避免“轮转了个寂寞”。
- 时间基准：归档脚本建议按“昨天”打包，避免跨日任务导致漏备或重备。
- 远程带宽与成本：rsync 全量同步前可先本地打包，减少传输量；对历史冷数据做分层存储。

最新问答

相关标签