Debian环境下JS日志管理技巧有哪些

Debian环境下JS日志管理技巧

1. 选择合适的日志库

在Debian环境下，Node.js应用的日志管理需依赖合适的库。常见选择包括：

Winston：最流行的日志库，支持多传输方式（文件、控制台、HTTP等）、灵活格式化（JSON、简单文本）和日志级别控制（error、warn、info等），适合需要高度定制的场景。
Pino：以高性能、低开销著称，适合高并发应用，日志输出为JSON格式，便于后续处理。
Bunyan：提供结构化JSON日志，便于日志分析和工具集成（如ELK）。
Log4js：功能丰富，支持日志轮转、多输出目标（文件、数据库）和动态配置。
示例（Winston配置）：

const winston = require('winston');
const logger = winston.createLogger({
  level: 'info',
  format: winston.format.json(),
  transports: [
    new winston.transports.File({ filename: 'error.log', level: 'error' }),
    new winston.transports.File({ filename: 'combined.log' }),
    new winston.transports.Console() // 开发环境输出到控制台
  ]
});

2. 配置日志轮转

日志轮转可防止日志文件过大占用磁盘空间，常用方法：

Winston插件：使用winston-daily-rotate-file插件，设置单文件大小（如2MB）和保留数量（如7个），自动删除旧日志。

const { createLogger, format, transports } = require('winston');
const DailyRotateFile = require('winston-daily-rotate-file');
const logger = createLogger({
  level: 'info',
  format: format.combine(format.timestamp(), format.json()),
  transports: [
    new DailyRotateFile({
      filename: 'application-%DATE%.log',
      datePattern: 'YYYY-MM-DD',
      maxSize: '2m',
      maxFiles: '7d'
    })
  ]
});

logrotate工具：通过系统包管理器安装（sudo apt install logrotate），创建配置文件（如/etc/logrotate.d/nodejs），设置每日轮转、保留7天、压缩旧日志。
```
/var/log/nodejs/*.log {
  daily
  rotate 7
  compress
  delaycompress
  missingok
  notifempty
  create 640 root adm
}
```

3. 集中式日志管理

集中式管理便于日志的统一存储、搜索和分析，常用方案：

ELK Stack（Elasticsearch+Logstash+Kibana）：
- 使用Winston的logstash传输或winston-elasticsearch插件，将日志发送到Logstash，再存储到Elasticsearch，通过Kibana进行可视化分析。

Fluentd：轻量级日志收集器，配置fluent.conf文件，从文件或应用中收集日志，发送到Elasticsearch或其他存储。

sudo apt install fluentd
# 编辑/etc/fluent/fluent.conf
<source>
  @type tail
  path /var/log/nodejs/*.log
  tag nodejs.app
  <parse>
    @type json
  </parse>
</source>
<match nodejs.app>
  @type elasticsearch
  host localhost
  port 9200
  logstash_format true
</match>

PM2：进程管理工具，内置日志管理功能，支持日志聚合、轮转和流式输出（pm2 logs命令）。
```
npm install pm2 -g
pm2 start app.js --name "my-app"
pm2 logs my-app  # 实时查看日志
```

4. 日志安全与完整性

确保日志不被篡改或泄露：

敏感信息脱敏：使用censor-sensitive-values等库，在日志输出前替换敏感字段（如密码、银行卡号）。

日志加密：使用gpg工具加密日志文件，防止未授权访问。

gpg --symmetric --cipher-algo AES256 /var/log/nodejs/app.log  # 加密
gpg --decrypt /var/log/nodejs/app.log.gpg > /var/log/nodejs/app.log  # 解密

审计跟踪：使用auditd工具监控日志文件的访问和修改，设置审计规则（如sudo auditctl -w /var/log/nodejs/*.log -p wa -k js_log_access），记录所有对日志文件的操作。

5. 自动化与监控

自动化清理：使用cron定时任务定期执行日志清理脚本（如删除超过30天的日志）。

crontab -e
# 添加以下内容（每天凌晨2点执行）
0 2 * * * find /var/log/nodejs -name "*.log" -mtime +30 -exec rm {} \;

监控与报警：使用Prometheus+Grafana监控日志指标（如错误日志数量、日志大小），设置报警规则（如错误日志超过100条时发送邮件）。
权限管理：确保日志文件的权限正确（如640），仅允许root和日志所属用户访问，防止未授权读取。