如何使用FetchLinux进行自动化任务

FetchLinux 自动化任务实用指南

一适用场景与总体思路

适用场景
- 定时下载或同步远程文件/目录（基于 SSH），用于日志拉取、配置分发、代码/数据同步等。
- 批量镜像获取与校验（如 Fedora 等发行版镜像），用于内网镜像站或离线环境准备。
- 结合系统服务与定时任务，实现无人值守的拉取、校验、清理与告警。
总体思路
- 以最小权限运行（专用系统用户）、使用 SSH 密钥 免密、脚本化编排、通过 systemd 或 cron 定时执行，并做好日志与校验闭环。

二远程同步与备份的自动化

前置准备
- 创建专用用户与目录（示例：fetchlinux），并准备 SSH 密钥（推荐禁用口令登录）。
- 目标主机需开启 SSH 服务，并配置公钥到对应用户的 authorized_keys。
基本命令范式
- 拉取单文件：fetchlinux user@remote_host:/path/file /local/path
- 拉取目录（递归）：fetchlinux user@remote_host:/path/dir /local/path -r
- 使用密钥与端口：fetchlinux -i /path/id_rsa -p 2222 user@remote_host
- 上传目录：fetchlinux -u user@remote_host /local/dir -r /remote/dir
- 列目录/删除/改权限：fetchlinux user@remote_host ls /path；rm；chmod 755 /path/file

自动化脚本示例（带校验与清理）

示例脚本 sync_data.sh（拉取并校验，失败告警）

#!/usr/bin/env bash
set -Eeuo pipefail

REMOTE="user@192.0.2.10"
SRC="/data/logs"
DEST="/opt/backup/logs_$(date +%F)"
LOG="/var/log/fetchlinux/sync_$(date +%F).log"
KEY="/home/fetchlinux/.ssh/id_rsa"
RETAIN_DAYS=7

mkdir -p "$(dirname "$LOG")" "$DEST"

echo "[$(date)] Start sync from $REMOTE:$SRC to $DEST" >> "$LOG"

# 拉取
if fetchlinux -i "$KEY" -p 22 "$REMOTE:$SRC" "$DEST" -r >> "$LOG" 2>&1; then
  echo "[$(date)] Fetch OK" >> "$LOG"
else
  echo "[$(date)] Fetch FAILED" >> "$LOG"
  # 可接入企业微信/钉钉/邮件告警
  exit 1
fi

# 可选：校验示例（若远端提供 .sha256）
# fetchlinux -i "$KEY" "$REMOTE:$SRC/SHA256SUMS" /tmp/SHA256SUMS
# (cd "$DEST" && sha256sum -c /tmp/SHA256SUMS) >> "$LOG" 2>&1 || {
#   echo "[$(date)] Checksum FAILED" >> "$LOG"; exit 1; }

# 清理旧备份
find "$(dirname "$DEST")" -maxdepth 1 -type d -mtime +$RETAIN_DAYS -delete >> "$LOG" 2>&1

echo "[$(date)] Done" >> "$LOG"

定时执行（crontab）

# 每天 02:00 执行
0 2 * * * /opt/fetchlinux/scripts/sync_data.sh

说明
- 上述命令与参数适用于基于 SSH 的远程获取/上传场景；如需并发/带宽限制，可在脚本中结合工具（如 ionice、rsync 的限速参数）实现。

三镜像下载与校验的自动化

下载镜像
- 列出可用命令：fetchlinux --help
- 下载示例：fetchlinux download fedora
完整性校验
- 计算并比对 SHA256：sha256sum image-file，与官方校验值一致再投入使用。
定时与清理
- 将下载与校验写入脚本（如 download_fedora.sh），并用 cron 定时执行；下载完成后按时间或数量清理旧镜像，避免磁盘占满。

四系统级自动化与服务编排

作为系统服务运行
- 若项目提供 systemd 单元，安装后启用开机自启并启动服务：
```
sudo systemctl enable fetchlinux
sudo systemctl start  fetchlinux
```
- 无内置服务时，建议使用 systemd 定时器 或 cron 调度脚本，并在脚本中重定向日志、处理返回值与告警。
安全与运维要点
- 以专用用户（如 fetchlinux）运行，最小化权限；使用 SSH 密钥 认证，必要时更改默认端口并限制可登录用户。
- 日志集中与轮转（如 logrotate），保留至少 7–30 天；关键任务加入失败告警（企业微信/钉钉/邮件）。
- 变更前先备份配置与脚本；镜像/备份任务务必做 校验与回滚预案。

最新问答

相关标签