CentOS HBase数据备份恢复方法

CentOS 上 HBase 数据备份与恢复实用指南

一 常见恢复场景与快速处置

• 故障类型判断：优先确认是 HMaster 宕机、RegionServer 宕机、HFile/元数据损坏 还是 配置错误。
• 先行保护：在任何恢复前，先备份当前实例目录与关键配置，例如：
  • 本地目录：cp -r /hbase/data /hbase/data_backup_$(date +%F)
  • 配置文件：cp $HBASE_HOME/conf/hbase-site.xml /backup/hbase-site-$(date +%F).xml
• 基础恢复动作：
  • 确保 Zookeeper 正常；
  • 重启异常进程：start-hbase.sh 或按角色分别启动；
  • 一致性修复：使用 HBase 自带工具 hbck 检测并修复，例如：/hbase/bin/hbck -repair；
  • 配置修正：核对 hbase-site.xml 中 hbase.rootdir、Zookeeper 地址等关键项后重启；
  • 验证：通过 HBase Shell 检查集群与数据，例如：status 'simple'、scan 'your_table_name'，并持续观察 /hbase/logs 下相关日志。

二 基于快照的恢复步骤

• 适用场景：误删表、表结构变更回滚、时间点恢复（配合备份策略）。
• 基本流程：
  1. 在 HBase Shell 创建快照：
     • create_snapshot 'my_table', 'snap_20251211'
  2. 如需恢复到“空表”，先按原结构建表（列族一致）：
     • create 'my_table', {NAME => 'cf1', ...}
  3. 执行恢复：
     • restore_snapshot 'snap_20251211'
  4. 验证：
     • count 'my_table'、scan 'my_table', LIMIT => 10
• 注意事项：
  • 快照是“元数据+指向 HFile 的指针”的轻量副本，恢复速度快；
  • 目标表结构（列族、属性）需与原表一致；
  • 跨集群恢复时，确保 HDFS 命名空间/权限与 hbase.rootdir 配置一致。

三 基于 Export/Import 的表级备份与恢复

• 适用场景：跨集群迁移、离线归档、细粒度表级恢复。
• 备份（Export）：
  • hbase org.apache.hadoop.hbase.mapreduce.Export my_table /backup/hbase_export/my_table_20251211
• 恢复（Import）：
  • 目标表需存在且结构一致：create 'my_table', {NAME => 'cf1', ...}
  • hbase org.apache.hadoop.hbase.mapreduce.Import my_table /backup/hbase_export/my_table_20251211
• 提示：
  • 该方式基于 MapReduce，适合大数据量离线导出导入；
  • 若源/目标集群版本差异较大，建议先在测试环境验证兼容性。

四 基于 HDFS 拷贝与 DistCp 的整库备份恢复

• 适用场景：跨集群迁移、机房/存储迁移、快速回滚到某目录版本。
• 备份（HDFS 拷贝）：
  • hdfs dfs -cp -r /hbase /backup/hbase_20251211
• 或跨集群/跨命名空间拷贝（DistCp）：
  • hadoop distcp hdfs://src-nn:8020/hbase hdfs://dst-nn:8020/backup/hbase_20251211
• 恢复：
  • 方式一（覆盖式）：hdfs dfs -cp -r /backup/hbase_20251211/hbase /hbase
  • 方式二（变更 hbase.rootdir 后启动）：在 hbase-site.xml 中设置 hbase.rootdir 指向备份目录后启动集群；
• 注意：
  • 操作前确认 HMaster/RegionServer 已停止，避免拷贝过程中产生写入；
  • 恢复后首次启动建议先做 hbck 一致性检查。

五 备份策略与运维建议

• 组合策略：
  • 日常用 快照做表级快速回滚；
  • 定期做 Export/Import 或 HDFS 全量拷贝/DistCp 做离线归档与迁移；
  • 对关键业务引入 HBase Backup/Restore 工具（若版本支持）做全量/增量备份；
• 频率与窗口：
  • 建议至少每周一次全量、每日增量（或按业务 RPO 设定），并在业务低峰期执行；
• 高可用与监控：
  • 启用 多 Master 与多 RegionServer，并配置 Zookeeper 高可用；
  • 常态化巡检与 hbck 健康检查，定期做恢复演练验证备份有效性。