HDFS的架构设计有哪些特点
小樊
39
2025-09-12 21:35:15
HDFS架构设计具有以下特点：
- 主从架构：由NameNode（主节点，管理元数据）和DataNode（从节点，存储数据块）组成。
- 数据分块与冗余：将大文件切分为固定大小的数据块（默认128MB），每个块存储多个副本（默认3份），分布在不同节点，保障容错性。
- 高吞吐量：优化大规模数据顺序读写，通过并行处理和数据本地化提升效率。
- 高可扩展性：支持水平扩展，通过增加DataNode提升存储和计算能力。
- 容错机制：通过心跳检测、副本自动恢复、故障转移（如NameNode HA）确保系统稳定性。
- 简单一致性模型：采用最终一致性，适合批量处理场景。
