在 CentOS 上配置 HDFS 所需的时间,取决于部署规模、是否自动化、是否熟悉 Hadoop。下面给你一个现实参考时间,以及影响时间的关键因素。
一台 CentOS,NameNode + DataNode 都在本机
主要耗时在:
生产或准生产环境
主要耗时在:
| 因素 | 影响 |
|---|---|
| CentOS 版本 | 7 比 8/Stream 更稳定 |
| 是否熟悉 Linux | 影响非常大 |
| 是否第一次配置 | 第一次明显更慢 |
| 网络环境 | 下载 Hadoop 慢会很耗时 |
| 是否使用 CDH / HDP | 会快很多,但更重 |
| 是否配置 HA | 时间翻倍 |
系统准备(30~60 分钟)
Hadoop 安装(10~20 分钟)
SSH 免密登录(10~30 分钟)
HDFS 配置(20~40 分钟)
core-site.xmlhdfs-site.xmlworkers启动 & 验证(10~20 分钟)
start-dfs.shhdfs dfsadmin -reportCentOS 上配置 HDFS:
如果你愿意,我可以:
你现在是需要 单机测试 还是 多节点生产环境?