温馨提示×

debian安装hadoop要几步

小樊
50
2026-09-14 15:50:29
栏目: 智能运维

在 Debian 上安装 Hadoop,从零开始一般可以分为 8 个主要步骤(以单机/伪分布式为例,最常用):


一、基础环境准备(3 步)

  1. 更新系统
sudo apt update && sudo apt upgrade -y
  1. 安装 Java(Hadoop 依赖 JDK)
sudo apt install openjdk-11-jdk -y
java -version
  1. 创建专用用户(推荐)
sudo useradd -m hadoop
sudo passwd hadoop

二、Hadoop 安装与配置(4 步)

  1. 下载并解压 Hadoop
wget https://archive.apache.org/dist/hadoop/common/hadoop-3.3.6/hadoop-3.3.6.tar.gz
tar -xzf hadoop-3.3.6.tar.gz
sudo mv hadoop-3.3.6 /opt/hadoop
  1. 配置环境变量 编辑 ~/.bashrc:
export HADOOP_HOME=/opt/hadoop
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
source ~/.bashrc
  1. 修改 Hadoop 配置文件 关键文件(在 $HADOOP_HOME/etc/hadoop):
  • hadoop-env.sh(设置 JAVA_HOME)
  • core-site.xml
  • hdfs-site.xml
  • mapred-site.xml
  • yarn-site.xml

(伪分布式需配置 HDFS 和 YARN)

  1. 格式化 HDFS
hdfs namenode -format

三、启动与验证(1 步)

  1. 启动 Hadoop
start-dfs.sh
start-yarn.sh

验证:

jps

浏览器访问:

  • HDFS: http://localhost:9870
  • YARN: http://localhost:8088

✅ 总结

最少 8 步即可在 Debian 上完成 Hadoop 伪分布式安装。

如果你是:

  • 完全新手 → 建议用伪分布式
  • 生产环境 → 还要加 SSH 免密、多节点、防火墙等

我可以给你一步一步带注释的完整命令版,或者 集群版安装步骤,你想看哪种?

0 踩