安装 Linux 上的 Apache Spark,通常可以分成 5 个主要步骤(以最常用、最稳定的方式为例:Linux + 预编译包 + 本地/单机模式):
Spark 依赖 Java 运行环境。
# Ubuntu / Debian
sudo apt update
sudo apt install openjdk-8-jdk -y
# CentOS / RHEL
sudo yum install java-1.8.0-openjdk-devel -y
验证:
java -version
去官网或直接用 wget:
wget https://archive.apache.org/dist/spark/spark-3.5.0/spark-3.5.0-bin-hadoop3.tgz
(版本可按需替换)
tar -xzf spark-3.5.0-bin-hadoop3.tgz
sudo mv spark-3.5.0-bin-hadoop3 /opt/spark
编辑 ~/.bashrc 或 /etc/profile:
export SPARK_HOME=/opt/spark
export PATH=$SPARK_HOME/bin:$PATH
生效:
source ~/.bashrc
本地模式测试:
spark-shell
看到 Scala 交互界面即安装成功 ✅
安装 Linux Spark 一般需要 5 步:
如果你是:
可以告诉我,我可以给你更针对性的步骤。
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。