简短结论:Linux 上安装 Spark 对新手“可以,但有一定门槛”,不算特别友好,但也不是很难,关键是要选对方式。
下面给你一个比较直观的判断和建议:
对新手来说,主要难点通常是:
需要先装 Java
JAVA_HOME 配置问题环境概念较多
命令行操作偏多
tar、export、bashrc 等版本兼容问题
适合人群:学习、写代码、跑小数据
如果你是新手 + Linux + 想学 Spark:
Ubuntu / CentOS + Java 8/11 + Spark 3.x + PySpark
步骤大致是:
SPARK_HOMEpyspark 或 spark-shell 测试不需要源码编译,不用 Maven。
docker run -it jupyter/pyspark-notebook
Linux 装 Spark 对新手不算“特别适合”,但只要你用单机模式 + PySpark,是完全可以搞定的,而且以后更专业。
如果你愿意,我可以:
你现在是 完全零基础,还是已经会用 Linux 了?
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。