Spark on Yarn伪分布式集群搭建(Hadoop集成spark)-CSDN博客

网站介绍:文章浏览阅读363次。spark下载http://spark.apache.org/downloads.html所需环境jdk1.8 及其以上版本hadoop_2.6_cdh.2.4.5解压文件tar -zxvf spark-2.4.5-bin-hadoop2.6.tgz -C ../servers/进入conf目录修改配置文件复制原文件,修改后缀名cp spark-env.sh.template spark-env.sh修改文件,添加配置数据vim spark-env.sh#Hadoop _spark on yarn伪分布式