在Yarn集群上支持多个Spark分发

作者: 谦逊的毛巾
发布时间: 2024-08-17 05:38:14 (22天前)
转自：

2 条回复

0#
回复此人
老夫的少女心吖 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 可以在YARN群集上运行任意数量的Spark分发。我已经在我的MapR集群上完成了很多次，混合了1-3个不同的版本，并在那里设置了正式的Apache Spark。 </p> <P> 您只需要调整conf / spark-env.sh（重命名spark-env.sh.template）并添加一行： </p> <pre> <code> export SPARK_HOME=/your/location/of/spark/spark-2.1.0 </code> </pre> </DIV>

编辑

登录后才能参与评论