CDH5.15集成spark2
简介:
在我的CDH5.15集群中,默认安装的spark是1.6版本,这里需要将其升级为spark2.x版本。经查阅官方文档,发现spark1.6和2.x是可以并行安装的,也就是说可以不用删除默认的1.6版本,可以直接安装2.x版本,它们各自用的端口也是不一样的。我尝试了安装spark2.3版本,大告成功,这里做一下安装spark2.3版本的步骤记录。
一. 安装准备
所需软件
①csd包:http://archive.cloudera.com/spark2/csd/
②parcel包:http://archive.cloudera.com/spark2/parcels/2.3.0.cloudera3/
以上均选择红框内的内容下载。</