简介：
在我的CDH5.15.0集群中，默认安装的spark是1.6版本，这里需要将其升级为spark2.x版本。经查阅官方文档，发现spark1.6和2.x是可以并行安装的，也就是说可以不用删除默认的1.6版本，可以直接安装2.x版本，它们各自用的端口也是不一样的。我尝试了安装spark2.3版本，大告成功，这里做一下安装spark2.3版本的步骤记录。
一. 安装准备
所需软件
②parcel包：http://archive.cloudera.com/spark2/parcels/2.3.0.cloudera4/
以上均选择红框内的内容下载。
注意，下载对应版本的包，我的CentOS6，所以下载el6的包，若是CentOS7，就要下el7的包。
二. 开始安装
1.安装前可以停掉集群和Cloudera Management Service，也可以不停，但是待会还是要停止重启的。
2.上传CSD包到每台服务器上的/opt/cloudera/csd目录，并且修改文件的用户和组。注意如果本目录下有其他的jar包，把删掉或者移到其他目录----cdn包放在/opt/cloudera/csd目录才能被识别
注意给jra包分组：chown -R cloudera-scm:cloudera-scm /opt/cloudera/
3.上传
manifest.json
SPARK2-2.3.0.cloudera4-1.cdh5.13.3.p0.611179-el6.parcel
SPARK2-2.3.0.cloudera4-1.cdh5.13.3.p0.611179-el6.parcel.sha1到主节点，并且重新命名
mv SPARK2-2.3.0.cloudera4-1.cdh5.13.3.p0.611179-el6.parcel.sha1 SPARK2-2.3.0.cloudera4-1.cdh5.13.3.p0.611179-el6.parcel.sha
到机器master的/opt/cloudera/parcel-repo目录下。注意:将 SPARK2-2.3.0.cloudera4-1.cdh5.13.3.p0.611179-el6.parcel.sha1重命名为 SPARK2-2.3.0.cloudera4-1.cdh5.13.3.p0.611179-el6.parcel.sha。如果有其他的安装包，不用删除 ，但是如果本目录下有其他的重名文件比如manifest.json文件，把它重命名备份掉。然后把那3个parcel包的文件放在这里。
4.如果刚刚没有停掉CM和集群，现在将他们停掉。然后运行命令。
#启动主节点cloudera-scm-server
/opt/cm-5.15.0/etc/init.d/cloudera-scm-server start
#启动所有节点cloudera-scm-agent
/opt/cm-5.15.0/etc/init.d/cloudera-scm-agent start
5.把CM和集群启动起来。然后点击主机->Parcel页面，看是否多了个spark2的选项。如下图，你这里此时应该是分配按钮，点击，等待操作完成后，点击激活按钮
6.激活后，点击你的群集-》添加服务，添加spark2服务。注意，如果你这里看不到spark2服务，就请检查你的CSD包和parcel包是否对应，上面的步骤是否有漏掉。正常情况下，应该是能用了。我的集群到此已经OK.
最后附上一个成功集成spark2的截图
