自编译Apache Spark2.3.3支持CDH5.16.1

1 下载源代码文件

https://archive.apache.org/dist/spark/spark-2.3.3/

 

 

 

2 解压后导入编辑器，修改依赖的Hadoop版本，下面截图是修改后的，要看自己集成的CDH版本

　　

 

3 然后编译，一开始要等一会儿，

 

 4 编译成功后，copy出编译好的tar包，然后部署