使用 IntelliJ IDEA 导入 Spark 最新源码及编译 Spark 源代码
1、从 Github 导入 Spark 工程
https://github.com/apache/spark
2、编译 Spark
IntelliJ IDEA 会自动提示你该项目有对应的 pom.xml 文件,是否打开。这里直接选择 Open 该 pom.xml 文件。
之后打开 shell 终端,在命令行中进入刚才导入的 spark 项目根目录,执行
sbt/sbt assembly
1、从 Github 导入 Spark 工程
https://github.com/apache/spark
2、编译 Spark
IntelliJ IDEA 会自动提示你该项目有对应的 pom.xml 文件,是否打开。这里直接选择 Open 该 pom.xml 文件。
之后打开 shell 终端,在命令行中进入刚才导入的 spark 项目根目录,执行
sbt/sbt assembly