2022年9月13日
spark源码（十三）spark-submit action详解
摘要： org.apache.spark.examples.SparkPi 27行 def main(args: Array[String]): Unit = { val spark = SparkSession .builder .appName("Spark Pi") .getOrCreate() va 阅读全文
posted @ 2022-09-13 14:12 Kotlin 阅读(101) 评论(0) 推荐(0)
spark源码（十二）spark-submit 流程详解
摘要： 一般提交任务都是spark-submit --class org.apache.spark.examples.SparkPi 类似的我们下面就以这个SparkPi 完成源码的跟进 寻找main函数类 我们跟进一个spark命令行的样例详细看看spark的源码 cat /opt/spark/spark 阅读全文
posted @ 2022-09-13 14:10 Kotlin 阅读(133) 评论(0) 推荐(0)
Live2D