2022年7月13日
Spark测试代码求PI的原理
摘要： Spark测试代码求PI的原理 原理图 代码实现 package com.core.day2 import org.apache.spark.rdd.RDD import org.apache.spark.{SparkConf, SparkContext} import scala.util.Ran 阅读全文
posted @ 2022-07-13 13:56 a-tao必须奥利给 阅读(128) 评论(0) 推荐(0)
Spark整合yarn
摘要： Spark整合yarn 原因：==在公司一般不适用standalone模式，因为公司一般已经有yarn 不需要搞两个资源管理框架== 停止spark集群 在spark sbin目录下执行 ./stop-all.sh spark整合yarn只需要在一个节点整合, 可以删除node1 和node2中所有 阅读全文
posted @ 2022-07-13 13:41 a-tao必须奥利给 阅读(138) 评论(0) 推荐(0)