2019年11月21日

摘要: gamelogs2kafka.conf kafka2es.conf 数据格式 阅读全文
posted @ 2019-11-21 20:45 勇者无畏强者无敌 阅读(713) 评论(0) 推荐(0) 编辑

2019年11月12日

摘要: day1112 一. Spark Core回顾 1 集群启动 2 任务提交 3 缓存 4 checkPoint 5 自定义排序 6 自定义分区器 7 自定义累加器 8 广播变量 9 Spark Shuffle过程(重要) 10 SparkSQL 阅读全文
posted @ 2019-11-12 20:26 勇者无畏强者无敌 阅读(190) 评论(0) 推荐(0) 编辑
摘要: Day1111 一.Spark Core 1 Spark任务调度: 2 Spark几个重要的组件 3 Spark Core: RDD的概念和特性 4 生成RDD的两种类型 5 RDD算子的两种类型 6 算子练习 7 分区 8 RDD的依赖关系 9 DAG 阅读全文
posted @ 2019-11-12 11:11 勇者无畏强者无敌 阅读(360) 评论(0) 推荐(0) 编辑

导航