随笔分类 -  Spark_Flink

大数据 SQL和机器学习
摘要:##Spark内容 1.Spark的内存模型 2.Spark的执行过程 3.SparkSQL的执行过程 本次主要理解和整理执行过程 ###1.简单介绍Spark的执行过程 概念: SparkContext-- Driver-- Executor- DAG Scheduler - TaskSchedu 阅读全文
posted @ 2020-09-24 10:23 辰令 阅读(163) 评论(0) 推荐(0)
摘要:SparkSQL执行过程 SparkSQL中的Join类型 阅读全文
posted @ 2020-09-22 19:58 辰令 阅读(2091) 评论(0) 推荐(0)
摘要:数据输入 数据转换 数据输出 阅读全文
posted @ 2020-09-22 12:51 辰令 阅读(484) 评论(0) 推荐(0)
摘要:Spark基本开发流程 阅读全文
posted @ 2020-09-17 19:19 辰令 阅读(442) 评论(0) 推荐(0)
摘要:频繁项集,关联规则,支持度,置信度,提升度 阅读全文
posted @ 2020-08-19 19:08 辰令 阅读(812) 评论(0) 推荐(0)