我的随笔

hdfs架构整理

习惯了蓝 2022-05-21 19:41 阅读:275 评论:0 推荐:0

DDL中的建表语句通用语法整理

习惯了蓝 2022-04-12 15:57 阅读:170 评论:0 推荐:0

spark-streaming-kafka-0-10源码分析和spark闭包的链接整理

习惯了蓝 2022-04-07 12:45 阅读:43 评论:0 推荐:0

spark streaming整合kafka中非聚合类运算如何和kafka保持exactly once一致性语义（幂等性方式）

习惯了蓝 2022-04-07 12:23 阅读:56 评论:0 推荐:0

spark streaming整合kafka中聚合类运算如何和kafka保持exactly once一致性语义（redis方式，利用pipeline）

习惯了蓝 2022-04-05 21:20 阅读:139 评论:0 推荐:0

spark streaming整合kafka中聚合类运算如何和kafka保持exactly once一致性语义（mysql方式，利用事务）

习惯了蓝 2022-04-05 21:19 阅读:90 评论:0 推荐:0

SparkStream整合Kafka直连方式的自动提交和手动提交偏移量

习惯了蓝 2022-04-05 21:15 阅读:482 评论:0 推荐:0

shuffle

习惯了蓝 2022-03-30 23:00 阅读:863 评论:0 推荐:0

task的序列化问题和线程安全问题

习惯了蓝 2022-03-30 16:57 阅读:101 评论:0 推荐:0

RangePartitioner，sortby,sortbykey

习惯了蓝 2022-03-29 23:51 阅读:23 评论:0 推荐:0