2022年3月21日
Flink基石----Window
摘要： Flink基石 Window Flink中的Window包含三部分： 1、Time Window 时间窗口 2、Session Window 会话窗口（待没有数据的时候开始计算） 3、Count Window 统计窗口（每n条数据计算一次） 一、Time Window 时间窗口 时间窗口包含四部分： 阅读全文
posted @ 2022-03-21 21:55 阿伟宝座 阅读(149) 评论(0) 推荐(0)
spark 调优、spark 代码的优化
摘要： spark 调优、spark 代码的优化 目录 spark 调优 spark 代码的优化 对多次使用的RDD进行持久化 使用高性能的算子 使用foreachPartitions替代foreach Action算子 重分区 使用filter之后进行coalesce操作 广播大变量 使用Kryo优化序列 阅读全文
posted @ 2022-03-21 17:18 阿伟宝座 阅读(182) 评论(0) 推荐(0)