2020年6月23日
flink底层API:KeyedProcessFunction
摘要： KeyedSteam可以调用process方法, 该方法可以接受一个KeyedProcessFunction类型的参数. KeyedProcessFunction类型的上层父类是RichFunction, 对分流后每一个元素调用一次KeyedProcessFunction中的elementProcess方法，可以通过Context调用timeServier, 注册定时器, 获得当前水位线... 阅读全文
posted @ 2020-06-23 19:51 bitbitbyte 阅读(1060) 评论(0) 推荐(0)
拉链表
摘要： 概述 过程: 新建初始表, 增加开始时间, 结束时间, 两个字段 新建临时表, 包含开始时间, 与结束时间 修改初始表(旧表)中变化数据对应的结束时间后, 将初始表(旧表)数据插入到临时表中, 之后UNION ALL 当天的新增与变化数据. 将临时表覆盖初始表(或旧表)的数据 核心是生成临时表的两步: 只要修改旧表中变化数据的日期(当天日期-1) 然后UNION ALL 当天变化和新... 阅读全文
posted @ 2020-06-23 19:14 bitbitbyte 阅读(382) 评论(0) 推荐(0)