摘要:
在流处理程序中,往往会涉及到关联维表的操作 对于维表数据量较大的:我们可以使用异步IO+Guava Cache的方式,通过访问本地缓存来关联数据,缓存中没有的数据通过异步IO去查询,将查询的结果put到Guava Cache中,通过Guava Cache的缓存失效来做到维表数据的定时更新。 对于维表 阅读全文
posted @ 2021-08-26 16:30
iiiliii
阅读(1837)
评论(0)
推荐(1)
摘要:
用 DataStream API 编写的程序通常以各种形式保存状态: 在 Window 触发之前要么收集元素、要么聚合 转换函数可以使用 key/value 格式的状态接口来存储状态 转换函数可以实现 CheckpointedFunction 接口,使其本地变量具有容错能力 在介绍状态之前,先了解一 阅读全文
posted @ 2021-08-26 15:43
iiiliii
阅读(274)
评论(0)
推荐(1)

浙公网安备 33010602011771号