会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
楠鸽
博客园
首页
新随笔
联系
订阅
管理
2020年10月15日
Flink1.11.1-SQL空闲状态保留时间实现原理
摘要: Flink SQL 一般按照窗口统计,统计的指标值用状态存储,窗口关闭之后,数据输出到sink表,就很少会用到这些数据。由于统计的粒度非常的细,Flink SQL 任务中的状态就会非常大,导致 HDFS 上面的存储占用过大。Flink SQL 中支持状态空闲时间的设置,如果某个 Key 的状态在一定 时间没有被更新, Flink 会自动清理该状态。
阅读全文
posted @ 2020-10-15 23:21 楠鸽
阅读(1296)
评论(0)
推荐(0)
公告