会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
深圳私塾
2019年9月5日
[In A Word]In A Word章10 Flink Window的Watermarks和allowedLateness的区别
摘要: Watermartks是通过additional的时间戳来控制窗口激活的时间,allowedLateness来控制窗口的销毁时间。 1. 一条记录的事件时间来控制此条记录属于哪一个窗口,Watermarks来控制这个窗口什么时候激活。 2. 假如一个窗口时间为00:00:00~00:00:05,Wa
阅读全文
posted @ 2019-09-05 11:46 深圳私塾
阅读(197)
评论(0)
推荐(0)
[In A Word]In A Word章9 Flink 的WaterMark
摘要: watermark是一种衡量Event Time进展的机制,它是数据本身的一个隐藏属性。通常基于Event Time的数据,自身都包含一个timestamp.watermark是用于处理乱序事件的,而正确的处理乱序事件,通常用watermark机制结合window来实现 window的触发要符合以下
阅读全文
posted @ 2019-09-05 11:33 深圳私塾
阅读(256)
评论(0)
推荐(0)
[In A Word]In A Word章8 Flink的TimeCharacteristic
摘要: Flink的TimeCharacteristic枚举定义了三类值,分别是ProcessingTime、IngestionTime、EventTime ProcessingTime是以operator处理的时间为准,它使用的是机器的系统时间来作为data stream的时间;IngestionTime
阅读全文
posted @ 2019-09-05 11:12 深圳私塾
阅读(234)
评论(0)
推荐(0)
导航
博客园
首页
新随笔
联系
订阅
管理
公告