[置顶] Flink State Backends (状态后端)
摘要： State Backends 的作用 有状态的流计算是Flink的一大特点，状态本质上是数据，数据是需要维护的，例如数据库就是维护数据的一种解决方案。State Backends 的作用就是用来维护State的。一个 State Backend 主要负责两件事：Local State Managem 阅读全文
posted @ 2020-01-02 18:19 wangxiaofan~ 阅读(2531) 评论(0) 推荐(0)
2020年1月6日
Flink Window Trigger（触发器）
摘要： Trigger 的作用 英文单词 trigger 的意思是触发，作为名词是扳机的意思，例如枪支上的扳机就叫 trigger，所以也有开火的意思。Flink中，window操作需要伴随对窗口中的数据进行处理的逻辑，也就是窗口函数，而 Trigger 的作用就是决定何时触发窗口函数中的逻辑执行。 Tri 阅读全文
posted @ 2020-01-06 14:17 wangxiaofan~ 阅读(10095) 评论(0) 推荐(0)
2019年12月10日
Apache Kylin
摘要： Overview Kylin的使命是超高速的大数据OLAP（Online Analytical Processing），也就是要让大数据分析像使用数据库一样简单迅速，用户的查询请求可以在秒内返回。其中的关键就是打破查询时间随着数据量成线性增长的这个规律。解决方案是针对维度聚合的预计算，因为由于业务范 阅读全文
posted @ 2019-12-10 11:15 wangxiaofan~ 阅读(169) 评论(0) 推荐(0)