2020年7月22日
7 window API
摘要： 一 时间窗口 我们可以用window函数来创建一个窗口,需要提供窗口分配器. 但有些提供了更方便的方法来创建窗口. 开窗之前必须要先使用keyby函数进行分区. 1. 滚动时间窗口 timeWindow(Time.seconds(5)) 2. 滑动窗口 timeWindow(Time.seconds 阅读全文
posted @ 2020-07-22 21:35 哥的寂寞你不懂 阅读(119) 评论(0) 推荐(0)
6 Flink API
摘要： 1. map map和spark的map一样 map(r => { (r.id,r.name) }) 也可以自定义mapfunction package test2 import org.apache.flink.api.common.functions.MapFunction import org 阅读全文
posted @ 2020-07-22 08:31 哥的寂寞你不懂 阅读(202) 评论(0) 推荐(0)
5 flink sink
摘要： 一 从kafka构建source 和 sink def main(args: Array[String]): Unit = { val env = StreamExecutionEnvironment.getExecutionEnvironment env.setParallelism(1) val 阅读全文
posted @ 2020-07-22 08:14 哥的寂寞你不懂 阅读(209) 评论(0) 推荐(0)