06 2020 档案

flink面试题待整理
摘要:https://blog.csdn.net/qq_34936033/article/details/106179987?utm_medium=distribute.pc_relevant.none-task-blog-baidujs-1 阅读全文

posted @ 2020-06-29 10:24 hdc520 阅读(1357) 评论(0) 推荐(0)

spark与flink的区别
摘要:(1)设计理念 1、Spark的技术理念是使用微批来模拟流的计算,基于Micro-batch,数据流以时间为单位被切分为一个个批次,通过分布式数据集RDD进行批量处理,是一种伪实时。 2、Flink是基于事件驱动的,是面向流的处理框架, Flink基于每个事件一行一行地流式处理,是真正的流式计算. 阅读全文

posted @ 2020-06-29 10:16 hdc520 阅读(12125) 评论(0) 推荐(2)

wordcount代码示例
摘要:一、wordCount 基类Mapper类和Reducer类中都是只包含四个方法:setup方法,cleanup方法,run方法,map方法。在run方法中调用了上面的三个方法:setup方法,map方法,cleanup方法。其中setup方法和cleanup方法默认是不做任何操作,且它们只被执行一 阅读全文

posted @ 2020-06-27 12:14 hdc520 阅读(531) 评论(0) 推荐(0)

求两数之和
摘要:(1)字符串表示两数 题目:输入两个非空二进制字符串且只包含数字 1 和 0。返回两数之和; 输入: a = "11", b = "1" 输出: "100" 1 class Solution { 2 public String addBinary(String a, String b) { 3 St 阅读全文

posted @ 2020-06-23 10:35 hdc520 阅读(296) 评论(0) 推荐(0)

flink的底层processionFunctionAPI
摘要:一、processionFunctionAPI产生背景 (1)背景:转换算子是无法访问事件的时间戳信息和水位线信息的。例如MapFunction这样的map转换算子就无法访问时间戳或者当前事件的事件时间。这样的算子和函数能够进行一些时间上的操作,但是不能获取算子当前的Processing Time或 阅读全文

posted @ 2020-06-12 17:25 hdc520 阅读(576) 评论(0) 推荐(0)

导航