07 2020 档案

摘要:一、底层API:ProcessFunction(event,state,time) ProcessFunction 可以处理一或两条输入数据流中的单个事件或者归入一个特定窗口内的多个事件。它提供了对于时间和状态的细粒度控制。开发者可以在其中任意地修改状态,也能够注册定时器用以在未来的某一时刻触发回调 阅读全文
posted @ 2020-07-31 15:30 里子of* 阅读(908) 评论(0) 推荐(0)
摘要:一、概述 1、架构简介 Apache Flink 是一个框架和分布式处理引擎,用于在无边界和有边界数据流上进行有状态的计算。Flink 能在所有常见集群环境中运行,并能以内存速度和任意规模进行计算。Flink 集成了所有常见的集群资源管理器,例如 Hadoop YARN、 Apache Mesos  阅读全文
posted @ 2020-07-29 16:52 里子of* 阅读(3658) 评论(0) 推荐(0)
摘要:一、高可用HDFS hadoop基础组成:https://www.cnblogs.com/funyoung/p/9889719.html 1、HDFS基础结构 2、高可用HDFS架构 主备切换控制器 ZKFailoverController:ZKFailoverController 作为独立的进程运 阅读全文
posted @ 2020-07-23 14:57 里子of* 阅读(1386) 评论(0) 推荐(0)