2021年5月
6_Flink 的容错机制
摘要： 文章来源与《尚硅谷2021最新Java版Flink（武老师清华硕士，原IBM-CDL负责人）》 https://www.bilibili.com/video/BV1qy4y1q728 ###主要内容 • 一致性检查点（checkpoint） • 从检查点恢复状态 • Flink 检查点算法 • 保存 阅读全文
posted @ 2021-05-07 14:31 Eistert 阅读(147) 评论(0) 推荐(0)
5_Flink的状态管理
摘要： 文章来源与《尚硅谷2021最新Java版Flink（武老师清华硕士，原IBM-CDL负责人）》 https://www.bilibili.com/video/BV1qy4y1q728 ###主要内容 • Flink 中的状态 • 算子状态（Operatior State） • 键控状态（Keyed 阅读全文
posted @ 2021-05-07 14:01 Eistert 阅读(197) 评论(0) 推荐(0)
4_Flink中的时间语义和watermark
摘要： 文章来源与《尚硅谷2021最新Java版Flink（武老师清华硕士，原IBM-CDL负责人）》 https://www.bilibili.com/video/BV1qy4y1q728 ###主要内容 • Flink 中的时间语义 • 设置 Event Time • 水位线（Watermark） • 阅读全文
posted @ 2021-05-07 11:44 Eistert 阅读(245) 评论(0) 推荐(0)
3_Flink window API
摘要： 文章来源与《尚硅谷2021最新Java版Flink（武老师清华硕士，原IBM-CDL负责人）》 https://www.bilibili.com/video/BV1qy4y1q728 ###主要内容 window 概念 window 类型 window API ###窗口（window） 一般真实的 阅读全文
posted @ 2021-05-07 11:02 Eistert 阅读(154) 评论(0) 推荐(0)
2_Flink 运行架构 -讲师：武晟然
摘要： 文章来源与《尚硅谷2021最新Java版Flink（武老师清华硕士，原IBM-CDL负责人）》 https://www.bilibili.com/video/BV1qy4y1q728 ###主要内容 • Flink 运行时的组件 • 任务提交流程 • 任务调度原理 ###Flink 运行时的组件 # 阅读全文
posted @ 2021-05-07 10:23 Eistert 阅读(1082) 评论(0) 推荐(0)
1_Flink简介
摘要： 文章来源与《尚硅谷2021最新Java版Flink（武老师清华硕士，原IBM-CDL负责人）》 https://www.bilibili.com/video/BV1qy4y1q728 ###Flink 流处理简介 ###主要内容 • Flink 是什么 • 为什么要用 Flink • 流处理的发展和 阅读全文
posted @ 2021-05-06 18:32 Eistert 阅读(198) 评论(0) 推荐(1)
MaxWell ops
摘要： ###Download Download binary distro: https://github.com/zendesk/maxwell/releases/download/v1.33.0/maxwell-1.33.0.tar.gz Sources and bug tracking is ava 阅读全文
posted @ 2021-05-06 17:41 Eistert 阅读(101) 评论(0) 推荐(0)
linux command
摘要： ###查看服务器公网ip curl cip.cc ###禁用用透明大页面压缩 sudo echo never > /sys/kernel/mm/transparent_hugepage/defrag sudo echo never > /sys/kernel/mm/transparent_hugep 阅读全文
posted @ 2021-05-06 17:35 Eistert 阅读(81) 评论(0) 推荐(0)
fllink tast test
摘要： ###内置案例 ###第一种方式，永久集群 bin/flink run ./examples/batch/WordCount.jar bin/flink run ./examples/batch/WordCount.jar ###第二种方式 临时集群 export HADOOP_CLASSPATH= 阅读全文
posted @ 2021-05-06 17:31 Eistert 阅读(52) 评论(0) 推荐(0)
ElasticSearch ops command
摘要： ###Docker安装ElasticSearch docker pull elasticsearch:7.12.0 ###查看本地镜像列表 docker images | grep elasticsearch ###运行镜像 docker run --name elasticsearch -d -p 阅读全文
posted @ 2021-05-06 17:29 Eistert 阅读(49) 评论(0) 推荐(0)