03 2020 档案

Flink的八种分区策略源码解读
摘要：... 阅读全文
posted @ 2020-03-31 09:00 大数据技术与数仓 阅读(1155) 评论(0) 推荐(0)
Flink的八种分区策略源码解读
摘要：Flink包含8中分区策略，这8中分区策略(分区器)分别如下面所示，本文将从源码的角度一一解读每个分区器的实现方式。 GlobalP... 阅读全文
posted @ 2020-03-30 21:24 大数据技术与数仓 阅读(756) 评论(0) 推荐(0)
基于Canal与Flink实现数据实时增量同步(二)
摘要：本文主要从Binlog实时采集和离线处理Binlog还原业务数据两个方面，来介绍如何实现DB数据准确、高效地进入Hive数仓。 背... 阅读全文
posted @ 2020-03-29 12:57 大数据技术与数仓 阅读(729) 评论(0) 推荐(0)
基于Canal与Flink实现数据实时增量同步(一)
摘要：canal是阿里巴巴旗下的一款开源项目，纯Java开发。基于数据库增量日志解析，提供增量数据订阅&消费，目前主要支持了MySQL（... 阅读全文
posted @ 2020-03-29 12:52 大数据技术与数仓 阅读(629) 评论(0) 推荐(0)
基于Canal与Flink实现数据实时增量同步(二)
摘要：... 阅读全文
posted @ 2020-03-29 10:00 大数据技术与数仓 阅读(491) 评论(0) 推荐(0)
Flink的状态后端(State Backends) 转
摘要：... 阅读全文
posted @ 2020-03-28 10:00 大数据技术与数仓 阅读(270) 评论(0) 推荐(0)
Flink运行架构剖析 转
摘要：... 阅读全文
posted @ 2020-03-27 08:00 大数据技术与数仓 阅读(103) 评论(0) 推荐(0)
CDH集群之YARN性能调优
摘要：... 阅读全文
posted @ 2020-03-26 08:00 大数据技术与数仓 阅读(1570) 评论(0) 推荐(0)
基于Canal与Flink实现数据实时增量同步(一)
摘要：... 阅读全文
posted @ 2020-03-25 21:51 大数据技术与数仓 阅读(479) 评论(0) 推荐(0)