摘要: 2.Flink实时项目之Maxwell介绍 Maxwell 是由美国 Zendesk 开源,用 Java 编写的 MySQL 实时抓取软件。 实时读取MySQL 二进制日志 Binlog,并生成 JSON 格式的消息,作为生产者发送给 Kafka,Kinesis、RabbitMQ、Redis、Google Cloud Pub/Sub、文件或其它平台的应用程序。 阅读全文
posted @ 2022-02-10 23:21 选手一号位 阅读(446) 评论(0) 推荐(0)
摘要: 3.Flink实时项目之流程分析及环境搭建 前面已经将日志数据(ods_base_log)及业务数据(ods_base_db_m)发送到kafka,作为ods层,接下来要做的就是通过flink消费kafka 的ods数据,进行简单的处理作为dwd层,然后再写回到kafka。 阅读全文
posted @ 2022-02-10 23:08 选手一号位 阅读(207) 评论(0) 推荐(0)