2023年6月1日
Flink流式数据缓冲后批量写入Clickhouse
摘要： 一、背景 对于clickhouse有过使用经验的开发者应该知道，ck的写入，最优应该是批量的写入。但是对于流式场景来说，每批写入的数据量都是不可控制的，如kafka，每批拉取的消息数量是不定的，flink对于每条数据流的输出，写入ck的效率会十分缓慢，所以写了一个demo，去批量入库。生产环境使用还 阅读全文
posted @ 2023-06-01 17:21 Robots2 阅读(2072) 评论(0) 推荐(1)