随笔分类 -  Kafka

摘要:一、背景 腾讯Flink使用 KafkaSource API创建source端,源码中默认开启了checkpoint的时候提交offset 到kafka-broker。读取kafka数据写入到iceberg 目前发现一个问题,就是消费数据的时候,消费一段时间后,kafka-group的 offset 阅读全文
posted @ 2024-04-25 15:05 Robots2 阅读(618) 评论(0) 推荐(0)
摘要:1、清空某个topic数据 需要在service设置delete.topic.enable=true ./bin/kafka-topics.sh --zookeeper 172.23.75.105:2181 --delete --topic robots2 2、查看topic列表 ./bin/kaf 阅读全文
posted @ 2021-07-28 14:06 Robots2 阅读(375) 评论(0) 推荐(0)