随笔分类 -  kafka

kafka分类文章
摘要:1:如果在一个Flume Agent中同时使用Kafka Source和Kafka Sink来处理events,便会遇到Kafka Topic覆盖问题,具体表现为,Kafka Source可以正常从指定的Topic中读取数据,但在Kafka Sink中配置的目标Topic不起作用,数据仍然会被写入到 阅读全文
posted @ 2017-08-15 17:02 songpingyi 阅读(1442) 评论(0) 推荐(0)
摘要:一:在项目中引入对应的JAR包,如下,注意对应的包与之前包的冲突 <dependencies> <dependency> <groupId>junit</groupId> <artifactId>junit</artifactId> <version>3.8.1</version> <scope>t 阅读全文
posted @ 2017-08-09 17:36 songpingyi 阅读(831) 评论(0) 推荐(0)
摘要:创建topics kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partition 3 --topic testsong 列出所有的topic列表 kafka-topics.bat -lis 阅读全文
posted @ 2017-08-09 10:05 songpingyi 阅读(858) 评论(0) 推荐(0)