随笔分类 -  日志收集

日志收集
摘要:1:如果在一个Flume Agent中同时使用Kafka Source和Kafka Sink来处理events,便会遇到Kafka Topic覆盖问题,具体表现为,Kafka Source可以正常从指定的Topic中读取数据,但在Kafka Sink中配置的目标Topic不起作用,数据仍然会被写入到 阅读全文
posted @ 2017-08-15 17:02 songpingyi 阅读(1476) 评论(0) 推荐(0)
摘要:一:在项目中引入对应的JAR包,如下,注意对应的包与之前包的冲突 <dependencies> <dependency> <groupId>junit</groupId> <artifactId>junit</artifactId> <version>3.8.1</version> <scope>t 阅读全文
posted @ 2017-08-09 17:36 songpingyi 阅读(850) 评论(0) 推荐(0)
摘要:一、安装 二、运行 2.打开cmd进入到apache-flume-1.7.0-bin\bin目录下,运行如下命令。 3.另外打开一个cmd窗口,运行如下命令。 如果连接成功,则该窗口会变为输入状态,可以输入文字。同时在步骤2中的cmd窗口中,也会显示接收到的信息。 效果图(右键查看原图): 阅读全文
posted @ 2017-07-19 15:34 songpingyi 阅读(622) 评论(0) 推荐(0)