随笔分类 -  kafka

摘要:1先zookeeper+kafka搭建完成。搭建博客 https://www.cnblogs.com/wendyluo/p/13232741.html 也把firebeat源安装上 filebeat安装博客 https://www.cnblogs.com/wendyluo/p/13259417.ht 阅读全文
posted @ 2020-07-07 11:15 luowendy 阅读(233) 评论(0) 推荐(0)
摘要:Filebeat是本地文件的日志数据采集器,可监控日志目录或特定日志文件(tail file),并将它们转发给Elasticsearch或Logstatsh进行索引、kafka等。带有内部模块(auditd,Apache,Nginx,System和MySQL),可通过一个指定命令来简化通用日志格式的 阅读全文
posted @ 2020-07-07 10:38 luowendy 阅读(544) 评论(0) 推荐(0)
摘要:因为Kafka集群是把状态信息保存在Zookeeper中的,并且Kafka的动态扩容是通过Zookeeper来实现的,所以需要优先搭建Zookeerper集群,建立分布式状态管理。开始准备环境,搭建集群: zookeeper是基于Java环境开发的所以需要先安装Java 然后这里使用的zookeep 阅读全文
posted @ 2020-07-03 21:20 luowendy 阅读(358) 评论(0) 推荐(0)