随笔分类 -  kafka

kafka
摘要:脚本位置 cd /home/hadoop/bin 脚本内容 vi kafka.sh #输入以下内容 #!/bin/bash case $1 in "start" ){ for(( i = 1;i <= 3;i = $i +1));do echo hadoop0$i kafka $1 ssh hado 阅读全文
posted @ 2021-06-20 14:57 Tenic 阅读(166) 评论(0) 推荐(0)
摘要:1、创建topic 使用 kafka-topics.sh脚本 kafka-topics.sh --create --partitions 3 --replication-factor 2 --topic test --zookeeper hadoop01:2181,hadoop02:2181,had 阅读全文
posted @ 2021-06-20 14:49 Tenic 阅读(149) 评论(3) 推荐(0)
摘要:1 集群安装部署 1、下载安装包(http://kafka.apache.org) https://archive.apache.org/dist/kafka/1.1.0/kafka_2.11-1.1.0.tgz kafka_2.11-1.1.0.tgz 2、规划安装目录 /bigdata/inst 阅读全文
posted @ 2021-06-20 14:47 Tenic 阅读(618) 评论(0) 推荐(0)
摘要:1 Kafka简介 ​Kafka是最初由Linkedin公司开发,它是一个分布式、可分区、多副本,基于zookeeper协调的分布式日志系统;常见可以用于web/nginx日志、访问日志,消息服务等等。Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。主要应用场景是:日志收集 阅读全文
posted @ 2021-06-20 14:36 Tenic 阅读(1182) 评论(0) 推荐(0)