随笔分类 -  BI—Kafka

摘要:Zookeeper节点标记当路径中的元素包括在方括号里比如[xyz],则表示xyz表示的值是不固定的,每个可能的值都有一个Zookeeper节点。比如/topics/[topic]表示每个topic名称对应/topics的一个子目录。也可以用类似[0...5]表示一个数值范围来表示含有子目录0,1,... 阅读全文
posted @ 2015-01-14 11:12 TonyChai 阅读(197) 评论(0) 推荐(0)
摘要:介绍Kafka是一个分布式的、可分区的、可复制的消息系统。它提供了普通消息系统的功能,但具有自己独特的设计。这个独特的设计是什么样的呢?首先让我们看几个基本的消息系统术语:Kafka将消息以topic为单位进行归纳。将向Kafka topic发布消息的程序成为producers.将预订topics并... 阅读全文
posted @ 2015-01-14 10:37 TonyChai 阅读(204) 评论(0) 推荐(0)
摘要:准备3台虚拟机, 系统是RHEL64服务版. 1) 每台机器配置如下:$ cat /etc/hosts # zookeeper hostnames: 192.168.8.182 zk1 192.168.8.183 zk2 192.168.8.184 zk3 2) 每台机器上安装jdk, zoo... 阅读全文
posted @ 2014-11-25 17:16 TonyChai 阅读(681) 评论(0) 推荐(0)
摘要:Replication简介 Kafka中的Replication功能是为了给每个partition提供备份,当某个Broker挂掉时可以迅速实现故障切换(failover)。我们可以在创建或修改topic时指定replica factor,来设定备份数目。请阅读如下实例来准确理解该参数作用:如果一个... 阅读全文
posted @ 2014-11-25 16:40 TonyChai 阅读(1002) 评论(0) 推荐(0)