随笔分类 -  storm

learning journal
storm中KafkaSpout的选择
摘要：Storm最常用的消息源就是Kafka，在对接的时候大多需要使用KafkaSpout； 在网上大概有两种KafkaSpout，一种是只有几十行，一种却有一大啪啦类文件。 在kafka中，同一个partition中的消息只能被同一个组的一个consumer消费，不能并发，所以kafka的并发说的是多p 阅读全文
posted @ 2015-05-07 10:14 Daem0n 阅读(2018) 评论(0) 推荐(0)
storm中几个概念的大小关系
摘要：从图可以看出来:topology>supervisor>worker>excutor>task; 也就是说一个topology可以运行在多个supervisor上，一个supervisor可以运行多个worker（进程），一个worker里面可以有多个excutor（线程），一个excutor可以运 阅读全文
posted @ 2015-05-06 11:53 Daem0n 阅读(260) 评论(0) 推荐(0)
storm 分组
摘要： 阅读全文
posted @ 2015-04-13 09:23 Daem0n 阅读(475) 评论(0) 推荐(0)
flume+kafka+storm
摘要：centos06.6+JDK1.7 flume1.4+kafka2.10+storm0.9.3 zookeeper3.4.6 集群： 192.168.80.133 x01 192.168.80.134 x02 1.两台机器上设置hostname和hosts 。。。 2.两台机器上安装JDK并设置环境 阅读全文
posted @ 2015-03-31 20:03 Daem0n 阅读(1099) 评论(0) 推荐(0)
storm0.9.0.1安装
摘要： 阅读全文
posted @ 2015-03-30 14:16 Daem0n 阅读(492) 评论(0) 推荐(0)