随笔分类 -  流式计算

Storm内部的消息传递机制
摘要: 本文主要讲解消息在Storm内部的各个组件(Component)之间如何进行传递,本文适用于JStorm 2.1.0以后的版本 阅读全文

posted @ 2016-04-27 22:49 生栋 阅读(7326) 评论(0) 推荐(1) 编辑

Storm介绍(二)
摘要: Storm是继Hadoop之后又一个火爆全球的开源大数据处理平台,不过它跟Hadoop不一样,它不是批处理系统而是处理复杂事件的流式数据处理平台。Hadoop处理的是静态的数据,而Storm处理的是动态的、连续的数据。 阅读全文

posted @ 2016-03-30 00:02 生栋 阅读(2823) 评论(1) 推荐(1) 编辑

Storm如何保证可靠的消息处理
摘要:Storm的可靠性机制是完全分布式的(distributed),可伸缩的(scalable),容错的(fault-tolerant)。本文介绍了Storm如何保证可靠性以及作为Storm使用者,我们需要怎么做,才能充分利用Storm的可靠性。 阅读全文

posted @ 2015-09-16 07:23 生栋 阅读(8963) 评论(2) 推荐(4) 编辑

理解Storm并发
摘要:通过两张图片轻松理解流式数据处理平台Storm中worker,task和executor之间的关系 阅读全文

posted @ 2015-08-03 06:23 生栋 阅读(6773) 评论(0) 推荐(2) 编辑

Storm介绍(一)
摘要: Storm是继Hadoop之后又一个火爆全球的开源大数据处理平台,不过它跟Hadoop不一样,它不是批处理系统而是处理复杂事件的流式数据处理平台。Hadoop处理的是静态的数据,而Storm处理的是动态的、连续的数据。 阅读全文

posted @ 2015-07-25 18:41 生栋 阅读(58124) 评论(8) 推荐(10) 编辑

导航