随笔分类 - 流式计算

Storm内部的消息传递机制
摘要: 本文主要讲解消息在Storm内部的各个组件(Component)之间如何进行传递,本文适用于JStorm 2.1.0以后的版本阅读全文

posted @ 2016-04-27 22:49 Jack47 阅读(5475) | 评论 (0) 编辑

Storm介绍(二)
摘要: Storm是继Hadoop之后又一个火爆全球的开源大数据处理平台,不过它跟Hadoop不一样,它不是批处理系统而是处理复杂事件的流式数据处理平台。Hadoop处理的是静态的数据,而Storm处理的是动态的、连续的数据。阅读全文

posted @ 2016-03-30 00:02 Jack47 阅读(1807) | 评论 (0) 编辑

Storm如何保证可靠的消息处理
摘要: Storm的可靠性机制是完全分布式的(distributed),可伸缩的(scalable),容错的(fault-tolerant)。本文介绍了Storm如何保证可靠性以及作为Storm使用者,我们需要怎么做,才能充分利用Storm的可靠性。阅读全文

posted @ 2015-09-16 07:23 Jack47 阅读(6107) | 评论 (2) 编辑

理解Storm并发
摘要: 通过两张图片轻松理解流式数据处理平台Storm中worker,task和executor之间的关系阅读全文

posted @ 2015-08-03 06:23 Jack47 阅读(4572) | 评论 (0) 编辑

Storm介绍(一)
摘要: Storm是继Hadoop之后又一个火爆全球的开源大数据处理平台,不过它跟Hadoop不一样,它不是批处理系统而是处理复杂事件的流式数据处理平台。Hadoop处理的是静态的数据,而Storm处理的是动态的、连续的数据。阅读全文

posted @ 2015-07-25 18:41 Jack47 阅读(22045) | 评论 (7) 编辑

导航

统计

  • 随笔 - 65
  • 文章 - 0
  • 评论 - 109
  • 引用 - 0