狂乱的贵公子

摘要： push vs pull 阅读全文

摘要： Producer API org.apache.kafka.clients.producer.KafkaProducer producer由一个缓冲池组成，这个缓冲池中维护着那些还没有被传送到服务器上的记录，而且有一个后台的I/O线程负责将这些记录转换为请求并将其传送到集群上去。 send()方法是 阅读全文

摘要： Step 1: Download the code Step 2: Start the server Step 3: Create a topic Step 4: Send some messages Step 5: Start a consumer Step 6: Setting up a mul 阅读全文

摘要： kafka对于构建实时的数据管道和流应用是很有用的。 Apache Kafka是一个分布式的流平台。这是什么意思呢？ 我们考虑流平台有三个关键的能力： Kafa有什么用呢？ 它被用于两类应用： 那么Kafka是怎样做到这些事情的呢？ 首先来看一些概念： Kafka是以集群方式运行的 Kafka集群将 阅读全文

摘要： 无论是基于注解的ApplicationContext（org.springframework.context.annotation.AnnotationConfigApplicationContext） 还是基于XML的ApplicationContext（org.springframework.c 阅读全文

摘要： Understanding the Parallelism of a Storm Topology What makes a running topology: worker processes, executors and tasks 在一个Strom集群中，实际运行一个topology有三个主要 阅读全文

摘要： 阅读全文

摘要： Daemon Fault Tolerance Storm有一些不同的守护进程 Nimbus负责调度workers supervisors负责运行和杀死workers log views负责访问日志 UI负责显示集群的状态 What happens when a worker dies? 当一个wor 阅读全文

摘要： Guaranteeing Message Processing Storm保证每一个tuple被完全处理。Strom中一个核心的机制是它提供了一种跟踪tuple血统的能力，它使用了一种十分有效的方式跟踪topology中的tuple。 Storm中最基本的抽象是提供了至少一次（at-least-on 阅读全文

摘要： storm集群安装 阅读全文