摘要: 一、概述 Kafka在雅虎内部被很多团队使用,媒体团队用它做实时分析流水线,可以处理高达20Gbps(压缩数据)的峰值带宽。 为了简化开发者和服务工程师维护Kafka集群的工作,构建了一个叫做Kafka管理器的基于Web工具,叫做 Kafka Manager。这个管理工具可以很容易地发现分布在集群中 阅读全文
posted @ 2016-05-02 23:15 sunney 阅读(8100) 评论(0) 推荐(3) 编辑
摘要: 一、概述 Spring Integration Kafka 是基于 Apache Kafka 和Spring Integration来集成Kafka,对开发配置提供了方便。 二、配置 1、spring-kafka-consumer.xml 2、spring-kafka-producer.xml 3、 阅读全文
posted @ 2016-05-02 22:16 sunney 阅读(12817) 评论(4) 推荐(3) 编辑
摘要: 一、Kafka概述 Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。 这种动作(网页浏览,搜索和其他用户的行动)是在现代网络上的许多社会功能的一个关键因素。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。 对于像Hadoop的一样的日志 阅读全文
posted @ 2016-05-02 15:51 sunney 阅读(1577) 评论(0) 推荐(4) 编辑