随笔分类 -  kafka

摘要:4.6 Message Delivery Semantic(消息传递语义) 现在我们了解了生产者和消费者的工作方式,让我们讨论Kafka在生产者和消费者之间提供的语义保证。显然,可以提供多种可能的消息传递保证: 最多一次 -消息可能会丢失,但永远不会被重新发送。 至少一次 -消息永远不会丢失,但可能 阅读全文
posted @ 2018-08-18 00:58 胜迹寻芳 阅读(267) 评论(0) 推荐(0)
摘要:4 Design(设计、构思): 4.1 Motivation(Kafka设计动机): 我们设计Kafka的目标是能够成为一个统一的平台,能够作为处理大公司(就是大数据量,复杂的业务场景)所拥有的实时数据流。为此,我们必须考虑一些使用场景,比如说: 支持这些用途,需要使用到有许多独特元素的设计,它可 阅读全文
posted @ 2018-08-07 19:22 胜迹寻芳 阅读(253) 评论(0) 推荐(0)
摘要:前文链接: (一)Kafka0.8.2官方文档中文版系列-入门指南 (二)Kafka0.8.2官方文档中文版系列-API Topic-level configuration(主题级别的参数配置) 与主题相关的配置具有全局默认值(参考broker部分)和每个主题可选重写(broker部分有明确提示)。 阅读全文
posted @ 2018-08-02 18:01 胜迹寻芳 阅读(352) 评论(0) 推荐(0)
摘要:您可以参考前一篇文章 (一)Kafka0.8.2官方文档中文版系列-入门指南 2. API 我们正在为Kafka重写JVM客户端。在Kafka0.8.2中,包含一个新重写的Java producer。下一个版本将包含一个等效的Java consumer。这些新客户端旨在取代现有的Scala客户端,但 阅读全文
posted @ 2018-07-31 18:52 胜迹寻芳 阅读(340) 评论(0) 推荐(0)
摘要:写在前面的话 本系列文章仅仅代表个人的观点,结合自己的学习、使用经验,将kafka0.8.2官方文档,进行翻译,目录结构按照官方文档进行排版。 目的: 一、Getting Started 1、1 Introduction(简介) Kafka是一个分布式、分区的、数据备份的日志收集系统。Kafka使用 阅读全文
posted @ 2018-07-30 19:44 胜迹寻芳 阅读(727) 评论(0) 推荐(1)