随笔分类 -  kafka

摘要:上一篇介绍了producer端的开发,本篇介绍一下consumer端的开发。 一、consumer端示例程序开发 和开发producer端程序一样,首先检查pom文件是否有已经有kafka相关jar包依赖,如果没有,则需要在pom.xml中添加如下依赖: 然后在resouces下面新建 kafka- 阅读全文
posted @ 2019-06-10 19:51 码农大卫 阅读(1256) 评论(0) 推荐(0)
摘要:本篇主要介绍如何进行producer的开发,为了进行相关测试,建议先按照本系列前两篇文章安装单机kafka或者kafka集群。 一、producer工作流程 producer使用用户启动producer的线程,将待发送的消息封装到一个ProducerRecord类实例,然后将其序列化之后发送给par 阅读全文
posted @ 2019-05-11 21:20 码农大卫 阅读(580) 评论(0) 推荐(0)
摘要:上一篇分享了单节点伪分布式集群搭建方法,本篇来分享一下多节点分布式集群搭建方法。多节点分布式集群结构如下图所示: 为了方便查阅,本篇将和上一篇一样从零开始一步一步进行集群搭建。 一、安装Jdk 具体安装步骤可参考 linux安装jdk。 二、安装与配置zookeeper 下载地址:https://w 阅读全文
posted @ 2019-05-11 12:59 码农大卫 阅读(6319) 评论(0) 推荐(0)
摘要:Kafka集群搭建分为单节点的伪分布式集群和多节点的分布式集群两种,首先来看一下单节点伪分布式集群安装。单节点伪分布式集群是指集群由一台ZooKeeper服务器和一台Kafka broker服务器组成,如下图所示: 为了搭建单节点Kafka集群,需要依次安装如下软件:安装Java-->安装ZooKe 阅读全文
posted @ 2019-05-09 21:36 码农大卫 阅读(1211) 评论(0) 推荐(1)