随笔分类 -  kafka学习

kafka在linux环境下的搭建和,以及使用kafka库向broker中生产和消费数据
单机简单搭建一个kafka集群(没有进行内核参数和JVM的调优)
摘要:1.JDK安装 在我的部署单节点kafka的博客里有相关的方法。(https://www.cnblogs.com/ToBeExpert/p/9789486.html )zookeeper和kafka的压缩包下载地址也在单节点部署的这篇博客里。 1.zookeeper集群的搭建 将zookeeper. 阅读全文

posted @ 2019-03-04 16:01 古I月 阅读(806) 评论(0) 推荐(0)

librdkafka使用VS2015进行编译
摘要:抄了那么久的《kafka权威指南》,开始实操了,按照书本的介绍,kafka本身提供针对Java的原生API,其它语言如果需要使用kafka,那么就需要通过第三方库来做了,对了再书中一直提及的kafka官方文档,在网站中的DOCUMENTATION里。在kafka的官网上找到Clients,点击进入, 阅读全文

posted @ 2018-10-29 18:12 古I月 阅读(4656) 评论(2) 推荐(0)

再均衡监听器
该文被密码保护。

posted @ 2018-10-23 00:32 古I月 阅读(1) 评论(0) 推荐(0)

kafka消费者的配置
该文被密码保护。

posted @ 2018-10-22 23:00 古I月 阅读(1) 评论(0) 推荐(0)

kafka消费者----从kafka读取数据
该文被密码保护。

posted @ 2018-10-22 17:02 古I月 阅读(3) 评论(0) 推荐(0)

Kafka生产者----向kafka写入数据
摘要:开发者可以使用kafka内置的客户端API开发kafka应用程序。除了内置的客户端之外,kafka还提供了二进制连接协议,也就是说,我们直接向kafka网络端口发送适当的字节序列,就可以实现从Kafka读取消息或往kafka写入消息。还有很多用其它语言实现的kafka客户端,比如C++、python 阅读全文

posted @ 2018-10-22 14:54 古I月 阅读(2042) 评论(0) 推荐(0)

Kafka集群
该文被密码保护。

posted @ 2018-10-21 20:47 古I月 阅读(2) 评论(0) 推荐(0)

kafka 服务端消费者和生产者的配置
摘要:在kafka的安装目录下,config目录下有个名字叫做producer.properties的配置文件 kafka的消费者配置(路径和生产者配置文件路径相同),名字叫做.consumer.properties 以上内容转载自:https://www.cnblogs.com/jun1019/p/62 阅读全文

posted @ 2018-10-20 22:40 古I月 阅读(2675) 评论(0) 推荐(0)

Kafka Broker配置
摘要:Kafka发行包里自带的配置样本可以用来安装单机服务,但并不能满足大多数安装场景的要求。kafka有很多配置选项,Kafka有很多配置选项,涉及安装和调优的方方面面。不过大多数调优选项可以使用默认配置,除非你对调优有特别的要求。 常规配置和主题配置(服务端的配置文件) kafka安装包里自带的con 阅读全文

posted @ 2018-10-20 22:25 古I月 阅读(6036) 评论(0) 推荐(0)

CentOS7.4搭建kafka单结点和集群
摘要:操作系统选择 CentOS7.4x86-64(操作系统的x86_64是跟CPU有关的,最早AMD公司开发出了一款向下兼容x86CPU,向上又扩充了指令集,具有了64位CPU的特性,这款CPU后来改名为AMD64,Intel在AMD之后也开发了这样一款CPU,取名叫做x86_64),所以操作系统的x8 阅读全文

posted @ 2018-10-18 02:18 古I月 阅读(879) 评论(0) 推荐(0)

导航