上一页 1 ··· 19 20 21 22 23 24 25 26 27 ··· 37 下一页
摘要: we 阅读全文
posted @ 2020-02-10 08:34 雷雨客 阅读(117) 评论(0) 推荐(0)
摘要: 1、导入kafka所需要的包(最后附maven依赖) 安装kafka时,解压后就有kafka需要的jar包,如下图所示: 现在只需要导入这四个:kafka-clients-2.1.1.jar、log4j-1.2.17.jar、slf4j-api-1.7.25.jar、slf4j-log4j12-1. 阅读全文
posted @ 2020-02-07 18:16 雷雨客 阅读(5513) 评论(0) 推荐(0)
摘要: 1、运行的程序有class文件和jar包 新建目录test,test下面新建目录lib和bin,lib里面放第三方jar包,bin里面放自己的class文件,如下: 启动脚本如下,只需要修改第16行,指定启动类 1 @echo off 2 echo 正在执行,请勿关闭.... 3 4 set bas 阅读全文
posted @ 2020-02-07 17:49 雷雨客 阅读(1979) 评论(0) 推荐(1)
摘要: 1、选中需要导出的类 2、右键点击export 3、选择Java下的JAR file,点击next 4、默认选择Export generated class files and resources 和 Compress the contents of the JAR file。在JAR file处输 阅读全文
posted @ 2020-02-07 15:45 雷雨客 阅读(412) 评论(0) 推荐(0)
摘要: broker.id =0 #每一个broker在集群中的唯一表示,要求是正数。当该服务器的IP地址发生改变时,broker.id没有变化,则不会影响consumers的消息情况 log.dirs=/data/kafka-logs #kafka数据的存放地址,多个地址的话用逗号分割/data/kafk 阅读全文
posted @ 2020-02-06 16:07 雷雨客 阅读(399) 评论(0) 推荐(0)
摘要: 1、Kafka主要设计理念 Kafka之所以和其它绝大多数信息系统不同,是因为下面这几个为数不多的比较重要的设计决策: (1)Kafka在设计之时为就将持久化消息作为通常的使用情况进行了考虑。 (2)Kafka主要的设计约束是吞吐量而不是功能。 (3)Kafka有关哪些数据已经被使用了的状态信息保存 阅读全文
posted @ 2020-02-05 20:33 雷雨客 阅读(192) 评论(0) 推荐(0)
摘要: Zookeeper是Google的Chubby一个开源的实现,是Hadoop的分布式协调服务。 它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等。 架构图如下: Zookeeper能做些什么? 1)Hadoop2.0使用Zookeeper的事件处理确保整个集群只有一 阅读全文
posted @ 2020-02-05 12:50 雷雨客 阅读(132) 评论(0) 推荐(0)
摘要: 1、Kafka简介 Apache Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发,用作LinkedIn的活动流(activity stream)和运营数据处理管道(pipeline)的基础。之后贡献给Apache基金会成为Apache的一个顶级项目。Kafka是一种快速、可扩 阅读全文
posted @ 2020-02-04 13:30 雷雨客 阅读(459) 评论(0) 推荐(0)
摘要: 111 阅读全文
posted @ 2020-01-12 21:07 雷雨客 阅读(846) 评论(0) 推荐(0)
摘要: 一、在服务器192.168.23.151/152/153上分别安装Kafka服务 参考Kafka单机安装与配置 二、规划与修改配置文件 规划:151/152/153上各两个broker,分别是broker1、broker2、broker3、broker4、broker5、broker6 举例151修 阅读全文
posted @ 2020-01-12 16:24 雷雨客 阅读(1337) 评论(0) 推荐(0)
上一页 1 ··· 19 20 21 22 23 24 25 26 27 ··· 37 下一页