文章分类 -  Kafka 那些事儿

摘要:CountDownLatch是一个非常实用的多线程控制工具类,称之为“倒计时器”,它允许一个或多个线程一直等待,直到其他线程的操作执行完后再执行。 举了例子: 我们知道的集齐七颗龙珠就可以召唤神龙,那我们就一起召唤一下,下边我需要派7个人(7个线程)去分别去找这7颗不同的龙珠,每个人找到之后回来告诉 阅读全文
posted @ 2025-02-13 10:17 都是城市惹的祸 阅读(29) 评论(0) 推荐(0)
摘要:1、安装部署参考如下: 1、解压缩到指定目录。 2、修改kafka参数(在kafka下config目录:vi server.properties,修改以下行) #advertised.listeners=PLAINTEXT://your.host.name:9092 3、启动zookeeper(在k 阅读全文
posted @ 2020-05-15 17:07 都是城市惹的祸 阅读(645) 评论(0) 推荐(0)
摘要:如果在kafka/bin目录下用这个脚本(kafka-server-stop.sh)关闭kafka进程会发现 报错说:No kafka server to stop 查看改脚本:vi kafka-server-stop.sh 发现: 1 #!/bin/sh 2 # Licensed to the A 阅读全文
posted @ 2020-05-15 16:52 都是城市惹的祸 阅读(2203) 评论(0) 推荐(0)
摘要:0.9.0 ############################# Server Basics ############################# # 节点的ID,必须与其它节点不同broker.id=0 ############################# Socket Serv 阅读全文
posted @ 2020-05-09 14:14 都是城市惹的祸 阅读(481) 评论(0) 推荐(0)
摘要:Kafka是由Apache软件基金会开发的一个开源流处理平台,是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据。 特性:(1)通过O(1)的磁盘数据结构提供消息的持久化,这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能。(2)高吞吐量:即使是非常普通的硬件 阅读全文
posted @ 2020-04-27 15:56 都是城市惹的祸 阅读(1429) 评论(0) 推荐(0)
摘要:package test; /** * Created by fangchangchun on 2020-04-22. */ import org.apache.kafka.clients.consumer.ConsumerRecord; import org.apache.kafka.client 阅读全文
posted @ 2020-04-27 15:42 都是城市惹的祸 阅读(164) 评论(0) 推荐(0)
摘要:package test; import org.apache.kafka.clients.producer.KafkaProducer; import org.apache.kafka.clients.producer.ProducerRecord; import java.util.Proper 阅读全文
posted @ 2020-04-27 15:41 都是城市惹的祸 阅读(160) 评论(0) 推荐(0)
摘要:一.背景 kafka提供了多种安全认证机制,主要分为SSL和SASL2大类。其中SASL/PLAIN是基于账号密码的认证方式,比较常用。最近做了个kafka的鉴权,发现官网上讲的不是很清楚,网上各种博客倒是很多,但是良莠不齐,巨多坑。经过一天的研究,终于搞定了,特在此记录下。 二.环境 操作系统:l 阅读全文
posted @ 2020-04-27 15:35 都是城市惹的祸 阅读(709) 评论(0) 推荐(0)