• 博客园logo
  • 会员
  • 众包
  • 新闻
  • 博问
  • 闪存
  • 赞助商
  • HarmonyOS
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
 






金天黑日

 
 

Powered by 博客园
博客园 | 首页 | 新随笔 | 联系 | 订阅 订阅 | 管理
上一页 1 ··· 3 4 5 6 7 8 9 10 11 ··· 35 下一页

2023年7月7日

kafka 消息持久化文件
摘要: http://news.sohu.com/a/673735058_100110101 1 简介 Kafka 作为一个高吞吐的消息中间件,和传统的消息中间件一个很大的不同点就在于它的消息实际上是以日志的方式默认保存在/tmp/kafka-logs文件夹中的。 Kafka的持久化策略更像Redis——数 阅读全文
posted @ 2023-07-07 09:53 金天黑日 阅读(295) 评论(0) 推荐(0)
 

2023年6月29日

kafka broker中controller的选举和partion的leader的选举
摘要: 1 Kafka核心总控制器Controller kafka的所有Broker都会注册到kafka集群中去。 kafka集群会选举一个Broker作为kafka七群的总控制器Controller。 他负责管理整个集群所有分区Partition和副本follower的状态 controller的主要作用 阅读全文
posted @ 2023-06-29 15:16 金天黑日 阅读(170) 评论(0) 推荐(0)
 
Kafka核心总控制器Controller主要作用
摘要: https://www.yisu.com/zixun/586556.html 1 简介 1)更新集群元数据信息 2)创建Topic 3)删除Topic 4)分区重分配 5)preferred leader副本选举 6)Topic分区扩展 7)Broker加入集群 8)Broker崩溃 9)受控关闭 阅读全文
posted @ 2023-06-29 14:51 金天黑日 阅读(350) 评论(0) 推荐(0)
 
kafka producer生产消息发送到kafka的过程
摘要: 1 KafkaProducer的几个重要成员变量 1)Partitioner 用来获取消息应该发往哪个分区 private final Partitioner partitioner; 2)ProducerMetadata kafka元数据 private final ProducerMetadat 阅读全文
posted @ 2023-06-29 14:12 金天黑日 阅读(428) 评论(0) 推荐(0)
 

2023年6月28日

kafka
摘要: 1)kafka及消息队列简介 kafka及消息队列简介 2)kafka单机安装和简单使用 kafka单机安装和简单使用 3)kafka集群搭建 kafka集群搭建 4)kafka常用命令 kafka常用命令 5)kafka术语及架构简介 kafka术语及架构简介 6)kafka的broker的con 阅读全文
posted @ 2023-06-28 11:13 金天黑日 阅读(21) 评论(0) 推荐(0)
 
kafka 高水位和epoch和partion副本同步
摘要: https://blog.csdn.net/jiayi_yao/article/details/124883964 1 简介 在 kafka 中,高水位的作用主要是 2 个 1)定义消息可见性,既用来告诉我们的消费者哪些消息是可以进行消费的; 2)帮助 kafka 完成副本机制的同步。 Kafka 阅读全文
posted @ 2023-06-28 11:01 金天黑日 阅读(300) 评论(0) 推荐(0)
 

2023年6月27日

kafka ack机制
摘要: 1 kafka基本架构 kafka的partion分为leader和follow。leader参与允许,二follower仅作为备份。 那么,leader和follower之间是怎么同步的呢 2 leader和follower的同步 Partition只有Leader是对外提供读写服务的 也就是说, 阅读全文
posted @ 2023-06-27 16:13 金天黑日 阅读(314) 评论(0) 推荐(0)
 
kafka 开发时生产者和消费者消息顺序的问题
摘要: 1 简介 在kafka,生产者生产的消息,只会保证一个生产者生产的消息在一个partion里面是有序的。 所以在编程时,若业务对消息的顺序性有更多的要求,那么就需要自己来保证消息的顺序性了。 消费者消费了消息,offset是需要自己来维护的。也就是说需要自己去保障消费的顺序性。 2 生产者顺序的保证 阅读全文
posted @ 2023-06-27 15:55 金天黑日 阅读(205) 评论(0) 推荐(0)
 
kafka 消息的零拷贝
摘要: 1 简介 零拷贝是指将数据直接从磁盘文件复制到网卡,而不需要经由应用之手。 零拷贝大大提高了应用程序的性能,减少了内核和用户模式之间的上下文切换。 对Linux操作系统而言,零拷贝技术依赖于底层的sendfile()方法实现,对于Java语言,FileChannel.transferTo()方法的底 阅读全文
posted @ 2023-06-27 15:31 金天黑日 阅读(195) 评论(0) 推荐(0)
 
Linux安装花生壳进行端口映射内网穿透
摘要: 1 下载 1.1 官网下载 进入 花生壳 官网,选择linux版安装包,下载,上传到服务器 1.2 wget下载 wget "https://down.oray.com/hsk/linux/phddns_5.2.0_amd64.rpm" -O phddns_5.2.0_amd64.rpm 2 安装 阅读全文
posted @ 2023-06-27 11:04 金天黑日 阅读(554) 评论(0) 推荐(0)
 
上一页 1 ··· 3 4 5 6 7 8 9 10 11 ··· 35 下一页