随笔分类 -  MQ

摘要：消息重试分为两种：Producer发送消息的重试 和 Consumer消息消费的重试。一、Producer端重试 Producer端重试是指: Producer往MQ上发消息没有发送成功，比如网络原因导致生产者发送消息到MQ失败。 部分源码解析： /** * 说明 抽取部分代码 */ private 阅读全文

摘要：数据可靠性 ·RocketMQ支持异步实时刷盘，同步刷盘，同步Replication，异步Replication ·Kafka使用异步刷盘方式，异步Replication 王启军评：这个地方描述有问题，kafka无法设置同步刷盘，但是可以设置同步Replication，使用request.requi 阅读全文

摘要：转自:rocketmq-常见问题总结(消息的顺序、重复、消费模式) - xuwc - 博客园 (cnblogs.com) 分布式消息系统作为实现分布式系统可扩展、可伸缩性的关键组件，需要具有高吞吐量、高可用等特点。而谈到消息系统的设计，就回避不了两个问题： 消息的顺序问题 消息的重复问题 Rocke 阅读全文

摘要：补充: 1、broker busy，start flow control for a while 解决：增大 waitTimeMillsInSendQueue 默认为 200 解析：在进行消息追加时，再一次判断PageCache是否繁忙，如果繁忙，则抛出上述错误 2、broker busy, sta 阅读全文

摘要：### 名称：NamesrvConfig.rocketmqHome <String># 默认值：(通过 sh mqnamesrv 设置 ROCKETMQ_HOME 环境变量，在源程序中获取环境变量得# 到的目录)# 描述：RocketMQ 主目录 # 建议：不主动配置##rocketmqHome = 阅读全文

摘要：NameServer配置属性 参数名 参数类型 描述 默认参数（时间为单位ms,数据单位为byte） rocketmqHome String RockerMQ主目录，默认用户主目录 namesrvAddr String NameServer地址 kvConfigPath String kv配置文件路 阅读全文

摘要：1. Kafka 总体架构 基于 Kafka-ZooKeeper 的分布式消息队列系统总体架构如下： 如上图所示，一个典型的 Kafka 体系架构包括若干 Producer（消息生产者），若干 broker（作为 Kafka 节点的服务器），若干 Consumer（Group），以及一个 ZooKe 阅读全文

摘要：一、简介rocketMQ RocektMQ是阿里巴巴在2012年开源的一个纯java、分布式、队列模型的第三代消息中间件，不仅在传统高频交易链路有着低延迟的出色表现，在实时计算等大数据领域也有着不错的吞吐。 2016年11月11号，双十一大促见证了RocketMQ低延迟存储架构的成功试水，99.99 阅读全文

摘要：搭建zookeeper和Kafka集群： 本实验拥有3个节点，均为CentOS 7系统，分别对应IP为10.211.55.11、10.211.55.13、10.211.55.14，且均有相同用户名 （本实验为 jiecxy） 为了方便，先在三台节点上 /etc/hosts 文件内容均添加： 10.2 阅读全文