摘要:
mysql -uroot -p1234 create database eesy; use eesy; create table account( id int primary key auto_increment, name varchar(40), money float )character 阅读全文
摘要:
RoundRobin:轮训(合并所有的topic再分配) ==》topic不应该被全部消费者消费时,造成消费错误 Range:以topic为单位单独分==》造成分配不均匀 阅读全文
摘要:
开启幂等性 enable.idompotence=enablepid - partition - seqnumber 相等的两条数据被视为同一条数据(pid是producer_id) 阅读全文
摘要:
lsr里面最小的leo,可以保证消费一致性和存储一致性,不能保证数据不丢失或重复 阅读全文
摘要:
//leader接受到数据还没写入磁盘就发ack acks=0 //leader接受到数据写完磁盘发ack acks=1 //leader和follower都写完磁盘发ack acks=-1|all 阅读全文
摘要:
预备leader //预备leader备份时间限,超时会被踢出 replica.lag.time.max.ms 阅读全文
摘要:
分区的原因 方便在集群中扩展 可以提高并发 生产者分区原则 有partition,直接用 有key,用key.hash%partition.length 无,随机生成整数M,用n*M%partition.length ProducerRecord(String topic,int partition 阅读全文
摘要:
查看当前服务器中的所有topic kafka-topics.sh --zookeeper hadoop102:2281 --list 创建topic kafka-topic.sh --zookeeper hadoop102:2181 --create --replication-factor 3 - 阅读全文
摘要:
#!/bin/bash case $1 in "start"){ for i in hadoop102 hadoop103 hadoop104 do echo "********************$i************************ ssh $i "/opt/module/ka 阅读全文
摘要:
server.properties配置 #每一个机器唯一的整数 broker.id=0 #设置是否可以删除topic delete.topic.enable=true #日志和数据目录 log.dirs=/opt/module/kafka/data #数据保留时间7天 log.retension.h 阅读全文