上一页 1 ··· 6 7 8 9 10 11 12 13 14 ··· 20 下一页
摘要: mysql -uroot -p1234 create database eesy; use eesy; create table account( id int primary key auto_increment, name varchar(40), money float )character 阅读全文
posted @ 2020-07-10 23:48 阿布都日 阅读(88) 评论(0) 推荐(0) 编辑
摘要: RoundRobin:轮训(合并所有的topic再分配) ==》topic不应该被全部消费者消费时,造成消费错误 Range:以topic为单位单独分==》造成分配不均匀 阅读全文
posted @ 2020-06-30 15:40 阿布都日 阅读(233) 评论(0) 推荐(0) 编辑
摘要: 开启幂等性 enable.idompotence=enablepid - partition - seqnumber 相等的两条数据被视为同一条数据(pid是producer_id) 阅读全文
posted @ 2020-06-30 15:25 阿布都日 阅读(119) 评论(0) 推荐(0) 编辑
摘要: lsr里面最小的leo,可以保证消费一致性和存储一致性,不能保证数据不丢失或重复 阅读全文
posted @ 2020-06-30 15:14 阿布都日 阅读(394) 评论(0) 推荐(0) 编辑
摘要: //leader接受到数据还没写入磁盘就发ack acks=0 //leader接受到数据写完磁盘发ack acks=1 //leader和follower都写完磁盘发ack acks=-1|all 阅读全文
posted @ 2020-06-30 14:59 阿布都日 阅读(146) 评论(0) 推荐(0) 编辑
摘要: 预备leader //预备leader备份时间限,超时会被踢出 replica.lag.time.max.ms 阅读全文
posted @ 2020-06-30 14:48 阿布都日 阅读(213) 评论(0) 推荐(0) 编辑
摘要: 分区的原因 方便在集群中扩展 可以提高并发 生产者分区原则 有partition,直接用 有key,用key.hash%partition.length 无,随机生成整数M,用n*M%partition.length ProducerRecord(String topic,int partition 阅读全文
posted @ 2020-06-30 11:27 阿布都日 阅读(158) 评论(0) 推荐(0) 编辑
摘要: 查看当前服务器中的所有topic kafka-topics.sh --zookeeper hadoop102:2281 --list 创建topic kafka-topic.sh --zookeeper hadoop102:2181 --create --replication-factor 3 - 阅读全文
posted @ 2020-06-30 01:05 阿布都日 阅读(113) 评论(0) 推荐(0) 编辑
摘要: #!/bin/bash case $1 in "start"){ for i in hadoop102 hadoop103 hadoop104 do echo "********************$i************************ ssh $i "/opt/module/ka 阅读全文
posted @ 2020-06-30 00:34 阿布都日 阅读(352) 评论(0) 推荐(0) 编辑
摘要: server.properties配置 #每一个机器唯一的整数 broker.id=0 #设置是否可以删除topic delete.topic.enable=true #日志和数据目录 log.dirs=/opt/module/kafka/data #数据保留时间7天 log.retension.h 阅读全文
posted @ 2020-06-30 00:26 阿布都日 阅读(63) 评论(0) 推荐(0) 编辑
上一页 1 ··· 6 7 8 9 10 11 12 13 14 ··· 20 下一页