07 2019 档案
摘要:第4章 KafkaAPI实战 1)启动zk和kafka集群,在kafka集群中打开一个消费者 [hadoop102 kafka]$ bin/kafka-console-consumer.sh \ --zookeeper hadoop01:2181 --topic first 2)导入pom依赖 4.
阅读全文
摘要:第3章 Kafka工作流程分析 Kafka核心组成 3.1 Kafka生产过程分析 3.1.1 写入方式 producer采用推(push)模式将消息发布到broker,每条消息都被追加(append)到分区(patition)中,属于顺序写磁盘(顺序写磁盘效率比随机写内存要高,保障kafka吞吐率
阅读全文
摘要:第2章 Kafka集群部署 2.1 环境准备 2.1.1 集群规划 hadoop01 hadoop02 hadoop03 多台分布式集群(这里举例三台) zk zk zk 每台机器上配置好ZooKeeper集群 kafka kafka kafka 每台机器上配置好Kafka集群 2.1.2 jar包
阅读全文
摘要:第1章 Kafka概述 1.1 消息队列 消息队列的内部实现原理 (1)点对点模式(一对一,消费者主动拉取数据,消息收到后消息清除) √(kafka) 点对点模型通常是一个基于拉取或者轮询的消息传送模型,这种模型从队列中请求信息,而不是将消息推送到客户端。这个模型的特点是发送到队列的消息被一个且只有
阅读全文
摘要:根目录:/ /root: 存放root用户相关文件 /home: 存放不同用户的相关文件 /bin: 存放常用命令的目录 /sbin: 要具有一定权限才可以使用的命令 /mnt: 默认挂载光驱和软驱的目录 /etc: 存放配置相关文件 /var: 存放经常变化的文件 /boot: 存放引导相关的文件
阅读全文
摘要:getAcl path 查看某个node的权限 设置权限1 world方式 setAcl <path> world:anyone:<acl>例如 setAcl /node1 world:anyone:cdrwa 2 ip方式 setAcl <path> ip:<ip>:<acl>例如 #设置IP:1
阅读全文
摘要:zookeeper集群的协同服务,分布式协调服务 并行程序多进程之间的调度和控制比如:多进程之间的互斥同步运行,多进程事务控制,多进程之间的状态监控,多进程之间的资源共享,进程的故障切换 zookeeper-3.4.10.tar 链接:https://pan.baidu.com/s/1VF_omDm
阅读全文

浙公网安备 33010602011771号