随笔分类 - BigData-Kafka
摘要:如何搭建配置centos虚拟机请参考《Kafka:ZK+Kafka+Spark Streaming集群环境搭建(一)VMW安装四台CentOS,并实现本机与它们能交互,虚拟机内部实现可以上网。》 如何安装hadoop2.9.0请参考《Kafka:ZK+Kafka+Spark Streaming集群环
阅读全文
摘要:如何搭建配置centos虚拟机请参考《Kafka:ZK+Kafka+Spark Streaming集群环境搭建(一)VMW安装四台CentOS,并实现本机与它们能交互,虚拟机内部实现可以上网。》 如何配置hadoop2.9.0 HA 请参考《Kafka:ZK+Kafka+Spark Streamin
阅读全文
摘要:使用VMW安装四台CentOS-7-x86_64-DVD-1804.iso虚拟机: 计划配置三台centos虚拟机: 资源分配情况: 每台虚拟机分配:内存2G,CPU核数1个,磁盘20G。 VMW配置及本地IPv4上网配置情况: 安装VMW,并设置其连接方式为桥接方式: 本地网络适配器除了“本地连接
阅读全文
摘要:环境准备: 1)需要在maven工程中引入依赖: 2)本机是否能telnet 192.178.0.111 9092(kafaka所部署的vmw虚拟机)通? 如果telnet端口不通,则需要关闭192.178.0.111的防火墙: 一、生产者 首先看以下两种实现示例: 1 package com.dx
阅读全文
摘要:环境如下: CentOS-7-x86_64zookeeper-3.4.11kafka_2.12-1.1.0 一.zookeeper下载与安装 1)下载zookeeper 2)解压 3)配置 修改或添加zoo.cfg文件中如下两个配置项: 创建zk数据存储和zk日志存储目录: 4)配置环境变量 配置项
阅读全文

浙公网安备 33010602011771号