06 2018 档案

kafka配置说明
摘要:broker.id 唯一编号,每台不一样 host.name 本机host名称 num.network.threads 消息处理最大线程数,推荐cpu核数加1 num.io.threads 处理磁盘IO线程数,推荐cpu*2 socket.send.buffer.bytes=102400 #发送缓冲 阅读全文

posted @ 2018-06-26 14:40 海底死鱼 阅读(313) 评论(0) 推荐(0)

redis配置说明
摘要:################################## NETWORK ##################################### # 设置允许访问的IP,支持设置多个IP.# 不设置表示所有IP都可访问,127.0.0.1表示只能本地访问# 默认不设置# bind 1 阅读全文

posted @ 2018-06-26 14:28 海底死鱼 阅读(152) 评论(0) 推荐(0)

kafka安装部署
摘要:1、下载kafka_2.11-0.10.1.0.tgz解压 2、配置server.properties ############################# Server Basics #############################broker.id=1host.name=emr- 阅读全文

posted @ 2018-06-25 13:18 海底死鱼 阅读(93) 评论(0) 推荐(0)

spark安装部署
摘要:1、下载安装包spark-2.1.1-bin-hadoop2.7.tgz 解压 2、下载scala-2.12.4.rpm 安装 rpm -ivh scala-2.12.4.rpm 3、修改配置 spark-env.sh 追加如下 export SCALA_HOME=/usr/share/scalae 阅读全文

posted @ 2018-06-25 11:04 海底死鱼 阅读(121) 评论(0) 推荐(0)

redis安装部署
摘要:1、下载安装包redis-4.0.9.tar.gz 2、解压进入目录,编译 make 3、进入src目录 cd src 4、启动 ./redis-server ../redis.conf & 5、连接客户端 ./redis-cli 阅读全文

posted @ 2018-06-25 10:50 海底死鱼 阅读(120) 评论(0) 推荐(0)

hbase安装部署
摘要:1、先安装hadoop,详见hadoop安装部署 2、先安装zookeeper,详见zookeeper安装部署 3、下载安装包hbase-1.1.1-bin.tar.gz解压到hadoop目录 4、编辑 vim /etc/profile 导入 export HBASE_CONF_DIR=/data/ 阅读全文

posted @ 2018-06-25 10:33 海底死鱼 阅读(129) 评论(0) 推荐(0)

zookeeper安装部署
摘要:1、先安装hadoop,详见hadoop安装部署 2、下载安装包 zookeeper-3.4.5 解压到hadoop目录 3、编辑 vim /etc/profile 导入 export ZK_HOME=/data/hadoop272/zookeeperexport PATH=${ZK_HOME}/b 阅读全文

posted @ 2018-06-15 11:12 海底死鱼 阅读(86) 评论(0) 推荐(0)

导航