2019年8月7日
hbase
摘要： HBASE安装 HBASE简介 1.什么是HBASE： HBASE是一个数据库 可以提供数据的实时随机读写 HBASE与mysql、oralce、db2、sqlserver等关系型数据库不同，它是一个NoSQL数据库（非关系型数据库） Hbase的表模型与关系型数据库的表模型不同： Hbase的表没 阅读全文
posted @ 2019-08-07 22:24 心随沙动 阅读(768) 评论(0) 推荐(0)
yarn
摘要： yarn集群配置 yarn集群中有两个角色： 主节点：Resource Manager 1台 从节点：Node Manager N台 Resource Manager一般安装在一台专门的机器上 Node Manager应该与HDFS中的data node重叠在一起 1.vim yarn site.x 阅读全文
posted @ 2019-08-07 22:23 心随沙动 阅读(152) 评论(0) 推荐(0)
hive
摘要： hive安装 1.上传解压 2.cd conf ;新增hive site.xml (配置mysql数据库信息) vim hive site.xml javax.jdo.option.ConnectionURL jdbc:mysql://pengyy63:3306/hive?createDatabas 阅读全文
posted @ 2019-08-07 22:23 心随沙动 阅读(246) 评论(0) 推荐(0)
ES
摘要： ES安装 1.安装jdk(1.8) 2.上传 ElasticSearch 并解压 ，目录重命名为 es 3.创建一普通用户 (ES只能是普通用户运行) useradd pengyy passwd pengyy 4.修改 es 目录 所属用户和所属组 chown R pengyy:pengyy es 阅读全文
posted @ 2019-08-07 22:22 心随沙动 阅读(319) 评论(0) 推荐(0)
hdfs
摘要： hdfs集群配置 核心配置参数： 1)指定hadoop的默认文件系统为：hdfs 2)指定hdfs的namenode节点为哪台机器 3)指定namenode软件存储元数据的本地目录 4)指定datanode软件存放文件块的本地目录 1.vim hadoop env.sh export JAVA_HO 阅读全文
posted @ 2019-08-07 22:22 心随沙动 阅读(125) 评论(0) 推荐(0)
linux
摘要： ssh免密码登录 生成一对秘钥 ssh keygen t rsa 将公钥复制到服务器的 authorized_keys 文件中 ssh copy id ip eg: ssh copy id localhost ssh copy id 192.168.31.42 ssh copy id 192.168 阅读全文
posted @ 2019-08-07 22:21 心随沙动 阅读(114) 评论(0) 推荐(0)
kafka安装配置
摘要： kafka安装配置 1.tar zxvf kafka_2.11 0.11.0.2.tgz C /usr/local/software/ 2.mv kafka_2.11 0.11.0.2/ kafka 3.cd /usr/local/software/kafka mkdir logs 4.cd con 阅读全文
posted @ 2019-08-07 22:21 心随沙动 阅读(109) 评论(0) 推荐(0)
log4j配置
摘要： log4j配置详解 Logger 日志写出器，供程序员输出日志信息 Appender 日志目的地，把格式化好的日志信息输出到指定的地方去 ConsoleAppender 目的地为控制台的Appender FileAppender 目的地为文件的Appender RollingFileAppender 阅读全文
posted @ 2019-08-07 22:20 心随沙动 阅读(133) 评论(0) 推荐(0)
Nginx&Keepalived
摘要： Nginx安装 1.下载依赖库 yum install y gcc gcc c++ pcre pcre devel zlib zlib devel openssl openssl devel 2.使用configure脚本自动生成Makefile文件 prefix 指定安装目录 ./configur 阅读全文
posted @ 2019-08-07 22:19 心随沙动 阅读(124) 评论(0) 推荐(0)
mysql
摘要： tar压缩包安装 查询mysql rpm qa|grep mysql rpm qa|grep i mysql 删除 rpm e nodeps mysql libs 5.1.71 1.el6.x86_64 find / name mysql yum y install libaio.so.1 libg 阅读全文
posted @ 2019-08-07 22:19 心随沙动 阅读(130) 评论(0) 推荐(0)
zookeeper
摘要： zookeeper相关配置 zookeeper配置 vim /etc/profile 添加以下几行 ZOOKEEPER_HOME=/usr/local/software/zookeeper PATH=$ZOOKEEPER_HOME/bin:$PATH export ZOOKEEPER_HOME 重新 阅读全文
posted @ 2019-08-07 22:17 心随沙动 阅读(110) 评论(0) 推荐(0)
python
摘要： 缩进 内置常量（Built in Constants） 内置函数（Built in Functions） :简称BIF BIF函数查询 前面两个下划线 _ , 后面两个下划线 _ ,总共四个下划线 dir(__builtins__) 查询函数用法 help(input) Python 中不能把两个完 阅读全文
posted @ 2019-08-07 22:14 心随沙动 阅读(83) 评论(0) 推荐(0)