摘要: 此处例如三台主机: NameNode:Master DataNode:slave2、slave3 一、环境准备 1.1 同步时间 1.2 创建用户 1.3 关闭防火墙 1.4 免密登录 1.5 JDK安装 二、下载安装 三、NameNode核心文件配置 3.1 hadoop-env.sh 3.2 h 阅读全文
posted @ 2021-08-19 16:49 xiaojy 阅读(420) 评论(0) 推荐(0)
摘要: 一、软件要求 二、Kylin 安装 三、文件配置 四、运行kylin 一、软件要求 1,hadoop 安装配置 2,Hbase 安装配置 3,Hive 安装配置 4,JDK1.8 5,Spark 安装配置(可选) 二、Kylin 安装 这里使用和安装Hadoop同一个用户 2.1,下载地址:kyli 阅读全文
posted @ 2021-08-18 12:31 xiaojy 阅读(1044) 评论(0) 推荐(0)
摘要: 一、两个步骤 二、System Cube 2.1 开启System Cube 修改$KYLIN_HOME/conf/kylin.properties文件,将下述文字粘贴至空白处 kylin.server.query-metrics2-enabled=true kylin.metrics.report 阅读全文
posted @ 2021-08-18 10:53 xiaojy 阅读(54) 评论(0) 推荐(0)
摘要: 一、查看Cuboid数量 二、判断Cube优化的依据 一、查看Cuboid数量 $KYLIN_HOME/bin/kylin.sh org.apache.kylin.engine.mr.common.CubeStatsReader CUBE_NAME CUBE_NAME 想要查看Cube的名字 如下显 阅读全文
posted @ 2021-08-17 17:27 xiaojy 阅读(52) 评论(0) 推荐(0)
摘要: 一、必备环境 $ date # 1.确保集群时间同步 $ systemctl start mysqld.service # 2.hive 元数据保存在MySQL $ zkServer.sh start # 3.启动Zookeeper $ start-all.sh # 4.启动HDFS和YARN $ 阅读全文
posted @ 2021-08-16 12:00 xiaojy 阅读(196) 评论(0) 推荐(0)
摘要: 目录 一、环境准备 1.1 修改IP地址和主机名 1.2 安装数据库依赖包 1.3 关闭防火墙 1.4 建立用户和组 1.5 创建数据库相关目录 1.6 修改内核参数 1.7 修改文件限制 1.8 添加ulimit限制 1.9 修改oracle用户环境变量 二、数据库软安装 2.1 解压安装包 2. 阅读全文
posted @ 2021-08-14 23:30 xiaojy 阅读(170) 评论(0) 推荐(0)
摘要: 一、软件要求 二、Kylin 安装 三、文件配置 四、运行kylin 一、软件要求 1,hadoop 安装配置 2,Hbase 安装配置 3,Hive 安装配置 4,JDK1.8 5,Spark 安装配置(可选) 二、Kylin 安装 使用通Hadoop同一个用户 2.1,下载地址:kylin-2. 阅读全文
posted @ 2021-08-12 14:46 xiaojy 阅读(284) 评论(0) 推荐(0)
摘要: 一、环境准备 二、下载安装 三、核心文件配置 四、运行软件 一、环境准备 1.1 Centos7 1.2 创建用户 $ useradd -m -g bigdata etl -s /bin/bash # ll /home/查看是否创建成功 $ passwd etl $ visudo $ su etl 阅读全文
posted @ 2021-08-06 11:58 xiaojy 阅读(450) 评论(0) 推荐(0)
摘要: 一、创建用户 阅读全文
posted @ 2021-08-05 17:50 xiaojy 阅读(24) 评论(0) 推荐(0)
摘要: 一、Anaconda3安装 1.1 下载地址:https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/ 1.2 进入文件存放目录安装: $ sh ./Anaconda3-4.4.0-Linux-x86_64.sh 1.2.1,按Enter继续 Pl 阅读全文
posted @ 2021-08-05 16:43 xiaojy 阅读(405) 评论(0) 推荐(0)