摘要: Kafka安装 1.解压文件 tar -zxvf /apps/kafka_2.11-1.0.0.gz -C /opt 2.修改名称 进入opt/目录下:mv kafka_2.11-1.0.0 kafka 3.添加环境变量 、 4.生成环境变量 source /etc/profile kafka操作 阅读全文
posted @ 2021-10-07 23:23 世界终将是黑大帅的 阅读(247) 评论(0) 推荐(0)
摘要: flume启动的时候报错 一、flume启动后写不到hdfs上,让我一通撞墙,结果忽略了前面的开头问题: 报错:Info: Including HBASE libraries found via (/opt/hbase/bin/hbase) for HBASE access错误: 找不到或无法加载主 阅读全文
posted @ 2021-10-07 22:12 世界终将是黑大帅的 阅读(199) 评论(0) 推荐(0)
摘要: ETL组件 Flume安装 1.解压文件 tar -zxvf /apps/apache-flume-1.6.0-bin.tar.gz -C /opt 2.修改文件名 3.配置环境变量 sudo vim /etc/profile 4.生成环境环境变量 source /etc/profile Flume 阅读全文
posted @ 2021-10-07 22:01 世界终将是黑大帅的 阅读(120) 评论(0) 推荐(0)
摘要: sqoop导入数据 进入mysql: mysql -uroot -pLover*159 1.创建数据库并插入数据 (1)创建数据库并将其定位默认数据库 create database mysql_hdfs; use mysql_hdfs; (2)创建表: create table users(id 阅读全文
posted @ 2021-10-07 12:08 世界终将是黑大帅的 阅读(59) 评论(0) 推荐(0)
摘要: sqoop导入数据 进入mysql: mysql -uroot -pLover*159 1.创建数据库并插入数据 (1)创建数据库并将其定位默认数据库 create database mysql_hdfs; use mysql_hdfs; (2)创建表: create table users(id 阅读全文
posted @ 2021-10-07 12:07 世界终将是黑大帅的 阅读(85) 评论(0) 推荐(0)
摘要: sqoop安装 1.解压tar包 tar -zxvf /apps/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /opt/ 2.修改名称 3.修改环境变量 sudo vim /etc/profile 添加: 4.生成环境变量 source /etc/profile 阅读全文
posted @ 2021-10-07 11:43 世界终将是黑大帅的 阅读(398) 评论(0) 推荐(0)
摘要: Hive参数的配置 新建hive用户在MySql中新建名称hive_db的数据库,用来存储Hive元数据;并创建hive用户,密码为自定义,并且赋予权限: create database hive_db;(新建hive_db数据库) create user hive identified by 'L 阅读全文
posted @ 2021-10-07 10:36 世界终将是黑大帅的 阅读(909) 评论(0) 推荐(0)
摘要: myslq安装 1.查看Maria DB数据库并卸载掉 rpm -qa | grep mariadb sudo rpm -e --nodeps mariadb-libs-5.5.65-1.el7.x86_64 2.使用rpm安装 MySql: sudo rpm -ivh /opt/hive/mysq 阅读全文
posted @ 2021-10-07 09:59 世界终将是黑大帅的 阅读(64) 评论(0) 推荐(0)