09 Hive安装与操作
一.安装Hive
1、下载解压重命名权限
2、配置环境变量 $HIVE_HOME
3、修改Hive配置文件 gedit
4、配置mysql驱动
- 下载合适版本的mysql jar包,拷贝到/usr/local/hive/lib目录下 ls
- 在mysql新建hive数据库 show databases;
- 配置mysql允许hive接入 show grants for 'hive'@'localhost';
5、启停
- 启动Hadoop--启动Hive--退出Hive--停止Hadoop
二、Hive操作
1、hive创建与查看数据库
2、mysql查看hive元数据表DBS
3、hive创建与查看表
4、mysql查看hive元数据表TBLS
5、hdfs查看表文件位置
方式一:用命令行查看
方式二:用网页查看
6、hive删除表
7、mysql查看hive元数据表TBLS
8、hive删除数据库
9、mysql查看hive元数据表DBS
10、hdfs查看表文件夹变化
方式一:用命令行查看
方式二:用网页查看
三、hive进行词频统计
实验一:
1、准备txt文件
2、启动hadoop,启动hive
3、创建并查看文本表 create table
4、导入文件的数据到文本表中 load data local inpath,观察50070,hfds
5、分割文本 split
6、行转列explode
7、统计词频group by
实验二;
1、准备txt文件
2、启动hadoop,启动hive
3、上传文件至hdfs
4、从hdfs导入文件内容到表wctext, 并查看hdfs源文件,hfds数据库文件
5、统计词频
6、词频统计结果存到数据表里,并查看表和文件
(1)hive查看统计结果
(2)hadoop查看统计结果
7、本地调用本地hql文件进行词频统计,将结果保存为本地文件
8、退出hive,停止hadoop