hive完整搭建

安装 MySQL 服务的详细步骤如下：

1. 解压安装包

现在已经为大家下载好了 MySQL 5.7.25 的安装包，存放在 /root/software 目录下。首先进入此目录下，然后使用tar -xvf 命令进行解压即可使用。

2. 安装 MySQL 组件

使用 rpm -ivh 命令依次安装 mysql-community-common （服务器和客户端库的公共文件）、mysql-community-libs（MySQL 数据库客户端应用程序的共享库）、mysql-community-libs-compat（MySQL 之前版本的共享兼容库）、mysql-community-client（MySQL 客户端应用程序和工具）和 mysql-community-server（数据库服务器和相关工具）。

3. 登录 MySQL

（1）初始化 MySQL 的数据库

安装好 MySQL 后，我们需要初始化数据库，初始化和启动数据库时最好不要使用 root 用户，而是使用 mysql 用户启动。命令如下：

/usr/sbin/mysqld --initialize-insecure --user=mysql

（2）启动 MySQL 服务

使用如下命令开启 MySQL 服务，让其在后台运行：

/usr/sbin/mysqld --user=mysql &

说明：一定要加“&”，脚本才能放到后台运行。

（3）登录 MySQL

使用 root 用户无密码登录 MySQL：

mysql -uroot

（4）重置 MySQL 密码

在 5.7 版本后，我们可以使用 alter user...identified by 命令把 root 用户的密码修改为 “123456”，具体命令如下所示：

mysql> alter user 'root'@'localhost' identified by '123456';

修改完成，使用 exit 或者 quit 命令退出 MySQL，重新登录验证密码是否修改成功，具体命令如下所示：

mysql -uroot -p123456

4. 增加远程登录权限

当我们的帐号不允许从远程登录，只能在 localhost 连接时，这个时候只要在 MySQL 服务器上，更改 mysql 数据库里的 user 表里的 host 项，从 localhost 改成 % 即可实现用户远程登录。

（1）查看 user 表信息

使用如下命令查看 mysql 数据库下的 user 表信息：

mysql> use mysql;        # 切换成 mysql 数据库

mysql> select user,host from user;        # 查询用户信息

可以看到在 user 表中已创建的 root用户。host 字段表示登录的主机，其值可以用 IP 地址，也可用主机名。

（2）实现远程连接（授权法）

将 host 字段的值改为 % 就表示在任何客户端机器上能以 root 用户登录到 MySQL 服务器，建议在开发时设为 %。命令如下：

# 设置远程登录权限

mysql> update user set host='%' where host='localhost';

# 刷新配置信息

mysql> flush privileges;

查看任务解析

安装 MySQL 服务的详细步骤如下：

1. 解压安装包

现在已经为大家下载好了 MySQL 5.7.25 的安装包，存放在 /root/software 目录下。首先进入此目录下，然后进行解压即可使用，命令如下：

cd /root/software/                # 进入目录

tar -xvf mysql-5.7.25-1.el7.x86_64.rpm-bundle.tar         # 解压安装包到当前目录下

将其解压到当前目录下，即 /root/software 中，效果图如下所示：

2. 安装 MySQL 组件

使用 rpm -ivh 命令依次安装以下组件：

（1）首先安装 mysql-community-common （服务器和客户端库的公共文件），使用命令：

rpm -ivh mysql-community-common-5.7.25-1.el7.x86_64.rpm

若是出现“100%”，则表示安装成功：

（2）其次安装 mysql-community-libs（MySQL 数据库客户端应用程序的共享库），使用命令：

rpm -ivh mysql-community-libs-5.7.25-1.el7.x86_64.rpm

若是出现“100%”，则表示安装成功：

（3）之后安装 mysql-community-libs-compat（MySQL 之前版本的共享兼容库），使用命令：

rpm -ivh mysql-community-libs-compat-5.7.25-1.el7.x86_64.rpm

若是出现“100%”，则表示安装成功：

（4）之后安装 mysql-community-client（MySQL 客户端应用程序和工具），使用命令：

rpm -ivh mysql-community-client-5.7.25-1.el7.x86_64.rpm

若是出现“100%”，则表示安装成功：

（5）最后安装 mysql-community-server（数据库服务器和相关工具），使用命令：

rpm -ivh mysql-community-server-5.7.25-1.el7.x86_64.rpm

若是出现“100%”，则表示安装成功：

3. 登录 MySQL

（1）初始化 MySQL 的数据库

安装好 MySQL 后，我们需要初始化数据库，初始化和启动数据库时最好不要使用 root 用户，而是使用 mysql 用户启动。命令如下：

/usr/sbin/mysqld --initialize-insecure --user=mysql

对于 MySQL 5.7.6 以后的 5.7 系列版本，MySQL 也可以使用 mysqld --initialize 初始化数据库，该命令会在 /var/log/mysqld.log 文件中生成一个登录 MySQL 的随机密码，而 mysqld --initialize-insecure 命令不会生成随机密码，而是设置 MySQL 的密码为空。

（2）启动 MySQL 服务

使用如下命令开启 MySQL 服务，让其在后台运行：

/usr/sbin/mysqld --user=mysql &

说明：一定要加“&”，脚本才能放到后台运行。

执行后，系统会打印出命令执行的PID，如下图所示：

（3）登录 MySQL

使用 root 用户无密码登录 MySQL：

mysql -uroot

若是出现下图效果，说明登录成功：

（4）重置 MySQL 密码

在 5.7 版本后，我们可以使用 alter user...identified by 命令把 root 用户的密码修改为 “123456”，具体命令如下所示：

mysql> alter user 'root'@'localhost' identified by '123456';

效果如下图所示：

修改完成，使用 exit 或者 quit 命令退出 MySQL，重新登录验证密码是否修改成功，具体命令如下所示：

mysql -uroot -p123456

效果如下图所示：

4. 增加远程登录权限

当我们的帐号不允许从远程登录，只能在 localhost 连接时，这个时候只要在 MySQL 服务器上，更改 mysql 数据库里的 user 表里的 host 项，从 localhost 改成 % 即可实现用户远程登录。

（1）查看 user 表信息

使用如下命令查看 mysql 数据库下的 user 表信息：

mysql> use mysql;        # 切换成 mysql 数据库

mysql> select user,host from user;        # 查询用户信息

效果如下图所示：

可以看到在 user 表中已创建的 root 用户。host 字段表示登录的主机，其值可以用 IP 地址，也可用主机名。

（2）实现远程连接（授权法）

将 host 字段的值改为 % 就表示在任何客户端机器上能以 root 用户登录到 MySQL 服务器，建议在开发时设为 %。命令如下：

# 设置远程登录权限

mysql> update user set host='%' where host='localhost';

# 刷新配置信息

mysql> flush privileges;

效果图如下所示：

Hive 元数据配置到 MySQL 的详细步骤如下：

1. 驱动拷贝

将 /root/software 目录下的 MySQL 驱动包 mysql-connector-java-5.1.47-bin.jar 拷贝到 ${HIVE_HOME}/lib目录下。

cd /root/software/     # 进入目录

cp mysql-connector-java-5.1.47-bin.jar apache-hive-2.3.4-bin/lib/ # 拷贝MySQL驱动包

进入 ${HIVE_HOME}/lib 目录下进行验证：

2. 配置 Metastore 到 MySQL

（1）在 ${HIVE_HOME}/conf 目录下创建一个名为 hive-site.xml 的文件，并使用 vim 编辑器进行编辑：

touch hive-site.xml  # 创建文件

vim hive-site.xml    # 使用vim编辑器进行编辑

（2）根据官方文档配置参数（https://cwiki.apache.org/confluence/display/Hive/AdminManual+Metastore+Administration），拷贝数据到 hive-site.xml 文件中：

<configuration>  

<!--连接元数据库的链接信息 -->    

<property>  

<name>javax.jdo.option.ConnectionURL</name>  

<value>jdbc:mysql://？？？:？？？/hivedb?createDatabaseIfNotExist=true&amp;useSSL=false&amp;useUnicode=true&amp;characterEncoding=UTF-8</value>  

<description>JDBC connect string for a JDBC metastore</description>  

</property>  

<property>  

<!--连接数据库驱动 -->   

<name>javax.jdo.option.ConnectionDriverName</name>  

<value>com.mysql.jdbc.Driver</value>  

<description>Driver class name for a JDBC metastore</description>  

</property>  

<!--连接数据库用户名称 -->    

<property>  

<name>javax.jdo.option.ConnectionUserName</name>  

<value>？？？</value>  

<description>username to use against metastore database</description>  

</property>  

<!--连接数据库用户密码 -->   

<property>  

<name>javax.jdo.option.ConnectionPassword</name>  

<value>？？？</value>  

<description>password to use against metastore database</description>  

</property>  

</configuration>

3. 初始化元数据库

注意：如果使用的是 2.x 版本的 Hive，那么就必须手动初始化元数据库。 使用 schematool -dbType -initSchema 命令进行初始化：

schematool -dbType mysql -initSchema

若是出现“schemaTool completed”则初始化成功，如下图所示：

4. Hive 连接

在任意目录下使用 Hive 的三种连接方式之一：CLI 启动 Hive。由于已经在环境变量中配置了 HIVE_HOME ，所以这里直接在命令行执行如下命令即可：

hive  

或者  

hive --service cli

效果如下图所示：

可以使用如下命令退出 Hive 客户端：

hive> exit;

或者

hive> quit;

1. 创建数据库

进入hive客户端之后，创建数据库qingjiao。

查看任务解析

创建数据库：

 

create database qingjiao;

可以使用如下命令退出 Hive 客户端：

hive> exit;

或者

hive> quit;