sqoop的安装及其导入导出数据

一、安装sqoop的过程：

1、解压缩：tar -zxvf ... -C ....

2、配置sqoop-env.sh

 

 

 

 

 

 

 

3、把驱动放到sqoop/lib下

命令：cp ...

4、启动mysql服务,以及sqoop与mysql的连接

 

 

 

 

5、启动mysql、查看数据库，创建test数据库

 

 

 

 

6、创建表格t_user,往表格中添加数据、查看表格内容。

 

 

 

 

 

 

 

7、创建一个sqoop/conf1 导入数据的说明。import：非hadoop导入到sqoop,export从hadoop导出到其他数据库，

 

 

 

 

 

8、启动hadoop,yurn集群，执行sqoop/conf1配置文件

 

 

 

 

 

9、用hdfs 查看导入的数据

 

10、Mysql查询结果向hdfs导入数据，创建另一个表t_id_card表

 

11、配置conf2文件，执行sqoop导入

 

 

 

 

12、执行conf2，合并两个表格，在hdfs下查看结果

 

13、把数据从hive导出到mysql中，启动hive在hive的shopping数据库中创建一个外部表，再创建一个副本表

 

 

 

 

查看副本表中的内容以及副本表的路径

 

 

 

 

14、在mysql下创建shopping表，配置sqoop/conf3

 

 

 

 

15、执行conf3,从MySQL下查看到数据从hive导入到mysql中了

 

 

 

 

 

 

16、将数据导入到hbase中。

启动hbase,创建usr_card表，配置conf4

 

 

 

 

执行conf4

 

 

 

 

从hbase下可以查看到数据