2018年11月22日
sqoop-1.4.7 搭建
摘要： sqoop搭建环境： jdk1.8 hadoop分布式集群（HDFS） HIVE（看使用情况） 下载网址：http://sqoop.apache.org/ 建议： sqoop1.4.4版本，线上使用比较好，网上相关文档也多 （推介线上使用） sqoop1.99.7版本，创建job方式规范化，但网上资 阅读全文
posted @ 2018-11-22 17:34 天宇星空 阅读(685) 评论(0) 推荐(0)
sqoop执行job报错（org/json/JSONObject）
摘要： NoClassDefFoundError: org/json/JSONObject： [root@hadoop2 ~]# sqoop job --create myjob7 -- import --connect jdbc:mysql://192.168.122.15:3306/company -- 阅读全文
posted @ 2018-11-22 13:44 天宇星空 阅读(2340) 评论(0) 推荐(0)
sqoop数据导入命令 (sql---hdfs）
摘要： mysql >hdfs sqoop导入数据工作流程： sqoop提交任务到hadoop >hadoop启动mapreduce >mapreduce通过指定参数到表中获取导入的数据 >MapReduce将需导入的数据导入到HDFS中 1.全表导入： mysql >hdfs sqoop import - 阅读全文
posted @ 2018-11-22 10:25 天宇星空 阅读(3753) 评论(0) 推荐(0)
sqoop mysql--->hive 报错 （ERROR tool.ImportTool: Import failed: java.io.IOException: java.lang.ClassNotFoundException: org.apache.hadoop.hive.conf.HiveConf）
摘要： ERROR tool.ImportTool: Import failed: java.io.IOException: java.lang.ClassNotFoundException: org.apache.hadoop.hive.conf.HiveConf sqoop从mysql导入到hive报错 阅读全文
posted @ 2018-11-22 09:04 天宇星空 阅读(1560) 评论(0) 推荐(0)