2019年1月23日
摘要: azkaban的安装部署 在/root/apps 1目录下新建azkaban文件夹 上传安装包到azkaban 2解压 3删掉安装包 4重命名 5修改配置文件 登录mysql数据库 创建azkaban数据库; 修改conf下的azkaban.properties 修改时区为亚洲上海 注:先配置好服务 阅读全文
posted @ 2019-01-23 21:31 o_0的园子 阅读(561) 评论(0) 推荐(0) 编辑
摘要: 执行下面命令的时候报错 ERROR manager.SqlManager: Error executing statement: java.sql.SQLException: Access denied for user 'root'@'mini1' (using password: YES) 这个 阅读全文
posted @ 2019-01-23 19:52 o_0的园子 阅读(1106) 评论(1) 推荐(0) 编辑
摘要: 把数据从hadoop导出到关系型数据库 将数据从HDFS导出到RDBMS数据库 导出前,目标表必须存在于目标数据库中。 u 默认操作是从将文件中的数据使用INSERT语句插入到表中 u 更新模式下,是生成UPDATE语句更新表数据 语法 以下是export命令语法。 $ sqoop export ( 阅读全文
posted @ 2019-01-23 15:00 o_0的园子 阅读(460) 评论(0) 推荐(0) 编辑
摘要: 把数据从关系型数据库导入到hadoop 启动sqoop 导入表表数据到HDFS 下面的命令用于从MySQL数据库服务器中的emp表导入HDFS。 在/root/sqoop下执行命令,导入emp表到hdfs 在/root/sqoop下执行命令,导入emp_add表到hdfs 执行完命令会生成 emp_ 阅读全文
posted @ 2019-01-23 14:59 o_0的园子 阅读(1140) 评论(0) 推荐(0) 编辑
摘要: 1上传 sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz 2解压 3重命名 设置环境变量 4修改配置文件 5上传mysql驱动包到/root/apps/sqoop/lib目录下 6启动sqoop 启动完成 阅读全文
posted @ 2019-01-23 14:57 o_0的园子 阅读(185) 评论(0) 推荐(0) 编辑
摘要: 下载地址 https://pan.baidu.com/s/1qWDl29L9I_KVU54c0ioNfQ fvfh 3.1 概述 sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。 导入数据:MySQL,Oracle导入数据到Hadoop的HDFS、HIVE、HB 阅读全文
posted @ 2019-01-23 14:19 o_0的园子 阅读(466) 评论(0) 推荐(0) 编辑
摘要: 复制fo的t_fo_account表结构和数据到base库 结果 阅读全文
posted @ 2019-01-23 10:49 o_0的园子 阅读(1646) 评论(0) 推荐(0) 编辑