04 2018 档案
摘要:sqoop要实现增量导入参数到hive或者hdfs 1.需要在mysql中创建可以自动更新的字段,当插入数据时和更新数据时改字段自动更新,如图中update_time,当数据插入时会记录更新为插入时间,数据更新时会更新为数据更新时的时间 `update_time` timestamp NULL DE
阅读全文
摘要:sqoop要使用别名模式隐藏密码 1.首先使用命令创建别名 hadoop credential create xiaopengfei -provider jceks://hdfs/user/password/xiaopengfei 说明: create 指定创建的别名 -provider jceks
阅读全文
摘要:没搭建私服的情况下引入本地的jar,并把本地jar打包进项目的run jar 以打包引入hadoop-common-2.7.5.jar为例 引用 复制jar包所在的路径 打开cmd命令提示符 切换路径到jar所在的目录 e: cd E:\迅雷下载\hadoop-2.7.5\share\hadoop\
阅读全文

浙公网安备 33010602011771号