2018年4月24日
sqoop增量导数据
摘要： sqoop要实现增量导入参数到hive或者hdfs 1.需要在mysql中创建可以自动更新的字段，当插入数据时和更新数据时改字段自动更新，如图中update_time,当数据插入时会记录更新为插入时间，数据更新时会更新为数据更新时的时间 `update_time` timestamp NULL DE 阅读全文
posted @ 2018-04-24 16:25 xiaopengfei 阅读(455) 评论(0) 推荐(0)
sqoop 密码别名模式 --password-alias
摘要： sqoop要使用别名模式隐藏密码 1.首先使用命令创建别名 hadoop credential create xiaopengfei -provider jceks://hdfs/user/password/xiaopengfei 说明： create 指定创建的别名 -provider jceks 阅读全文
posted @ 2018-04-24 16:03 xiaopengfei 阅读(704) 评论(0) 推荐(0)