09 2019 档案
关于大数据T+1执行流程
摘要：关于大数据T+1执行流程 前提： 搭建好大数据环境（hadoop hive hbase sqoop zookeeper oozie hue） 1.将所有数据库的数据汇总到hive (这里有三种数据源 ORACLE MYSQL SEQSERVER) 全量数据抽取示例： ORACLE（注意表名必须大写！ 阅读全文
posted @ 2019-09-20 16:34 阿叮339 阅读(2708) 评论(0) 推荐(0)
Hive部分函数解析
摘要：Hive部分函数解析 Hive里的exists ,in ,not exists ,not in 相关函数 表数据准备： 1.选择指定数据库 eg: use bg_database1; 2. 创建表 3.插入表数据 4. 根据原表 demo0919 再创建一张表 demo0919_1，用于比对数据。 阅读全文
posted @ 2019-09-19 20:59 阿叮339 阅读(528) 评论(0) 推荐(0)