05 2021 档案
Hive总结
摘要:MR与hive_sql替换 // MR:public static class Map extends Mapper<LongWritable, Text, Text, IntWritable> { private final static IntWritable one = new IntWrit 阅读全文
posted @ 2021-05-23 19:04 陕西小楞娃 阅读(308) 评论(0) 推荐(0)
Hive_sql50道练习题
摘要:创建表 create table student( s_id string comment '学生编号', s_name string comment '学生姓名', s_birth string comment '学生生日', s_sex string comment '学生性别') commen 阅读全文
posted @ 2021-05-18 00:27 陕西小楞娃 阅读(535) 评论(0) 推荐(0)
spark优化
摘要:码云: https://gitee.com/Xiaokeworksveryhard/big-data/tree/master/%E6%80%BB%E7%BB%93/spark%E8%B0%83%E4%BC%98 combineBykey压缩图 stage和job管道流程图 task任务详情图 阅读全文
posted @ 2021-05-15 13:49 陕西小楞娃 阅读(52) 评论(0) 推荐(0)
Hive的导入导出方式汇总
摘要:导入 本地文件导入到Hive表CREATE TABLE testA ( id INT, name string, area string ) PARTITIONED BY (create_time string) ROW FORMAT DELIMITED FIELDS TERMINATED BY ' 阅读全文
posted @ 2021-05-04 20:44 陕西小楞娃 阅读(123) 评论(0) 推荐(0)