11 2018 档案

摘要:使用hive储存数据时,需要对做分区,如果从kafka接收数据,将每天的数据保存一个分区(按天分区),保存分区时需要根据某个字段做动态分区,而不是傻傻的将数据写到某一个临时目录最后倒入到某一个分区,这是静态分区。 Hive动态分区步骤如下: 1、建立某一个源表模拟数据源并插入一些数据 2、建立一张分 阅读全文
posted @ 2018-11-12 15:34 健身男儿挑灯夜读 阅读(9564) 评论(3) 推荐(0)
摘要:2018年阅读书籍清单 深入分布式缓存 Scala编程 Kafka技术内幕 HIVE编程指南 快学Scala Hbase实战 Hbase权威指南 《未完》 阅读全文
posted @ 2018-11-09 15:02 健身男儿挑灯夜读 阅读(136) 评论(0) 推荐(0)