随笔分类 -  Hive

摘要:记录日常工作中实际场景中,对hive分区表的一次启发与实践。 核心操作技巧 hive 指定分区locaiton,进行不同存储位置或协议的数据读取。 业务背景 在业务发展过程中,发现ucloud在某些峰值场景下会出现严重的数据问题,为了服务稳定性与存储可靠性,需要做整体服务云迁移的需求。 整体迁移技术 阅读全文
posted @ 2020-04-21 18:15 Eric-Ln 阅读(1007) 评论(0) 推荐(0)
摘要:前言 本文主要参考淘宝极限存储方案,并结合其他参考文章,总结实践。 整体演示 user (源数据用户表,伪码): create table user ( id bigint, status int, create_time bigint, update_time bigint ) user_all( 阅读全文
posted @ 2020-04-20 14:32 Eric-Ln 阅读(720) 评论(0) 推荐(0)