摘要: 一,Hive的数据压缩 在实际工作当中,hive当中处理的数据一般都需要经过压缩,例如在map端产生的数据进行压缩或在reduce端产生的数据也进行压缩后再输出。这样可以节省我们的网络带宽。 1.1 MR支持的压缩编码 为了支持多种压缩/解压缩算法,Hadoop引入了编码/解码器,如下表所示: 压缩 阅读全文
posted @ 2019-12-19 00:31 他山之石·玉 阅读(544) 评论(0) 推荐(0) 编辑