文章分类 -  hadoop

Hive 压缩方式介绍与使用
摘要：Hive 压缩方式介绍与使用 1. 引言 在大数据生态系统中，Apache Hive 是一个常用的数据仓库工具。由于 Hive 处理的数据量通常非常庞大，数据压缩显得至关重要。压缩不仅可以显著减少存储空间，还能降低 I/O 开销，从而加快数据传输和查询处理速度。然而，不同的压缩算法在压缩比、CPU 阅读全文
posted @ 2025-08-12 10:24 magic_guan 阅读(160) 评论(0) 推荐(0)
HDFS Disk Balancer 介绍&使用
摘要：一、介绍 一句话介绍：用于HDFS DataNode单节点内多个数据盘数据均衡。 官网介绍如下： Diskbalancer is a command line tool that distributes data evenly on all disks of a datanode. This too 阅读全文
posted @ 2023-08-30 17:56 magic_guan 阅读(570) 评论(0) 推荐(0)