2025年6月16日
HDFS中distcp与cp的区别
摘要： 关键点提前：先看下面再回头看这里 为什么增大-Ddfs.namenode.list.parallelism这个参数反而能减轻NameNode压力？ 答：通常增大并发参数会增加系统负载，但这里的情况特殊。我理解这是因为当小文件极多时，如果不提高并行度，客户端获取文件列表的操作会排队等待，反而延长了Na 阅读全文
posted @ 2025-06-16 15:55 zz_bigdata 阅读(106) 评论(0) 推荐(0)