摘要：目的 本文档是使用Hadoop分布式文件系统（HDFS）作为Hadoop集群或独立通用分布式文件系统的一部分的用户的起点。虽然HDFS旨在在许多环境中“正常工作”，但HDFS的工作知识有助于在特定集群上进行配置改进和诊断。 概述 HDFS是Hadoop应用程序使用的主要分布式存储。HDFS集群主要由 阅读全文

摘要：进行追加文件时出现AlreadyBeingCreatedException错误 堆栈信息大致如下： 目前得到的可能原因： 多进程进行同一文件的写入在HDFS中是可能引发这种错误的。 hadoop 的dfs里边有个lease manager 维护了文件path －> lease和 DFSClient  阅读全文

摘要：HA With QJM 目标 本指南概述了HDFS高可用性（HA）功能以及如何使用Quorum Journal Manager（QJM）功能配置和管理HA HDFS集群。 本文档假设读者对HDFS集群中的一般组件和节点类型有一般的了解。有关详细信息，请参阅HDFS架构指南。 本指南讨论如何使用Quo 阅读全文