07 2021 档案
摘要:前言 hdfs元数据是保存在namenode节点的,由于元数据有一定的格式,写入元数据比较慢,所以使用了追加的方式,即将操作记录都写在一个文件中,然后由别的机器进进程行将记录转换成元数据(合并元数据),这样对于namenode来讲,只需要写入操作记录即可,速度便快了很多,而这个合并元数据的进程为se
阅读全文
摘要:概述 开始之前先看看其基本属性,HDFS(Hadoop Distributed File System)是GFS的开源实现。 特点如下: 能够运行在廉价机器上,硬件出错常态,需要具备高容错性 流式数据访问,而不是随机读写 面向大规模数据集,能够进行批处理、能够横向扩展 简单一致性模型,假定文件是一次
阅读全文

浙公网安备 33010602011771号