07 2021 档案

摘要:前言 hdfs元数据是保存在namenode节点的,由于元数据有一定的格式,写入元数据比较慢,所以使用了追加的方式,即将操作记录都写在一个文件中,然后由别的机器进进程行将记录转换成元数据(合并元数据),这样对于namenode来讲,只需要写入操作记录即可,速度便快了很多,而这个合并元数据的进程为se 阅读全文
posted @ 2021-07-04 15:14 小虎。。。。 阅读(86) 评论(0) 推荐(0)
摘要:概述 开始之前先看看其基本属性,HDFS(Hadoop Distributed File System)是GFS的开源实现。 特点如下: 能够运行在廉价机器上,硬件出错常态,需要具备高容错性 流式数据访问,而不是随机读写 面向大规模数据集,能够进行批处理、能够横向扩展 简单一致性模型,假定文件是一次 阅读全文
posted @ 2021-07-01 16:59 小虎。。。。 阅读(278) 评论(0) 推荐(0)