08 2018 档案

摘要:HDFS写文件 1. 使用HDFS提供的客户端Client,向远程的namenode发起RPC请求 2. Namenode会检查要创建的文件是否已经存在,创建者是否有权限进行操作,成功则会为文件创建一个记录,否则会让客户端抛出异常; 3.当客户端开始写入文件的时候,客户端会将文件切分成多个packe 阅读全文
posted @ 2018-08-31 10:15 jason*liu 阅读(219) 评论(0) 推荐(0)
摘要:hdfs名词解释: Block: 在hdfs中文件都是采用分块的方式存储,每个block放在不同的DataNode上,block标识是一个三元组(block ID,numBytes,generationStamp),blockID是唯一的,具体分配由namenode节点设置,然后再由DataNode 阅读全文
posted @ 2018-08-30 17:06 jason*liu 阅读(495) 评论(0) 推荐(0)