Elwin.Y

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

2013年11月20日

摘要: 1、在hadoop1.1.1/conf 下新建文件 nn-excluded-list并写入要删除的节点名称或者IP 一个节点 一行如:mos5200appcmpaknwomrac72、分发nn-excluded-list 文件至 各个节点3、 上配置 hdfs-site.xml 并新增内容: dfs.hosts.exclude /home/software/hadoop-1.1.1/conf/nn-excluded-list4、执行hadoop dfsadmin -refreshNodes命令,它会在后台进行Block块的移动从移出的Nodes上移动到其它的Nodes上面5. 通过以下2种方式 阅读全文
posted @ 2013-11-20 13:30 Elwin.Y 阅读(736) 评论(0) 推荐(0)

摘要: Hadoop 中疑问解析FAQ问题剖析一、HDFS 文件备份与数据安全性分析1 HDFS 原理分析1.1 Hdfs master/slave模型hdfs采用的是master/slave模型,一个hdfs cluster包含一个NameNode和一些列的DataNode,其中NameNode充当的是master的角色,主要负责管理hdfs文件系统,接受来自客户端的请求;DataNode主要是用来存储数据文件,hdfs将一个文件分割成一个或多个的block,这些block可能存储在一个DataNode上或者是多个DataNode上.具体实现如下:1. NameNode:基本上等同于Master的地 阅读全文
posted @ 2013-11-20 13:25 Elwin.Y 阅读(563) 评论(1) 推荐(0)