咖啡猫

导航

08 2014 档案

DataNode,NameNode,JobTracker,TaskTracker用jps查看无法启动解决办法
摘要：查看tasktracker的50060的地址无法正常查看，主要有两个原因，一个是在/tmp目录下有以前使用2.02版本留下的文件没有删除，二个是因为端口被占用了解决方法：一、删除/tmp目录下所有文件[root@localhost hadoop]# su -[root@localhost ~]# c... 阅读全文

posted @ 2014-08-20 15:35 咖啡猫1292 阅读(495) 评论(0) 推荐(0)

unix shell-01 file
摘要：1 一个文件有三种访问方式：1、读，可以显示该文件的内容2、写，删除或者编辑这个文件3、执行，如果该文件时一个shell脚本或程序按照文件所针对的用户，用户可以分为三种：1、文件属主，即该文件的创建者。2、同组用户，即拥有该文件的用户所在组中的任何用户3、其他用户，即不属于拥有该文件的用户组中的某一... 阅读全文

posted @ 2014-08-14 16:10 咖啡猫1292 阅读(223) 评论(0) 推荐(0)

HDFS的可靠性
摘要：HDFS的可靠性1、冗余副本策略 2、机架策略 3、心跳机制 4、安全模式5、校验和 6、回收站 7、元数据保护 8、快照机制1、冗余副本策略可以在hdfs-site.xml中设置复制因子指定副本数量所有数据块都有副本Datanode启动时，遍历本地文件系统，产生一份hdfs数据块... 阅读全文

posted @ 2014-08-07 14:18 咖啡猫1292 阅读(601) 评论(0) 推荐(0)

HDFS
摘要：一、 hdfs默认存储基本单位是64M的数据块，若一个文件小于64M，则该文件不会占用整个数据块。二、HDFS体系结构 1、元数据节点（Namenode） 主控制服务器，管理文件系统的命名空间，包括打开、关闭、重命名文件和目录。 NameNode将数据块映射到DataNode，... 阅读全文

posted @ 2014-08-06 14:21 咖啡猫1292 阅读(536) 评论(0) 推荐(0)