摘要：
问题描述：使用dfs-format格式化hdfs之后，出现datanode只启动了一个的错误（原来有3个datanode，2个namenode）现场还原： 先查看一下namenode中 /$HADOOP_HOME/tmp/dfs/name/current/下的VERSION文件中的... 阅读全文
posted @ 2016-04-18 09:48
时光.漫步
阅读(636)
评论(0)
推荐(0)
摘要：
解决方法： (先确保你的每个节点网络设置中 勾选了 Available to all users) 重点来了!!!——> 先用./zkServer.sh start 启动各个zookeeper，再用./ hadoop-daemon.sh start journalnode启动各个N... 阅读全文
posted @ 2016-04-17 23:02
时光.漫步
阅读(709)
评论(0)
推荐(0)
摘要：
Hadoop是使用Java语言开发的，但是有一些需求和操作并不适合使用java，所以就引入了本地库（Native Libraries）的概念，通过本地库，Hadoop可以更加高效地执行某一些操作。目前在Hadoop中，本地库应用在文件的压缩上面：zlib gzip 在使用这两种压缩... 阅读全文
posted @ 2016-04-15 11:48
时光.漫步
阅读(809)
评论(0)
推荐(1)
摘要：
返回上一次目录有时候千辛万苦进入了一个很深层的目录，一不小心输入了cd并回车，有什么办法快速回到刚才所在的目录呢？对于bash来说，只需要很管理的一个命令：cd -该命令等同于cd $OLDPWD，关于这一点在bash的手册页(可使用命令man bash访问其手册页)中有介绍：A... 阅读全文
posted @ 2016-04-15 11:41
时光.漫步
阅读(464)
评论(0)
推荐(0)
摘要：
错误描述： 使用 kill -9 namenode-jps-id 杀死active状态的namenode1进程时，无法使namenode2自动切换到active状态 查看namenode2日志得到如下信息：org.apache.hadoop.hdfs.qjournal.cl... 阅读全文
posted @ 2016-04-15 11:30
时光.漫步
阅读(1399)
评论(0)
推荐(0)
摘要：
hadoop namenode ha–手动切换 在参考本手册前请确保Hadoop中HDFS组件已经成功部署并正常运行，同时系统基本环境完备，包括ssh免密码登录、/etc/hosts等。 假设目前NameNode在服务器namenode1上运行，服务器nameno... 阅读全文
posted @ 2016-04-14 20:20
时光.漫步
阅读(947)
评论(0)
推荐(0)
摘要：
查看日志如下: 2016-04-14 04:07:58,821 FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for Block pool (Datanode Uuid u... 阅读全文
posted @ 2016-04-14 19:48
时光.漫步
阅读(505)
评论(0)
推荐(0)
摘要：
错误描述：Java: ssh: Could not resolve hostname Java: Name or service not known library: ssh: Could not resolve hostname library: Name or servi... 阅读全文
posted @ 2016-04-14 16:19
时光.漫步
阅读(1970)
评论(0)
推荐(0)
摘要：
ssh vim中不小心按下ctrl+s由于windows使用习惯, 经常会一不小心在ssh vim里面按下了ctrl+s… 然后整个shell就挂掉了. 以前都是强制结束的, google了一下, 发现原来按ctrl+q就可以了ctrl+s是”阻断向终端输出” ctrl+q是”恢复... 阅读全文
posted @ 2016-04-14 15:24
时光.漫步
阅读(295)
评论(0)
推荐(0)
摘要：
配置免密码登陆 #首先要配置itcast01到itcast02、itcast03、itcast04、itcast05、itcast06、itcast07的免密码登陆在itcast01上生产一对钥匙ssh-keygen -t rsa将公钥拷贝到其他节点... 阅读全文
posted @ 2016-04-09 10:24
时光.漫步
阅读(244)
评论(0)
推荐(0)
浙公网安备 33010602011771号