随笔分类 -  HADOOP

hdfs命令get或者put提示找不到目录或文件
摘要：今天用hdfs命令出现个诡异情况： hadoop fs put a.txt /user/root/ put: `a.txt': No such file or directory 用get命令存在相同问题 目前未深究，因急用环境，先处理了put命令： 1.看日志，服务未有异常； 2.重启机器/重启h 阅读全文
posted @ 2018-08-16 19:40 bamboo233 阅读(3963) 评论(1) 推荐(0)
HDFS-put: unexpected URISyntaxException
摘要：目的：将某zip上传到HDFS某目录 [hdfs@mr1 jars]$ hadoop fs put "20180720_155245\ label.zip" /user/File/ put: unexpected URISyntaxException 解决：将空格改为%20 [hdfs@mr1 ja 阅读全文
posted @ 2018-08-02 10:28 bamboo233 阅读(2740) 评论(0) 推荐(0)
HADOOP百度云资料
摘要：百度云下载地址： 链接：http://pan.baidu.com/s/1pL56hkv 密码：u4h3 解压密码：www.mukedaba.com 阅读全文
posted @ 2017-07-04 10:23 bamboo233 阅读(431) 评论(0) 推荐(0)
Ambari集群随手记
该文被密码保护。
posted @ 2017-05-09 11:16 bamboo233 阅读(0) 评论(0) 推荐(0)
HDFS安全模式
摘要：用户可以通过dfsadmin safemode value 来操作安全模式，参数value的说明如下： enter 进入安全模式 leave 强制NameNode离开安全模式 get 返回安全模式是否开启的信息 wait 等待，一直到安全模式结束。 运行Hadoop程序时，有时候会报以下错误： or 阅读全文
posted @ 2017-05-09 11:15 bamboo233 阅读(240) 评论(0) 推荐(0)
集群加数据节点
该文被密码保护。
posted @ 2017-05-08 14:49 bamboo233 阅读(1) 评论(0) 推荐(0)
hdfs haadmin命令
摘要：HA集群启动后，我们可以通过一些指令来管理HDFS集群。“bin/hdfs haadmin DFSHAAdmin”指令，其可选参数： 1、 transitionToActive 与 transitionToStandbyl ：将指定的namenode ID切换为Active或者standby。这个指 阅读全文
posted @ 2017-04-26 16:15 bamboo233 阅读(2140) 评论(0) 推荐(0)
HDFS退出安全模式
摘要：运行Hadoop程序时，有时候会报以下错误： org.apache.hadoop.dfs.SafeModeException: Cannot delete /user/hadoop/input. Name node is in safe mode 这个错误应该还满常见的吧（至少我运行的时候是这样的） 阅读全文
posted @ 2017-04-24 13:46 bamboo233 阅读(5026) 评论(0) 推荐(0)