随笔分类 -  6.Hadoop

Hadoop DataNode 多目录磁盘扩展配置
摘要：org.apache.hadoop.util.DiskChecker$DiskErrorException: Too many failed volumes 阅读全文
posted @ 2020-03-27 20:01 可以看看你胖次吗 阅读(1306) 评论(0) 推荐(0)
记录配置集群HA的坑
摘要：配置HA 及注意事项 阅读全文
posted @ 2020-03-03 23:11 可以看看你胖次吗 阅读(355) 评论(0) 推荐(0)
初始化zkfc时 报错HadoopIllegalArgumentException: HA is not enabled for this namenode.
摘要：HadoopIllegalArgumentException: HA is not enabled for this namenode.具体原因待确认 阅读全文
posted @ 2020-03-03 22:14 可以看看你胖次吗 阅读(2203) 评论(1) 推荐(0)
ssh 主机地址 命令 显示 command not found 的解决方案
摘要：群起脚本需要加上source /etc/profile 阅读全文
posted @ 2020-03-03 21:54 可以看看你胖次吗 阅读(2093) 评论(0) 推荐(0)
Yarn 配置多队列容量调度器
摘要：job在yarn下指定队列运行 阅读全文
posted @ 2020-03-03 19:33 可以看看你胖次吗 阅读(3386) 评论(0) 推荐(1)
初始化环行缓冲区失败，报空指针异常的debug调试
摘要：主要记录下debug的流程 阅读全文
posted @ 2020-03-03 11:39 可以看看你胖次吗 阅读(298) 评论(0) 推荐(0)
MapReduce 中的key不一定必须要实现comparable接口
摘要：MapReduce 中的key不一定必须要实现comparable接口，也可手动设置一个比较器 阅读全文
posted @ 2020-03-03 11:08 可以看看你胖次吗 阅读(408) 评论(0) 推荐(0)
关于导致java.lang.InstantiationException异常的原因分析
摘要：关于导致java.lang.InstantiationException异常的原因分析 阅读全文
posted @ 2020-02-24 19:38 可以看看你胖次吗 阅读(2542) 评论(0) 推荐(0)
Hadoop namenode格式化失败的解决
摘要：Hadoop namenode格式化失败的解决 阅读全文
posted @ 2020-02-22 16:45 可以看看你胖次吗 阅读(2380) 评论(0) 推荐(0)
Hadoop Reducer 类运行报NullPointerException错误原因
摘要：大概率是k，v在新建时没有new对象！！！ 在运行reducer类时，报错如下 原因为空指针，debug一下发现v值为null，需要给v创建一个对象再使用set方法 追加： 当进程没有进入reducer就报空指针，应该是分组类出了问题，比如下面的错误： 错误原因是没有讲参数传入父类构造器，看父类源码 阅读全文
posted @ 2020-02-21 22:20 可以看看你胖次吗 阅读(248) 评论(0) 推荐(0)
使用-importcheckpoint 时出现No image directories available 错误的原因
摘要：使用-importcheckpoint 时出现No image directories available 错误的原因 阅读全文
posted @ 2020-02-21 20:44 可以看看你胖次吗 阅读(962) 评论(0) 推荐(0)

Live2D