摘要: 刚才利用hadoop和mahout运行kmean是算法,一开始利用了10个节点,一个master,9个slave,运行了7分钟,我为了看速度的变化,就改用伪分布的形式,但是一开始运行就报错了: 意思就是针对文件块block,没有可用的节点,我一开始以为是节点没=没有启动,但是后来看了一下webUI, 阅读全文
posted @ 2017-04-08 12:04 小小范同学 阅读(683) 评论(0) 推荐(0) 编辑
摘要: 今天将mahout包传到集群中,集群中的jdk是1.6,运行时报错,原因是版本太低,因为我的mahout是用jdk1.8编译的;所以总结来看就是如果jdk版本使用不当,就会报这个错误; 阅读全文
posted @ 2017-04-08 10:17 小小范同学 阅读(165) 评论(0) 推荐(0) 编辑
摘要: 前一段时间配置hadoop集群环境,发现一个现象,教程中的命令形式是ssh hostname,当然这个hostname应该是在ssh发起者的hosts文件中和相应的IP对应;现在问题来了: 我用的是mac,用户名是fanjiajia,其他三台节点都是centos,用户是slave1,slave2,s 阅读全文
posted @ 2017-04-08 09:47 小小范同学 阅读(189) 评论(0) 推荐(0) 编辑