寒假学习日报(三)

  今日绝大部分时间都用去安装分布式hadoop了,之前的电脑因为内存小,装的是伪分布式,这次换了电脑之后希望装分布式的,遗憾的是今天并没有成功,出了一大堆bug。首先最大的bug如下:

 

   hadoop集群首先要求的就是几个节点之间的关联,因此需要设置ssh免密登录,疑惑的是我在使用非root账号的时候设置免密登录成功了,可以ping到其他主机:

 

   但是换到root账户的时候就出现了Permission denied的问题,而且我在“配置”好之后启动的时候是需要输入root@...的密码的,显而易见的输入错误,但密码是刚刚改过的,可以肯定不会出现输入错误的情况:

 

   明天再尝试重新安装一下hadoop集群吧。除了这个bug之外,还有rsync同步运行的bug,我按照教程写出来的脚本不知道为什么在传输文件的时候会带上一些莫名其妙的后缀:

 

   因为实在是搞不明白所以直接手动配置其他节点的文件去了,一共就两个从机。这个bug也待解决。

  此外是tensorflow的学习,学的东西实在不是很多,大部分时间都泡在Linux上了,学习的内容给个截图:

 

   视频还在同步观看,有了新的知识还会进行整理归纳,今日最大的问题还是时间分配问题,花在配置hadoop的时间太多了。。。。

posted @ 2021-01-12 19:40  千幽行  阅读(41)  评论(0编辑  收藏  举报