vikings`s blog

摘要： 问题1：SPARK与HADOOP之间的关系？ spark是一种高效处理hadoop分布式数据的处理引擎。借助hadoop的yarn框架，spark就可以运行在hadoop集群中。同时spark也可以处理存储在hdfs、Hbase、Cassandra、hive和所有存储在hadoop中的数据。spa... 阅读全文

摘要： 今天在安装hadoop2.2.0时遇到若干问题，解决这些问题有些心得，记录下来以备不时之需。问题1、master和slave之间不能相互ssh免密码登陆。 问题表象此处略过，直接说解决办法： 1、查看.ssh 目录权限是否正确。700、600 经测试都没有问题。 2、查看.ssh 目录里面文件... 阅读全文