随笔分类 -  Spark

摘要:这一阶段主要是在学习Scala,知乎上说推荐先学习一下Haskell再学习Scala,但我觉得不一定要曲线救国。不过在学习过程中遇到的困难的确不少,好歹Scala是公认的其特性的复杂程度是要超过C++的嘛:-)我学习Scala的主要动机是想研究Spark,尽管Python和Java等都可以用来开发S... 阅读全文
posted @ 2015-07-27 20:18 tinylcy 阅读(2114) 评论(0) 推荐(0)
摘要:因为Spark与Hadoop是关联的,所以在安装Spark前应该根据已安装的Hadoop版本来选择待安装的Sqark版本,要不然就会报“Server IPC version X cannot communicate with client version Y”的错误。 我安装的Hadoop版本为Ha... 阅读全文
posted @ 2015-07-18 20:45 tinylcy 阅读(534) 评论(0) 推荐(0)