摘要: 一、Spark-Shell交互式工具 1、Spark-Shell交互式工具 Spark-Shell提供了一种学习API的简单方式, 以及一个能够交互式分析数据的强大工具。 在Scala语言环境下或Python语言环境下均可使用。 启动Spark-Shell  ./bin/spark-shell 本 阅读全文
posted @ 2017-03-20 17:03 凌-风 阅读(2151) 评论(0) 推荐(0)
摘要: 安装在集群上的spark版本:spark-1.6.3-bin-hadoop2.6.tgz scala版本:scala-2.10.4.tgz 1、spark是什么 Spark, 是一种通用的大数据计算框架, 正如传统大数据技术Hadoop的MapReduce、 Hive引擎, 以及Storm流式实时计 阅读全文
posted @ 2017-03-20 12:00 凌-风 阅读(7096) 评论(0) 推荐(0)