代码改变世界

随笔分类 -  1.4.├─ Spark

大数据工具比较:R 语言和 Spark 谁更胜一筹?

2016-05-25 14:26 by 猎手家园, 1090 阅读, 收藏, 编辑
摘要: 本文有两重目的,一是在性能方面快速对比下R语言和Spark,二是想向大家介绍下Spark的机器学习库 背景介绍 由于R语言本身是单线程的,所以可能从性能方面对比Spark和R并不是很明智的做法。即使这种比较不是很理想,但是对于那些曾经遇到过这些问题的人,下文中的一些数字一定会让你很感兴趣。 你是否曾 阅读全文

CentOS6.5 安装Spark集群

2016-05-17 11:14 by 猎手家园, 1607 阅读, 收藏, 编辑
摘要: 一、安装依赖软件Scala(所有节点) 1、下载Scala:http://www.scala-lang.org/files/archive/scala-2.10.4.tgz 2、解压: 3、配置scala环境变量 4、测试scala运行环境 二、安装spark 1、下载spark:http://ar 阅读全文