随笔分类 -  Spark

使用阿里云镜像maven管理配置开发环境
摘要：修改方法：在~/.m2目录下的settings.xml文件中，（如果该文件不存在，则需要从maven/conf目录下拷贝一份），找到<mirrors>标签，添加如下子标签： <mirror> <id>nexus-aliyun</id> <mirrorOf>*</mirrorOf> <name>Nex 阅读全文
posted @ 2017-03-31 14:36 蒋励 阅读(279) 评论(0) 推荐(0)
spark 1.6 完全分布式平台搭建
摘要：软件环境： scala-2.11.4.tgz spark-1.6.2-bin-hadoop2.6.tgz 操作步骤： 一. 安装scala 1. 解压scala (tar –zxvf filename) 2. 配置scala环境变量（.bashrc中添加SCALA_HOME, 在path中添加：$S 阅读全文
posted @ 2017-03-13 20:53 蒋励 阅读(265) 评论(0) 推荐(1)