03 2017 档案

使用阿里云镜像maven管理配置开发环境
摘要：修改方法：在~/.m2目录下的settings.xml文件中，（如果该文件不存在，则需要从maven/conf目录下拷贝一份），找到<mirrors>标签，添加如下子标签： <mirror> <id>nexus-aliyun</id> <mirrorOf>*</mirrorOf> <name>Nex 阅读全文
posted @ 2017-03-31 14:36 蒋励 阅读(281) 评论(0) 推荐(0)
使用maven配置scala Hadoop spark开发环境
摘要：1. 新建maven project 2. Group id : org.scala-tools.archetypes Artifact id : scala-archetype-simple Version : 1.2 3. 修改pom.xml文件（添加Hadoop client 及spark core 依赖） http://mvnrepository.com/ Hadoop clie... 阅读全文
posted @ 2017-03-28 17:05 蒋励 阅读(1148) 评论(0) 推荐(0)
Maven 环境配置
摘要：1. 解压maven 2. 配置MAVEN_HOME环境变量 MAVEN_HOME D:\maven\apache-maven-3.0.5-bin\apache-maven-3.0.5 path ;%MAVEN_HOME%\bin\ 3. 命令行输入 mvn –version 验证是否安装好 4. 阅读全文
posted @ 2017-03-27 15:28 蒋励 阅读(138) 评论(0) 推荐(0)
Eclipse 配置scala开发环境（windows）
摘要：1. scala2.10.4.msi 安装 2. 配置SCALA_HOME 及path路径 SCALA_HOME C:\Program Files (x86)\scala PATH :%SCALA_HOME%\bin 3. 安装eclipse-scala-plugin插件，下载地址http://sc 阅读全文
posted @ 2017-03-27 15:06 蒋励 阅读(17417) 评论(0) 推荐(2)
spark 1.6 完全分布式平台搭建
摘要：软件环境： scala-2.11.4.tgz spark-1.6.2-bin-hadoop2.6.tgz 操作步骤： 一. 安装scala 1. 解压scala (tar –zxvf filename) 2. 配置scala环境变量（.bashrc中添加SCALA_HOME, 在path中添加：$S 阅读全文
posted @ 2017-03-13 20:53 蒋励 阅读(266) 评论(0) 推荐(1)
Hadoop 2.6.0 完全分布式平台搭建
摘要：一、准备软件环境： hadoop-2.6.0.tar.gz CentOS release 6.5 jdk-7u67-linux-x64.tar.gz 网络配置： master1 192.168.11.24 worker1 192.168.11.25 二、操作步骤： 1. 修改主机名 2. 配置ssh 阅读全文
posted @ 2017-03-09 11:53 蒋励 阅读(248) 评论(1) 推荐(1)