• 博客园logo
  • 会员
  • 周边
  • 众包
  • 新闻
  • 博问
  • 闪存
  • HarmonyOS
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录

littlesuccess

  • 博客园
  • 联系
  • 订阅
  • 管理

公告

View Post

spark0.9.1 assembly build-RedHat6.4 YARN 2.2.0

1. Install git on RedHat6.4:

    1.1. setup your local yum repo

    1.2. yum install git

2. Install JDK and set PATH

3. Install Scala 2.10.4 and set PATH

4. Download spark src code package

5. go to the src folder

   5.1. SPARK_YARN_VERSION=2.2.0 SPARK_YARN=true sbt/sbt assembly

6. found the assembly jar under assembly/scala-2.10

posted on 2014-04-16 22:21  littlesuccess  阅读(191)  评论(0)    收藏  举报

刷新页面返回顶部
 
博客园  ©  2004-2025
浙公网安备 33010602011771号 浙ICP备2021040463号-3