摘要: (1) operation history:SPARK_HADOOP_VERSION=2.2.0 SPARK_YARN=true sbt/sbt assembly按官方教程失败,但去掉红色的部分,很容易编译成功,这条指令会带来什么?修改为SPARK_HADOOP_VERSION=2.2.0SPARK_YARN=true sbt/sbt clean compile package assembly正常通过(2) 启动测试程序export YARN_CONF_DIR=$HADOOP_HOMESPARK_JAR=./assembly/target/scala-2.9.3/spark-assembly 阅读全文
posted @ 2014-02-27 00:29 enyun 阅读(437) 评论(0) 推荐(0) 编辑