一杯浮生

09 2017 档案

Spark在StandAlone模式下提交任务,spark.rpc.message.maxSize太小而出错
摘要:1.错误信息org.apache.spark.SparkException: Job aborted due to stage failure:Serialized task 32:5 was 1728746673 bytes, which exceeds max allowed: spark.rp 阅读全文

posted @ 2017-09-23 16:32 一杯浮生 阅读(6175) 评论(0) 推荐(0)

spark提交jar包时出现unsupported major.minor version 52.0错误的解决方案
摘要:一、问题: 最近在spark集群上做一个项目,打包提交jar包时,出现了unsupported major.minor version 52.0的报错,而在local模式运行却能正常运行! 二、错误原因: 查阅诸多资料得出的结论就是:项目编译得到的class文件的版本高于运行环境中jre的版本号,高 阅读全文

posted @ 2017-09-04 11:00 一杯浮生 阅读(32810) 评论(0) 推荐(2)

导航