有时候第一次执行 spark submit --master local[*] 单机模式的时候,可以对linux本地路径进行输出。但是有时候提交到yarn的时候,是自动加上hdfs的路径这没问题,

但是接下来在执行  local模式的时候 出现问题了,本地绝对路径也自动加上了hdfs://的前缀。

 

那么解决办法是什么呢,本地路径前面加上 file:// 即可  (比如 )file:///opt/module/spark-2.1.1-yarn/input

posted on 2021-05-06 17:24  菜霸  阅读(422)  评论(0编辑  收藏  举报