异常:Python in worker has different version 2.6 than that in driver 2.7

问题:pyspark的环境和系统python环境冲突

解决:

方法一、

import os
os.environ['PYSPARK_PYTHON']='/opt/anaconda2/bin/python'

方法二、

export PYSPARK_PYTHON= 位置

export PYSPARK_DRIVER_PYTHON=位置

posted on 2019-09-27 14:08  nnnnnnnnnnnnnnnn  阅读(2181)  评论(0)    收藏  举报

导航