异常:Python in worker has different version 2.6 than that in driver 2.7
问题:pyspark的环境和系统python环境冲突
解决:
方法一、
import os
os.environ['PYSPARK_PYTHON']='/opt/anaconda2/bin/python'
方法二、
export PYSPARK_PYTHON= 位置
export PYSPARK_DRIVER_PYTHON=位置
posted on 2019-09-27 14:08 nnnnnnnnnnnnnnnn 阅读(2181) 评论(0) 收藏 举报
浙公网安备 33010602011771号