ERROR Executor: Exception in task 6.0 in stage 0.0 (TID 6)org.apache.spark.api.python.PythonExcept

尝试了网上很多方法,修改环境变量,降低了版本还是不行,最后发现是自己的python解释器路径找不不到,但是我明明已经配置了,还是报错,

import os
os.environ['PYSPARK_PYTHON'] = "C:\\Users\\86131\\anaconda3\\envs\\pyspark2\\python.exe"

最后在代码里面加入这段代码,执行成功!亲测有效,路径换成你自己的解释器路径