我刚刚在一个新的Linux Mint安装(所有最新版本)上安装了Anaconda、Apache spark、Pyspark、Scala。
为了 test安装,我尝试在终端中运行spark submit,但得到以下错误:
File "/home/jessica/anaconda/bin/find_spark_home.py", line 74, in
print(_find_spark_home())
File "/home/jessica/anaconda/bin/find_spark_home.py", line 56, in _find_spark_home
module_home = os.path.dirname(find_spec("pyspark").origin)
AttributeError: 'NoneType' object has no attribute 'origin'
/home/jessica/anaconda/bin/spark-submit: line 27: /bin/spark-class: No such file or directory
我看到命令是在/bin/而不是(正确的)/usr/local/spark/bin中查找的。
My$PATH变量包含以下内容:
我也有一个名为$SPARKYHOLD的Env变量,包含/Ur/Studio/Skase/。
我如何告诉我的系统改为在正确的目录中查找?