安装pyspark时卡住了

0tdrvxhp  于 2021-05-24  发布在  Spark
关注(0)|答案(1)|浏览(718)

我一直在尝试在我的macbook上安装pyspark,但安装完成后收到以下错误消息:

Traceback (most recent call last):
  File "/Users/vasquezk26/opt/anaconda3/bin/jupyter", line 11, in <module>
    sys.exit(main())
  File "/Users/vasquezk26/opt/anaconda3/lib/python3.8/site-packages/jupyter_core/command.py", line 247, in main
    command = _jupyter_abspath(subcommand)
  File "/Users/vasquezk26/opt/anaconda3/lib/python3.8/site-packages/jupyter_core/command.py", line 133, in _jupyter_abspath
    raise Exception(

我已经安装了Pypark,findspark,还有anaconda3。
有人能帮我吗?

pftdvrlh

pftdvrlh1#

正如在这个答案中所报告的那样,pyspark不支持python3.8(除非您使用的是spark3.0,它看起来可以解决这个问题)。
我不确定您收到的错误消息是否是因为这个原因,但是我在ubuntu 20.04上安装它时遇到了问题,它的默认版本是Python3.8。
我的建议和那个答案中的建议是一样的:尝试使用python的早期版本(3.6应该可以),或者,在这一点上,尝试使用spark版本3.0,它看起来与python3.8兼容。

相关问题