嗨,我在和Spark包搏斗。我正在使用pyspark和pycharm,我添加了引用,工作正常。相反,对于这些包,我尝试引用.zip文件,就像我在pyspark/python/lib/pyspark.zip中所做的那样,引用到project structure->content root中,但仍然无法加载它们。我想装的包裹是 pyspark-cassandra
,我已经安装了pyspark shell,使用--packages: $SPARK_HOME/bin/spark-shell --packages anguenot:pyspark-cassandra:2.4.0
所以我假设这个包安装在spark中,但是对这个包的引用不在那里,我不明白我要引用什么。任何帮助都将不胜感激!
暂无答案!
目前还没有任何答案,快来回答吧!