pyspark 数据块上的Kedro:无法导入SparkDataset

qpgpyjmq  于 2022-11-01  发布在  Spark
关注(0)|答案(1)|浏览(125)

无法使用导入数据块中的SparkDataset;

from kedro.extras.datasets.spark import SparkDataSet

dz6r00yl

dz6r00yl1#

您是否已执行pip install "kedro[spark.SparkDataSet]"?新的kedro项目需要在使用前为连接器安装依赖项。
此外,数据集类型是区分大小写的,因此请确保在您的目录中它是SparkDataSet,而不是Sparkdataset等。

相关问题