是的，您可以使用to_pandas_on_spark（doc）或pandas_api（doc）函数轻松地将Spark DataFrame转换为Spark Pandas DataFrame（取决于Spark版本-后者在Spark 3.3+中）。

为了解决你的第二个问题，似乎你只需要toPandas？

df = spark.range(500).selectExpr("rand() as col1", "rand() as col2")

df.toPandas().plot.scatter(x="col1", y="col2", figsize=(5, 3)); #adjust the params here

输出：

• 使用的输入：*

+-------------------+-------------------+
|               col1|               col2|
+-------------------+-------------------+
|0.30635985539888333| 0.4870719189567285|
|0.42598409012829175| 0.7952023956810078|
|0.11566134855017962|  0.526445377673446|
| 0.9904776216970759|0.21399932251819465|
|  0.745479774526823| 0.9353658749650922|
+-------------------+-------------------+
only showing top 5 rows