使用pyspark传入自定义头文件

iibxawm4  于 2021-05-27  发布在  Spark
关注(0)|答案(0)|浏览(252)

我正在使用pyspark脚本编写s3,如下所示:

df.write.mode('overwrite').parquet('s3://[S3_PATH]')

通过直接http请求,我可以通过写请求传入自定义头。是否可以使用pyspark传入自定义头文件?

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题