我试过了,但没用。据我所知, Spark 不支持 .dat 文件格式。我不想把这个文件写成 .csv 或者 .json ,然后通过shell脚本进行转换。
Spark
.dat
.csv
.json
a.write.format("dat").save(outputPath)
jfgube3f1#
spark格式函数不接受“dat”作为参数。您可以在文档中获得更多信息:https://spark.apache.org/docs/latest/sql-data-sources-load-save-functions.html我很抱歉,但最简单的事情你可以做的是创造 csv 把它转换成 dat 以后再说。
csv
dat
1条答案
按热度按时间jfgube3f1#
spark格式函数不接受“dat”作为参数。您可以在文档中获得更多信息:https://spark.apache.org/docs/latest/sql-data-sources-load-save-functions.html
我很抱歉,但最简单的事情你可以做的是创造
csv
把它转换成dat
以后再说。