在spark中转储hadoop配置

o8x7eapl  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(355)

我用 sc.hadoopConfiguration.set 设置配置。如何转储这些配置?要么在控制台上打印它们,要么将它们转储到文件中

v9tzhpje

v9tzhpje1#

您可以将hadoop配置转储到xml文件(我假设您使用的是scala)

val out = new FileOutputStream("conf.xml")
    sc.hadoopConfiguration.writeXml(out)

相关问题