集群计算—如何通过编程方式从spark web ui获取有关驱动程序日志和活动工作进程的信息

vwoqyblh  于 2021-05-17  发布在  Spark
关注(0)|答案(0)|浏览(226)

有一个群集已成功启动。我可以在web ui上看到类似的信息,如下所示:

URL: spark://Name2:7077
REST URL: spark://Name2:6066 (cluster mode)

**Alive Workers: 10**

Cores in use: 192 Total, 0 Used
Memory in use: 364.0 GB Total, 0.0 B Used
Applications: 0 Running, 5 Completed
Drivers: 0 Running, 5 Completed

**Status: ALIVE**

如何以编程方式获取有关驱动程序状态和活动工作进程数的信息?这里我要的是黑体字的信息。另外,如何以编程方式获取驱动程序日志?任何帮助或建议将是伟大的,因为我不知道如何才能做到这一点。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题