我正在使用python(pyspark)处理spark进程。我创建了一个amazonemr集群来运行我的spark脚本,但是当集群刚刚创建时,很多进程都是自己启动的(¿?), 当我检查群集ui时:所以,当我尝试午餐我自己的脚本,他们进入一个无休止的队列,有时接受,但从来没有进入运行状态。我找不到任何关于这个问题的信息,甚至在亚马逊论坛,所以我很高兴任何建议。提前谢谢。
xtfmy6hx1#
您需要签入主节点的安全组,检查入站流量,可能您对任何地方都有规则,请删除该规则,或者尝试删除并检查这些内容是否有效—这是一个漏洞。
1条答案
按热度按时间xtfmy6hx1#
您需要签入主节点的安全组,检查入站流量,可能您对任何地方都有规则,请删除该规则,或者尝试删除并检查这些内容是否有效—这是一个漏洞。