spark运行在mesos之上-集群模式-aws示例ec2(1主1从)

ncecgwcz  于 2021-06-26  发布在  Mesos
关注(0)|答案(0)|浏览(215)

我正面临一个问题,我正在尝试部署一个试用版spark应用程序(wordcount,用java编写),我将在mesos集群上运行spark(1个主服务器,1个代理服务器)
任务失败,似乎主机无法连接到端口5051上的mesos代理,在mesos错误消息下面
mesos和spark驱动程序显示任务正在运行,但是在slaves日志中任务无法完成,我有下面的消息
20/03/24 16:44:57 info taskschedulerimpl:添加任务集0.0和1个任务20/03/24 16:45:12 warn taskschedulerimpl:初始作业未接受任何资源;检查集群ui以确保worker已注册并且具有足够的资源
示例有ec2aws机器类型:主,从mesos版本:1.4.1和spark版本是2.4.4。感谢您的帮助,如果您需要更多的细节,请提前告诉我
mesos代理-与主服务器的连接错误消息:

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题