我构建了一个多节点hadoop集群,然后我开始研究mesos以及在mesos集群上运行hadoop的能力,下面是我的问题:
1) Should I run hadoop on mesos cluster? or it doesn't matter. 2) What is the difference between them?
aamkag611#
在不同的等级中有不同的东西。您可以直接在一组机器中部署hadoop集群。这样你的机器就可以处理hadoop作业了。或者可以先部署mesos集群,然后在mesos上部署hadoop集群、spark集群、kafka等。因此,您可以将hadoop作业sumbit到hadoop集群,将spark作业提交到spark集群。
1条答案
按热度按时间aamkag611#
在不同的等级中有不同的东西。您可以直接在一组机器中部署hadoop集群。这样你的机器就可以处理hadoop作业了。
或者可以先部署mesos集群,然后在mesos上部署hadoop集群、spark集群、kafka等。因此,您可以将hadoop作业sumbit到hadoop集群,将spark作业提交到spark集群。