有没有可能把所有的mesos资源看作一个没有定制框架代码的巨大linux盒子？我想知道，如果我想运行一个使用2500tb内存的程序，mesos能抽象出主从结构吗？我必须使用自定义代码吗？
jgzswidk1#
问题1：mesos是一个资源管理器。是的，这是一个巨大的资源库。虽然在给定的时间，它只提供给你所有资源的一个子空间。假设还有其他用户可能需要一些资源（不要担心有一种方法可以利用几乎整个集群）。问题2：mesos是为一种商品硬件（许多节点，而不是一台巨型hpc计算机）而设计的。在mesos上运行的框架将被赋予一个资源列表（以及从属-工作节点），mesos将在给定的资源范围内执行任务。通过这种方式，您可以启动mpi作业或在apachespark上运行任务，apachespark将为您处理节点之间的通信（而不是mesos本身）。问题3：您尚未指定要计算的任务类型。spark有很多例子。您可以运行其中任何一个，而无需编写自己的代码。（图片来源：malte schwarzkopf，google talk eurosys 2013，布拉格）
w3nuxt5m2#
你必须编写自定义代码。mesos提供每个代理（从）的资源，如何协调在不同机器上运行的应用程序的二进制文件取决于您。
2条答案
按热度按时间jgzswidk1#
问题1：mesos是一个资源管理器。是的，这是一个巨大的资源库。虽然在给定的时间，它只提供给你所有资源的一个子空间。假设还有其他用户可能需要一些资源（不要担心有一种方法可以利用几乎整个集群）。
问题2：mesos是为一种商品硬件（许多节点，而不是一台巨型hpc计算机）而设计的。在mesos上运行的框架将被赋予一个资源列表（以及从属-工作节点），mesos将在给定的资源范围内执行任务。通过这种方式，您可以启动mpi作业或在apachespark上运行任务，apachespark将为您处理节点之间的通信（而不是mesos本身）。
问题3：您尚未指定要计算的任务类型。spark有很多例子。您可以运行其中任何一个，而无需编写自己的代码。
（图片来源：malte schwarzkopf，google talk eurosys 2013，布拉格）
w3nuxt5m2#
你必须编写自定义代码。mesos提供每个代理（从）的资源，如何协调在不同机器上运行的应用程序的二进制文件取决于您。