只提供部分节点资源的能力?

ntjbwcob  于 2021-06-01  发布在  Hadoop
关注(0)|答案(0)|浏览(241)

使用dc/os,我们喜欢在任务所需的数据附近安排任务,在我们的例子中,这些数据存储在hadoop/hdfs(在hdp集群上)中。问题是hadoop集群不是从dc/os内部运行的,因此我们正在寻找一种只提供系统资源子集的方法。
例如:假设我们想为数据节点服务保留8gb的内存,那么我们想将剩余的内存提供给dc/os来调度任务。
从我到目前为止所阅读的内容来看,任务可以指定它所需要的资源,但是我还没有找到任何方法来从节点的Angular 指定您想要提供什么。
我知道cdh集群可以在dc/os上运行,这是一种方法,但目前hdp还没有提供这种方法。
谢谢你的建议,保罗

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题