如何在googleclouddataproc中度量高可用性

efzxgjgh  于 2021-05-31  发布在  Hadoop
关注(0)|答案(1)|浏览(347)

根据googledocs,基于hdfs来衡量dataproc的高可用性,而不是基于地区/区域。有没有可能在一个区域中保留一个主节点,而在不同的区域中保留另一个主节点,以便在上下文中获取ha到位置?另外请详细说明,在全局端点中配置dataproc集群是否在位置上下文中实现ha?
我已经浏览了google文档,但这并不能消除上述疑虑。

tgabmvqs

tgabmvqs1#

不,dataproc ha不保证区域可用性,因为所有dataproc集群节点都应该在同一gcp区域中。
要实现区域可用性,您需要在多个区域中创建dataproc集群,并使用dataproc工作流模板和基于标签的集群选择器跨区域集群分发作业提交。

相关问题