根据googledocs,基于hdfs来衡量dataproc的高可用性,而不是基于地区/区域。有没有可能在一个区域中保留一个主节点,而在不同的区域中保留另一个主节点,以便在上下文中获取ha到位置?另外请详细说明,在全局端点中配置dataproc集群是否在位置上下文中实现ha?我已经浏览了google文档,但这并不能消除上述疑虑。
tgabmvqs1#
不,dataproc ha不保证区域可用性,因为所有dataproc集群节点都应该在同一gcp区域中。要实现区域可用性,您需要在多个区域中创建dataproc集群,并使用dataproc工作流模板和基于标签的集群选择器跨区域集群分发作业提交。
1条答案
按热度按时间tgabmvqs1#
不,dataproc ha不保证区域可用性,因为所有dataproc集群节点都应该在同一gcp区域中。
要实现区域可用性,您需要在多个区域中创建dataproc集群,并使用dataproc工作流模板和基于标签的集群选择器跨区域集群分发作业提交。