将配置单元查询结果从一个hadoop集群传输到另一个hadoop集群

5gfr0r5j  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(327)

我有两个集群a和b。集群a有5个表。现在我需要在这5个表上运行一个配置单元查询,查询结果应该更新集群b表数据(覆盖结果查询的所有列)
注意:在此过程中,我们不应在集群a上创建任何文件,但允许创建临时文件。
这可行吗?两个集群之间需要什么权限/配置来实现这一点?
我怎样才能得到这个任务/任何其他有效的替代方案?
完成这项任务后,我应该自动使用oozie。。

8i9zcol2

8i9zcol21#

是否为每个集群的元数据或配置单元表使用数据库?如果是,那么-如果在两个集群中使用相同的数据库来存储配置单元表,那么可以共享它们。我知道这听起来很直观,但我只是提到了一下,以防你没想过。

相关问题