sqoop—hadoop中的rdms数据归档

gmxoilav  于 2021-06-03  发布在  Hadoop
关注(0)|答案(1)|浏览(334)

我们正在探索将数据归档到仓库或rdms到hadoop的方法。
事实上,我必须使用sqoop将数据加载到hdfs中,并且可能必须对其进行压缩。然后删除要存档的行。
问题是两个表之间有外键关系。我需要保持表之间的数据一致性。请帮我走近。

uz75evzq

uz75evzq1#

幸运的是,我可以使用sqoopapi找到解决方案。我触发了一个连接查询,先从子表中选择数据,然后从父表中选择数据。我用sqoopapi编写了java程序中的所有逻辑。

相关问题