有人在向配置单元进行增量导入时有重复数据吗?

roejwanj  于 2021-06-03  发布在  Sqoop
关注(0)|答案(1)|浏览(294)

你们中的任何人在向配置单元进行增量导入时都会遇到数据重复的问题,以及如何解决此问题。
提前谢谢。

t9aqgxwy

t9aqgxwy1#

如果表上有主键,则增量导入时将不会获得数据重复
在表上使用唯一键或定义主键。
--check column(primarykey/unique key)-->使用此选项可避免数据重复

相关问题