-incremental lastmodified)与--hive导入一起工作

csga3l58  于 2021-05-27  发布在  Hadoop
关注(0)|答案(1)|浏览(378)

我正在尝试为配置单元中的增量导入创建一个sqoop作业。
sqoop作业--创建用户\u分级\u导入--元连接\jdbc:hsqldb:hsql://192.168.225.129:16000/sqoop --导入--连接jdbc:postgresql用法://192.168.148.1:5432/movielens--用户名anm --表分级-m 8--目标目录/user/hive/warehouse/user\u分级--增量lastmodified--字段以','--check-column-rating\u-at--append--as parquetfile--hive-import--hive-table-user\u-rating\u-fact
生成此项:
19/12/03 21:39:23信息sqoop.sqoop:运行sqoop版本:1.4.7--不支持配置单元导入的增量lastmodified选项。请删除参数--incremental lastmodified。

sf6xfgos

sf6xfgos1#

请尝试以下操作:sqoop job--create user\u rating\u import--meta connect\jdbc:hsqldb:hsql://192.168.225.129:16000/sqoop --导入--连接jdbc:postgresql用法://192.168.148.1:5432/movielens--driver com.mysql.jdbc.driver--username anm--table ratings--m 8--hive import--target dir“/user/hive/warehouse/user\u rating”---字段以''结尾,'--check列rated\u at--append--as parquetfile--hive表“user\u rating\u fact”

相关问题