我正在尝试为配置单元中的增量导入创建一个sqoop作业。
sqoop作业--创建用户\u分级\u导入--元连接\jdbc:hsqldb:hsql://192.168.225.129:16000/sqoop --导入--连接jdbc:postgresql用法://192.168.148.1:5432/movielens--用户名anm --表分级-m 8--目标目录/user/hive/warehouse/user\u分级--增量lastmodified--字段以','--check-column-rating\u-at--append--as parquetfile--hive-import--hive-table-user\u-rating\u-fact
生成此项:
19/12/03 21:39:23信息sqoop.sqoop:运行sqoop版本:1.4.7--不支持配置单元导入的增量lastmodified选项。请删除参数--incremental lastmodified。
1条答案
按热度按时间sf6xfgos1#
请尝试以下操作:sqoop job--create user\u rating\u import--meta connect\jdbc:hsqldb:hsql://192.168.225.129:16000/sqoop --导入--连接jdbc:postgresql用法://192.168.148.1:5432/movielens--driver com.mysql.jdbc.driver--username anm--table ratings--m 8--hive import--target dir“/user/hive/warehouse/user\u rating”---字段以''结尾,'--check列rated\u at--append--as parquetfile--hive表“user\u rating\u fact”