sqoop导入\u success

nbewdwxp  于 2021-06-03  发布在  Sqoop
关注(0)|答案(1)|浏览(373)

我使用sqoop导入Parquet格式的数据,除了在目标hdfs位置没有生成成功文件外,其他一切都正常。

bin/sqoop import --connect 'jdbc:[conn_string]' --table [table] --target-dir hdfs://hdfs-location/ --as-parquetfile

我需要这个成功来创造oozie bundle工作

ar5n3qh5

ar5n3qh51#

_SUCCESS 导入成功后生成文件,文件格式如下:
avrodatafile文件
序列文件
文本文件
对于Parquet文件格式,您将得到 .metadata 首先,成功导入后,您将获得 .parquet 文件夹。

相关问题