在pig中使用load时排除某些文件

c2e8gylq  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(275)

我试图通过load命令将sqoop作业的输出加载到pig中。我只希望加载以“part”开头的文件。如何从加载中排除同一文件夹中的其他文件。请帮忙。

7ivaypg9

7ivaypg91#

像这样加载,它会工作的

A = LOAD 'part*' using PigStorage(',');  
DUMP A;

Example:  
part_input.txt  
1,2,3  
4,5,6  

input.txt
99.0,55.0,56.3
12.4,55.66,78.09

output:
1,2,3
4,5,6

相关问题