访问emr上hadoop作业的多个文件时未找到匹配项

vlurs2pr  于 2021-06-02  发布在  Hadoop
关注(0)|答案(0)|浏览(150)

我试图在aws emr上运行hadoop作业,我在s3中的文件上使用python本地执行该作业。我似乎无法访问多个文件使用 * . 我希望能够访问上01文件夹中的所有文件。此代码适用于此文件夹中的所有文件:

python mapper_reducer.py -r emr s3://firehose/2017/01/30/20/ --output-dir=s3://job-results

此代码获取错误 no matches found: s3://firehose/2017/01/*/*/ ```
python mapper_reducer.py -r emr s3://firehose/2017/01/// --output-dir=s3://job-results

这是mrjob的问题吗?我试着添加一个 `--recursive` 没有结果的标志

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题