如何更改hadoop distcp暂存目录

kx5bkwkv  于 2021-05-27  发布在  Hadoop
关注(0)|答案(1)|浏览(455)

当我运行命令时

hadoop distcp -update hdfs://path/to/a/file.txt hdfs://path/to/b/

我遇到了一个异常:

java.io.IOException: Mkdirs failed to create /some/.staging/directory

但是,我不想将“/some/file/path”用作临时暂存目录,如何将其更改为所需的其他目录?

2uluyalo

2uluyalo1#

它是通过 yarn.app.mapreduce.am.staging-dir (默认为 /user 在我的安装中)。

相关问题