hadoop\u conf\u dir已经设置了，但是仍然有错误，hadoop\u conf\u dir或yarn\u conf\u dir必须在环境中设置

iaqfqrcu 于 2021-05-29 发布在 Hadoop

关注(0)|答案(1)|浏览(332)

尝试使用yarn在集群上运行一个简单的应用程序。我把两个都定了

export HADOOP_HOME = /usr/local/hadoop
export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop

在spark-env.sh文件中，我仍然得到这个错误。
我还需要修改其他文件吗？有什么文件吗？我哪里出错了？

1条答案

我通过在users.profile文件中写入这些行来修复它。所以在运行命令之前一定要反复写，否则就这样做

export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop/conf

在运行spark submit命令之前。