java.io.ioexception:在r编程中scheme:hdfs没有文件系统

qpgpyjmq  于 2021-06-01  发布在  Hadoop
关注(0)|答案(1)|浏览(296)
Sys.setenv(HADOOP_CMD="/home/hduser/hadoop-2.7.7/bin/hadoop")
Sys.setenv(JAVA_HOME="/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.191.b12-0.el7_5.x86_64")

library(rhdfs)

hdfs.init()

我已经运行了上面的代码来通过r连接hdfs,但是我得到了下面的错误。请帮我解决这个问题。

Error in .jcall("RJavaTools", "Ljava/lang/Object;", "invokeMethod", cl,  : 
  java.io.IOException: No FileSystem for scheme: hdfs
qfe3c7zg

qfe3c7zg1#

似乎没有加载hadoop配置文件
一种通过r实现的方法是设置

Sys.setenv(HADOOP_HOME="/home/hduser/hadoop-2.7.7")
Sys.setenv(HADOOP_CONF_DIR="/home/hduser/hadoop-2.7.7/conf")

否则,您应该在操作系统级别为所有进程设置要读取的变量,例如。 /etc/profile 或者 .bashrc

相关问题