hadoop得到了预期的json是否启用webhdfs?有''

kupeojn6  于 2021-05-31  发布在  Hadoop
关注(0)|答案(1)|浏览(457)

我在hadoop中已经有了服务器csv文件,当我尝试的时候

hdfs = pyhdfs.HdfsClient(hosts='34.71.193.160:8123', user_name='root')

files_name = hdfs.listdir('/user/input/')

收到此错误消息,找不到如何修复

HdfsException: Expected JSON. Is WebHDFS enabled? Got ''
1qczuiv0

1qczuiv01#

我在做黄麻笔记本上的事
spark可以直接从namenode读取。不要使用webhdfs
e、 g.逐行读取目录中的所有文件

df = spark.read.csv("/user/input")
df.show()

相关问题