作为标题,是否可以写入远程hdfs?e、 g.我在awsec2上安装了一个hdfs集群,我想从本地计算机向hdfs集群写入一个文件。
fhg3lkii1#
有两种方法可以写入远程HDF,使用 WebHDFS api 它支持在hadoop集群外部运行的系统访问和操作hdfs内容。它不需要客户端系统安装hadoop二进制文件。将客户端系统配置为 Hadoop edge node 与hadoop集群/hdfs交互。请参考,https://hadoop.apache.org/docs/r1.2.1/webhdfs.htmlhttp://www.dummies.com/how-to/content/edge-nodes-in-hadoop-clusters.html
WebHDFS api
Hadoop edge node
1条答案
按热度按时间fhg3lkii1#
有两种方法可以写入远程HDF,
使用
WebHDFS api
它支持在hadoop集群外部运行的系统访问和操作hdfs内容。它不需要客户端系统安装hadoop二进制文件。将客户端系统配置为
Hadoop edge node
与hadoop集群/hdfs交互。请参考,
https://hadoop.apache.org/docs/r1.2.1/webhdfs.html
http://www.dummies.com/how-to/content/edge-nodes-in-hadoop-clusters.html