webhdfs与httpfs之比较

vlf7wbxs  于 2021-06-04  发布在  Hadoop
关注(0)|答案(1)|浏览(465)

webhdfsrestapi和httpfs有什么区别?
如果我理解正确:
httpfs是在hdfs之上公开restapi的独立服务
webhdfs是hdfs中内置的restapi。它不需要任何进一步的安装
我说的对吗?
什么时候最好用一个代替另一个?

vvppvyoh

vvppvyoh1#

我读了一篇与你的问题有关的文章。下面是链接。
https://www.linkedin.com/today/post/article/20140717115238-176301000-accessing-hdfs-using-the-webhdfs-rest-api-vs-httpfs
webhdfs与httpfs webhdfs与httpfs之间的主要区别:webhdfs需要访问集群的所有节点,当读取一些数据时,数据直接从该节点传输,而在httpfs中,单个节点的行为类似于“网关”,是向客户机节点传输数据的单点。因此,httpfs在大文件传输过程中可能会被阻塞,但好在我们正在最小化访问hdfs所需的占用空间。

相关问题