我是hadoop世界的新手,我需要安装带有hadoop hdfs的mesos来创建一个容错分布式文件系统,但是所有的安装参考都包括我的场景所需的组件,例如:mapreduce。你对此有什么想法或参考资料吗?
oaxa6hgo1#
绝对有可能。不要认为hadoop是一个可安装的程序,它只是由一群运行在集群内不同节点上的java进程组成的。如果您使用hadoop tar ball,那么如果您只需要hdfs,就可以运行namenode和datanodes进程。如果您使用其他hadoop发行版(例如hdp),我认为hdfs和mapreduce来自不同的rpm包,但是安装这两个rpm包是有害的。如果只需要hdfs,只需运行namenode和datanodes。
1条答案
按热度按时间oaxa6hgo1#
绝对有可能。不要认为hadoop是一个可安装的程序,它只是由一群运行在集群内不同节点上的java进程组成的。
如果您使用hadoop tar ball,那么如果您只需要hdfs,就可以运行namenode和datanodes进程。
如果您使用其他hadoop发行版(例如hdp),我认为hdfs和mapreduce来自不同的rpm包,但是安装这两个rpm包是有害的。如果只需要hdfs,只需运行namenode和datanodes。