我想使Spark纱客户端(链接)。它需要安装hadoop吗?还是只安装Yarn(通过此链接)
fzwojiic1#
无Spark不需要hadoop运行。apachespark是一个独立的项目,可以独立运行。如果你想你甚至可以运行它没有Apache纱。spark支持3种集群管理器:mesos、yarn和standalone。如果您没有安装yarn,那么它可以使用mesos和standalone,默认情况下,当您没有提到任何集群管理器的首选项时,它使用standalone。您提到的链接可以使用,但我认为google上有更多更好的资源。
1条答案
按热度按时间fzwojiic1#
无Spark不需要hadoop运行。apachespark是一个独立的项目,可以独立运行。如果你想你甚至可以运行它没有Apache纱。
spark支持3种集群管理器:mesos、yarn和standalone。如果您没有安装yarn,那么它可以使用mesos和standalone,默认情况下,当您没有提到任何集群管理器的首选项时,它使用standalone。您提到的链接可以使用,但我认为google上有更多更好的资源。