在本地模式下运行风暴爬虫,不依赖zookeeper、nimbus

093gszye  于 2021-06-24  发布在  Storm
关注(0)|答案(1)|浏览(314)

我在mysql中存储url,在lucene中存储索引数据,我在使用tomcat的多台机器上运行storm crawler作为应用服务器。我真的需要zookeeper,nimbus和storm在服务器之间分发URL吗。。??

nkoocmlb

nkoocmlb1#

参见常见问题
问:运行stormcrawler需要风暴集群吗?
答:没有。它可以在本地模式下运行,并且只使用storm库作为依赖项。不过,以伪分布式模式安装storm是有意义的,这样您就可以使用它的ui来监视拓扑。
请参阅在本地模式下运行stormcrawler或安装apache storm?

相关问题