我必须安装hadoop才能使用Elastices hadoop连接器吗

ws51t4hk  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(431)

这个问题在这里已经有了答案

hadoop的带spark的hdfs(1个答案)
四年前关门了。
我有 Elasticsaerch 群集并希望使用 Apache Spark 对它进行计算。es hadoop连接器包含 Spark 可以运行计算的库 Elasticsearch . 我必须先安装hadoop吗?或者我可以直接安装hadoop吗 elasticsearch-spark_2.10-2.2.0-rc1.jar 在spark类路径中作为文档提到的是为了让它工作吗?

jc3wubiy

jc3wubiy1#

如果您想使用elasticsearch和spark,那么我建议您使用elasticsearch的spark本机支持。
它更易于使用,并且您可以直接将数据作为spark rdd保存到elastic search中。有关更多详细信息,请参阅:elasticsearch apache spark支持

相关问题