对于运行c++代码的spark作业,是否有可用的缓存解决方案?

jmp7cifd  于 2021-05-27  发布在  Spark
关注(0)|答案(0)|浏览(152)

我们在hadoop节点上运行spark作业来处理数据。这个spark作业在每个节点上调用一些c代码。我们需要缓存一些数据(键值对)并从spark作业中运行的c代码中访问它。
在各种可用的分布式缓存中,哪一个适合我们的用例?另外,我们是否可以从每个节点上的c++模块启动服务(缓存解决方案)?
谢谢你的帮助。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题