hadoop的标准Map器和缩减器类?

5gfr0r5j  于 2021-06-03  发布在  Hadoop
关注(0)|答案(2)|浏览(373)

hadoop是否有一个包或一组标准Map器和还原器?
例如,openmp附带了一组预定义的用于循环并行化的reducer,这很方便,但不可扩展。对于hadoop来说,一组类似的基本简化方法是很方便的。
当您使用springdatahadoop构建spring批处理应用程序时,这样的集合将非常有用。
如果没有这样的东西,我们可以开始收集。
韩国,俄罗斯

t0ybt7op

t0ybt7op1#

看看这个github项目。我从未使用过它,但它声称里面有spring和hadoop的东西。

idv4meu8

idv4meu82#

hadoop附带了大量的Map器和还原器。它们储存在 org.apache.hadoop.mapred.lib ,并涵盖各种各样的用例。如果您想查看快速列表,这是 mapred.lib javadocs web用户界面。看看有没有适合你的。

相关问题