从java主类访问mr作业输出

fgw7neuy  于 2021-06-03  发布在  Hadoop
关注(0)|答案(1)|浏览(377)

我的mapreduce程序有三个链接的mr jobs。我想从主类访问mr1输出。在hadoop环境中有可能吗?
如果没有,那么请建议是否有其他方法做类似的事情。

5us2dqdw

5us2dqdw1#

一种方法是将job1的输出馈送到job2的输入,将job2的输出馈送到job3的输入。
下面是一个示例:http://developer.yahoo.com/hadoop/tutorial/module4.html#chaining
本博客还讨论了以下内容:
http://blogs.msdn.com/b/avkashchauhan/archive/2012/03/29/how-to-chain-multiple-mapreduce-jobs-in-hadoop.aspx

相关问题