将mapreduce和yarn应用程序一起编写

mftmpeh8  于 2021-06-01  发布在  Hadoop
关注(0)|答案(0)|浏览(264)

我想使用hadoop2.6.5运行mapreduce应用程序(在我自己的本地集群中),并且我想在yarn中更新一些东西,这样我就可以编写自己的yarn应用程序了(https://hadoop.apache.org/docs/r2.6.5/hadoop-yarn/hadoop-yarn-site/writingyarnapplications.html). 但是如果我以这种方式运行yarn(使用yarn客户机),那么我就不能将mapreduce范式(map和reduce函数)用于作业类。
有没有选择编写我自己的applicationmanager并将mapreduce范例用于简单的作业类?
这些是一些有用的例子,我发现有关写作Yarn应用程序https://github.com/noitcudni/yarnhttpshttp://github.com/hortonworks/simple-yarn-apphttps://github.com/blrunner/yarn-beginners-examples/blob/master/src/main/java/com/wikibooks/hadoop/yarn/examples/myclient.java

  • 使用Spring或斜纹将导致同样的问题。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题