无法用hadoop启动oryx

eoxn13cs  于 2021-05-30  发布在  Hadoop
关注(0)|答案(1)|浏览(444)

我正在尝试用hadoop2.4运行oryx。hadoop启动成功,出现警告:
warn util.nativecodeloader:无法为您的平台加载本机hadoop库。。。在适用的情况下使用内置java类。
oryx也成功启动。但当我将数据摄入其中时,会引发以下异常:
2014-08-22 14:35:05835错误[37788上的ipc服务器处理程序3]org.apache.hadoop.mapred.taskattemptlistenerimpl:任务:尝试\u 1408697508855 \u 0002 \u m \u000000 \u 0-退出:org.apache.hadoop.util.nativecodeloader.buildsupportssnappy()z 2014-08-22 14:35:05,835 info[ipc server handler 3 on 37788]org.apache.hadoop.mapred.taskattemptlistenerimpl:来自尝试的诊断报告\u 1408697508855 \u 0002 \u m\u000000 \u 0:错误:org.apache.hadoop.util.nativecodeloader.buildsupportssnappy()z 2014-08-22 14:35:05,837 info[asyncdispatcher event handler]org.apache.hadoop.mapreduce.v2.app.job.impl.taskattempimpl:来自尝试的诊断报告\u 1408697508855 \u 0002 \u m \u000000 \u 0:错误:org.apache.hadoop.util.nativecodeloader.buildsupportssnappy()z 2014-08-22 14:35:05,840 info[asyncdispatcher event handler]org.apache.hadoop.mapreduce.v2.app.job.impl.taskattempimpl:attempt\u 1408697508855\u 0002\u m\u000000\u 0 taskattempt已从运行转换为失败\u cleanup
以前有人遇到过这样的问题吗?任何形式的帮助都是值得赞赏的!

qlzsbp2j

qlzsbp2j1#

我正在从邮件列表上的你的帖子中复制一些内容:
这可能是安装的snappy库的问题,但似乎已经解决了
Yarn容器因运行超过虚拟内存限制而被终止。请参阅faq—这可能是一个java问题,您可以通过更改配置来解决。
最后一个问题似乎是Yarn配置的另一个问题,尽管还不清楚。如果可能的话,我建议从新的配置和/或预配置的发行版开始。

相关问题