我已经安装了hadoop3.1.1,它支持gpu资源。我是根据官方文件配置的。但是,当我用800m+文件运行字数计算程序时,gpu查找资源从未被使用;同时,该程序使用内存和vcores(cpu)运行良好。
所有在官方文件中列出的先决条件都得到满足:gpu设备,cuda,cgroup等。gpu在我运行docker时工作得很好,但是hadoop3。
以下是配置文件:
资源类型:
capacity scheduler.xml,其他属性为默认值
yarn-site.xml文件
容器-executor.cfg
暂无答案!
目前还没有任何答案,快来回答吧!