Paddle 打开 profiler 后出现 CUPTI_ERROR_INVALID_PARAMETER 错误

ahy6op9u  于 2022-04-21  发布在  Java
关注(0)|答案(2)|浏览(187)

环境

系统:CentOS6.3
python 版本:2.7.14(gcc482 编译)
paddle 版本:1.6.1.post107
NVIDIA Driver 版本:418.39
CUDA 版本:10.0
CUDNN:7.5.1 && 7.6.0
NCCL:2.3.7

已设置 CUPTI 环境变量等,运行官网示例,报以下错误:

使用 4 卡 P4 训练 resnet50 报错:

关闭 profiler 没有问题。

csbfibhn

csbfibhn2#

请参考#3124

安装 nccl 了,也设置 cupti 的环境变量了。

相关问题