Paddle 多卡训练报错

tct7dpnv 于 2022-12-31 发布在其他

关注(0)|答案(9)|浏览(290)

问题描述 Please describe your issue

PaddleSeg版本：PaddleSeg 2.5/2.6
PaddlePaddle版本：PaddlePaddle 2.3.2
操作系统信息：Linux
Python版本号：Python3.8
CUDA/cuDNN版本：CUDA11.2/cuDNN 8.2
按照多卡训练的流程：
export CUDA_VISIBLE_DEVICES=0,1,2,3 # 设置4张可用的卡
python -m paddle.distributed.launch train.py
出现下面的情况，是什么原因呢？

Paddle

来源：https://github.com/PaddlePaddle/Paddle/issues/46652

9条答案

按热度按时间

iszxjhcz1#

您好，我们已经收到了您的问题，会安排技术人员尽快解答您的问题，请耐心等待。请您再次检查是否提供了清晰的问题描述、复现代码、环境&版本、报错信息等。同时，您也可以通过查看官网API文档、常见问题、历史Issue 、 AI社区来寻求解答。祝您生活愉快～

Hi! We've received your issue and please be patient to get responded. We will arrange technicians to answer your questions as soon as possible. Please make sure that you have posted enough message to demo your request. You may also check out the API ， FAQ ， Github Issue and AI community to get the answer.Have a nice day!

赞(0）回复(0）举报 2022-12-31

laik7k3q2#

补充下：我跑的是pp_liteseg，单卡可以，多卡就报这样的错

赞(0）回复(0）举报 2022-12-31

ecfdbz9o3#

单卡不涉及通信，所以不会报错。
麻烦再贴一下完整的报错栈信息。
或者将_C_ops.c_allreduce_sum_修改成paddle._legacy_C_ops.c_allreduce_sum_试试

赞(0）回复(0）举报 2022-12-31

zaqlnxep4#