2.4K Star 8.2K Fork 4.4K

GVPMindSpore / mindspore

 / 详情

mindspore 自定义反传 RuntimeError: value is not support

WIP
Bug-Report
创建于  
2024-05-16 01:33
name about labels
Bug Report Use this template for reporting a bug kind/bug

Describe the current behavior / 问题描述 (Mandatory / 必填)

mindspore 在训练的反向传播阶段,同一自定义反传代码在之前多次反传都未出错,但是某一次突然报错,报错信息为 RuntimeError: value is not support,value:BaseRef value:

Environment / 环境信息 (Mandatory / 必填)

  • Hardware Environment(Ascend/GPU/CPU) / 硬件环境:

Please delete the backend not involved / 请删除不涉及的后端:
/device GPU

  • Software Environment / 软件环境 (Mandatory / 必填):
    -- CUDA : 11.1
    -- MindSpore version : 2.2.14
    -- Python version : 3.9
    -- Ubuntu : 18.04
    -- Pytorch : 1.8.1
    -- GCC/Compiler version : gcc-7.5.0

  • Excute Mode / 执行模式 (Mandatory / 必填)(PyNative/Graph):

Please delete the mode not involved / 请删除不涉及的模式:
/mode pynative

Related testcase / 关联用例 (Mandatory / 必填)

测试用例代码详见:https://gitee.com/NightElf800/spvnas_ms

Steps to reproduce the issue / 重现步骤 (Mandatory / 必填)

  1. 安装torch-1.8.1, mindspore-2.2等环境,然后执行 pip install -r requirements.txt
  2. 安装 torchsparse_ms/nn/cuda/路径下的cuda算子,cd torchsparse_ms/nn/cuda/,然后执行命令 bash setup.sh
  3. 返回文件根目录,执行 python train_ms.py configs/semantic_kitti/spvcnn/cr0p5.yaml --distributed False

Describe the expected behavior / 预期结果 (Mandatory / 必填)

反传可正常执行

Related log / screenshot / 日志 / 截图 (Mandatory / 必填)

输入图片说明

Special notes for this issue/备注 (Optional / 选填)

评论 (10)

袁立晨 创建了Bug-Report

Please assign maintainer to check this issue.
请为此issue分配处理人。
@fangwenyi @chengxiaoli @Shawny

感谢您的提问,您可以评论//mindspore-assistant更快获取帮助:

  1. 如果您刚刚接触MindSpore,或许您可以在教程找到答案
  2. 如果您是资深Pytorch用户,您或许需要:
  1. 如果您遇到动态图问题,可以设置set_context(pynative_synchronize=True)查看报错栈协助定位
  2. 模型精度调优问题可参考官网调优指南
  3. 如果您反馈的是框架BUG,请确认您在ISSUE中提供了MindSpore版本、使用的后端类型(CPU、GPU、Ascend)、环境、训练的代码官方链接以及可以复现报错的代码的启动方式等必要的定位信息
  4. 如果您已经定位出问题根因,欢迎提交PR参与MindSpore开源社区,我们会尽快review
袁立晨 修改了描述
袁立晨 修改了描述
袁立晨 修改了描述
Shawny 负责人设置为luochao60
Shawny 关联项目设置为MindSpore Issue Assistant
Shawny 计划开始日期设置为2024-05-16
Shawny 计划截止日期设置为2024-06-16
Shawny 添加了
 
mindspore-assistant
标签
Shawny 添加了
 
sig/ops
标签
Shawny 添加了
 
sig/pynative
标签

请问反向定义目前在哪个文件里?

您好,自定义反传文件为 torchsparse_ms/nn/cuda/convolution/sp_convolution.py

Shawny 任务状态TODO 修改为WIP

输入图片说明
bprop的返回个数要和输入个数一致

您好,因为我们的项目是根据torch来复现成Mindspore,在torch中对应位置的反传是输入一个参数,输出两个参数,那在mindspore中有什么解决方法嘛
torch对应代码:
输入图片说明

同时我们也尝试了将输出个数改成一个(与输出个数统一),但依旧在相同位置报错,报错内容也一样
输入图片说明
输入图片说明

i-robot 添加了
 
foruda
标签

return修改为
return grad_input, grad_weight, ops.zeros_like(kernel), ops.zeros_like(neighbor_map), ops.zeros_like(neighbor_offset), None
可以得到结果

-------------------after opitmizer-----------------

Train: Epoch: [0][0/1]  Loss: 3.1340706 LR: 0.24

Done !

i-robot 添加了
 
www
标签

您好,由于问题单没有回复,我们后续会关闭,如您仍有疑问,可以反馈下具体信息,并将ISSUE状态修改为WIP,我们这边会进一步跟踪,谢谢

登录 后才可以发表评论

状态
负责人
项目
里程碑
Pull Requests
关联的 Pull Requests 被合并后可能会关闭此 issue
分支
开始日期   -   截止日期
-
置顶选项
优先级
预计工期 (小时)
参与者(4)
8108889 shawny233 1628167362 6571795 zichun ye 1595984050
Python
1
https://gitee.com/mindspore/mindspore.git
git@gitee.com:mindspore/mindspore.git
mindspore
mindspore
mindspore

搜索帮助

344bd9b3 5694891 D2dac590 5694891