关于torch.topK取得的元素可导性问题

先上结论是可导的,但是可导的也只有被筛选出来 那一部分

import torch

import torch
import torch.nn as nn


class g(nn.Module):
    def __init__(self):
        super(g, self).__init__()
        #self.k = nn.Conv2d(in_channels=2, out_channels=1, kernel_size=1, padding=0, bias=False)

    def forward(self, z):
        a,b =torch.topk(z, 2, dim=-1, largest=True, sorted=True)
        return a
        #return self.k(a)


c = 2
h = 5
w = 5
z = torch.arange(0, c * h * w).float().view(1, c, h, w)
z.requires_grad = True
k=g()
r=k(z)
print(r)
r=r.sum()
loss=(r-1)*(r-1)
loss.backward()
print("zgrad", z.grad)

tensor([[[[ 4.,  3.],
          [ 9.,  8.],
          [14., 13.],
          [19., 18.],
          [24., 23.]],

         [[29., 28.],
          [34., 33.],
          [39., 38.],
          [44., 43.],
          [49., 48.]]]], grad_fn=<TopkBackward>)
zgrad tensor([[[[   0.,    0.,    0., 1038., 1038.],
          [   0.,    0.,    0., 1038., 1038.],
          [   0.,    0.,    0., 1038., 1038.],
          [   0.,    0.,    0., 1038., 1038.],
          [   0.,    0.,    0., 1038., 1038.]],

         [[   0.,    0.,    0., 1038., 1038.],
          [   0.,    0.,    0., 1038., 1038.],
          [   0.,    0.,    0., 1038., 1038.],
          [   0.,    0.,    0., 1038., 1038.],
          [   0.,    0.,    0., 1038., 1038.]]]])

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值