深度学习入门——乘法层(Mullayer)

  • 上游的值乘以输入数据的“翻转值”
    在这里插入图片描述
    在这里插入图片描述
# coding:utf-8
# 将神经网络的“层”实现为一个类。这里的层是神经网络中功能的单位,例如负责sigmoid函数的sigmoid、负责矩阵乘法的Affine等,都以层
# 的单位及逆行实现。这里也以层的单位来实现乘法节点和加法节点

class Mullayer:
    """乘法层"""
    def __init__(self):
        self.x = None
        self.y = None

    def forward(self, x, y):
        """前向"""
        self.x = x
        self.y = y
        out = x * y

        return out

    def backward(self, dout):
        """反向传播,传播参数为导数dout"""
        dx = dout * self.y # 翻转x和y,导数dout乘以正向传播的翻转值即可
        dy = dout * self.x

        return dx, dy


# -----------------------------------实现买苹果的计算图,正向传播计算价格-------------------------------------------------
apple = 100 # 单价
apple_num = 2
tax = 1.1 # 税

# layer
mul_apple_layer = Mullayer()
mul_tax_layer = Mullayer()

# forward
apple_price = mul_apple_layer.forward(apple, apple_num)
price = mul_tax_layer.forward(apple_price, tax)

print(price) # 220

# --------------------------------------实现苹果计算图,反向传播,传播导数---------------------------------------
"""与前面的正向传播完全反过来,并且输入是apple_price的导数"""
dprice = 1
dapple_price, dtax = mul_tax_layer.backward(dprice)
dapple, dapple_num = mul_apple_layer.backward(dapple_price)
print(dapple, dapple_num, dtax) # 2.2, 110, 200
  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值