4.3从一个到一群

  • Multilayer Perceptron(多层感知机,即神经网络)

    • 多了一层隐含层
  • 线性不可分问题
    • XOR(异或问题)

      • 手工设计

        • 解释
          • 逻辑表达式:把p、q的或和其与非相与
        • Hidden Layer Representation(隐含层表示)

          • 做了坐标转换,解决了线性不可分问题
  • The sigmoid Threshold Unit(s形阈值单元)

    • 解释
      • W0其实是一个threshold
      • 神经元与感知机类似,但是不再使用门限函数,而是使用sigmoid函数(1/(1+e^(-x)))
      • sigmoid函数好处:输入无论多大,输出都在0、1之间;其平滑曲线可以求导,方便后面推导
      • 当输入越接近于0时梯度最大(导数最大),输入特别小(大)时不好,训练速度非常缓慢。所以权重从小的数开始
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值