模式识别的一些数学知识

留待解决的数学问题

  1. 对于二次优化方程 f ( x ) = x T A x f(x)=x^TAx f(x)=xTAx,其中限制 ∥ x ∥ 2 = 1 \Vert x\Vert_2=1 x2=1 证明:函数 f f f的最大值是矩阵A的最大特征值,最小值是矩阵A的最小特征值。
  2. 对于半正定矩阵A,证明: ∀ x {\forall}x x, x T A x ≥ 0 x^TAx \geq0 xTAx0
  3. 对于正定矩阵A,证明: ∀ x {\forall}x x, x T A x ≥ 0 x^TAx \geq0 xTAx0
    x T A x = 0 x^TAx=0 xTAx=0当且仅当 x = 0 x=0 x=0
  4. 关于奇异值定理的证明,结合线性系统那本书中的所谓的manipulation.我还是停留在 Q ′ H ′ H Q = D = S ′ S Q'H'HQ=D=S'S QHHQ=D=SS的阶段。
  5. 关于伪逆(Moore-Penrose)的问题,我们在线性系统中证明所有的最小实现是相互等价的时候用上了这个东西今天在深度学习中再次遇见这个,并且知道了在深度学习中计算伪逆的实际算法是通过奇异值分解来得到的。

等式约束的最大化问题

等式约束可以利用拉格朗日乘子法去解决

相似的数学符号辨认

θ ∗ = a r g    m a x θ ∈ Θ l ( θ ) \theta^{*}=arg \; max_{ \theta \in \Theta} l(\theta) θ=argmaxθΘl(θ)
上面表示返回回来的是 θ \theta θ的值,使得 l ( θ ) l(\theta) l(θ)最大
l ( θ ∗ ) = m a x    l ( θ ) l(\theta^*)=max \;l(\theta) l(θ)=maxl(θ)
传递回来的就是 l ( θ ) l(\theta) l(θ)的最大值

BP神经网络的优点与缺点?

如何解决BP神经网络的缺点?

新时代的深度学习有哪些质的区别?

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值