SNN系列｜学习算法篇(5) Hebbian Rules

Hebb rule and its modification

Hebb学习算法可以说是最古老的一个学习规则了，neurons fires together, wire together
突触权重改变与神经元协同活动的关系

• Classific Hebb

根据”一起放火一起死“的假设，突触权重的改变正比于突触前和突触神经元的活动
$$\Delta {\omega }_i=\eta x_{i}y$$

• anti-Hebb

Hebb法则只考虑了兴奋性突触的调整情况，对侧向连接和抑制性神经元活动则不能很好的描述，aiti-Hebb形式与Hebb形同，区别在于一个负号
$$\Delta {\omega }_i=-\eta x_{i}y$$

Hebb只考虑了LTP，权重只知道增不知道减，当权重到达最大值后便不会更新了，对其改进主要有两种方法：一种是自适应阈值方法，另一种是归一化方法。

• BCM rule

adaptive threshold的方法比较直接的想法是通过设置突触前后神经元活动的阈值，限制其活动。
$$\frac{d\vec{w}}{dt}=\eta \left(\vec{x}-{\vec{\theta }}_x\right)\left(y-{\theta }_y\right)$$
当突触前为多输入时，突触前的阈值可以是一个均值，当突触前后某一方神经元低于阈值时，会发生权重衰减。

上述方法虽然简单直接，但并不是很奏效。自适应阈值的一种代表性的方法是BCM方法，它使用滑动阈值的方法来稳定突触可塑性，并且在生物视觉皮层和海马中均已经找到BCM行为的证据。

BCM不再给突触前活动设定阈值，其更新法则如下：
$$\begin{gathered} \Delta w_i=y\left(y-{\theta }_M\right)x_i-ϵw_i \\ {\theta }_M=E^P\left[\left(y/y_0\right)\right] \end{gathered}$$
等式最右边是一个与当前权重相关的衰减项，可以认为是当突触前后神经元无活动时，发生的权重衰减。${\theta }_M$为滑动阈值，$y_0$为突触后神经元活动的期望值，E是一个用于滑动的函数来更新阈值，一种可能的形式为
$$\frac{d\theta }{dt}={\eta }_{\theta }\left(y^2-{\theta }_y\right)$$

• 自平衡正则化 Homeostatic Regulation

使用synaptic scaling可以有效地控制其变化，常用的方法为权重除以权重之和，基于权重之和的正则化也被称为“subtractive normalization”
$${\omega }^{{}^{\prime }}=\omega \frac{\beta N_{in}}{\sum \omega }$$
正则化形式并不固定， 诸如以下形式均可
$${\omega }_{ik}={\omega }_{ik}^{{}^{\prime }}N\frac{{\omega }_{avg}}{{\omega }_k^{{}^{\prime }}}$$
等式右边依次是未归一化的权重、突触前神经元个数（或与突触后神经元连接的总突触数）、网络中所有突触的平均权重、所有与突触后神经元相连的突触的权重之和。

• Oja’s rule

除了基于权重之和的归一化方法，还有一种方法就是基于权重平方之和的方法，称为"multiplicative normalization"，比较著名的便是oja’s rule。

该方法将权重对其和的平方进行除法运算，（原始论文p=2）
$${\omega }_i=\frac{{\omega }_i+\eta y{x}_i}{({\sum }_{j=1}^m[{\omega }_j+\eta y{x}_j{]}^p{)}^{1/p}}$$
通过推导并指定权重标准化为1， $|\omega |=(\sum _{j=1}^m{\omega }_j^p{)}^{1/p}=1$，可以得到oja规则如下：
$$\Delta w_i=\eta \left(x_{i}y-y^2{w}_i\right)$$
上述公式比经典hebb多了一个衰减项，权重和其突触后活动越高，衰减得也就越多。原文证明，当使用该规则后，突触后神经元提取了突触前神经元活动向量的主成分。

参考文献

[1] Computational Modeling of Neural Plasticity for Self-Organization of Neural Networks
Joseph

[2] [Encyclopedia of Computational Neuroscience]