笔记
last_summer_x
这个作者很懒,什么都没留下…
展开
-
SVM——笔记
SVM点到超平面的距离硬间隔分类器软间隔分类器SMO 点到超平面的距离 向量xxx到超平面wTx+bw^Tx+bwTx+b的距离为 ∣wT(x−x0)∣=∣w∣∣x−x0∣cosπ2=∣∣w∣∣d |w^T(x-x_0)|=|w||x-x_0|\cos \frac{\pi}{2}=||w||d ∣wT(x−x0)∣=∣w∣∣x−x0∣cos2π=∣∣w∣∣d 又因为 wT(x−x0)=wT...原创 2019-11-16 22:27:59 · 91 阅读 · 0 评论 -
softmax——笔记
softmaxsoftmax用多项式分布建模参数估计 softmax 用多项式分布建模 softmax假设目标变量服从多项式分布 P(y;η)=∏i=1kϕi1{y=i}=(∏i=1k−1ϕiy=i)ϕk1−∑i=1k−11{y=i}=(∏i=1k−1(ϕiϕk)1{y=i})ϕk=exp(∑i=1k−1log(ϕiϕk)T(y)i+logϕk) \begin{aligned} P(y;\e...原创 2019-11-16 22:18:58 · 70 阅读 · 0 评论 -
逻辑回归——笔记
逻辑回归指数族分布对二项分布建模sigmoid参数估计 指数族分布 P(y;η)=b(y)exp[ηTT(y)−a(η)] P(y;\eta)=b(y)\exp{\left[ \eta^TT(y)-a(\eta) \right]} P(y;η)=b(y)exp[ηTT(y)−a(η)] 其中η\etaη为自然参数,T(y)T(y)T(y)是充分统计量,a(η)a(\eta)a(η)是归一化因子 ...原创 2019-11-16 22:11:24 · 97 阅读 · 0 评论