模式识别
孤狼北望
究天人之际,通古今之变,成一家之言。
展开
-
贝叶斯决策之最小平均风险
一 、最小平均风险来源:最小化分类错误率实质上是根据后验概率的最大值进行分类,即,然而不同事件分类错误导致的风险大小不同(例如:癌症误判时癌症判断为无癌导致的风险大于无癌判断为癌症),为取得最小的风险,提出最小平均风险。二、公式:其中表示把第j类错分为第类的惩罚因子。而由组成的矩阵称为风险矩阵且对角线元素都为0(对角元素无误判) ...原创 2018-10-12 11:04:01 · 2667 阅读 · 1 评论 -
联合概率分布笔记
1、什么是联合概率分布?联合概率分布简称联合分布,是两个及以上随机变量组成的随机向量的概率分布。根据随机变量的不同,联合概率分布的表示形式也不同。对于离散型随机变量,联合概率分布可以以列表的形式表示,也可以以函数的形式表示;对于连续型随机变量,联合概率分布通过一非负函数的积分表示。(即:多个事件同时发生的概率)2、联合概率分布的分类2.1 离散型联合概率分布变量:离散型随机向量 ...原创 2018-10-12 10:14:22 · 6592 阅读 · 0 评论 -
贝叶斯决策之判别函数和决策面
一、判别函数:1.1 公式: gi(x)=f(p(wi|x))其中f():单调递增函数1.2 决策规则: if gi(x)>gj(x),∀ i≠j→x∈wi图示如下:1.3 常用判别函数: 二、决策面(Decision Surfaces)2.1 概念如果输入的数据是一个LL维空间特征,考虑一个MM分类问题,那么分类器将会...转载 2018-10-12 16:27:47 · 9138 阅读 · 1 评论 -
机器学习笔记之模型评估与选择
一、学习误差与过拟合1.1 经验误差:学习器在训练集上的实际预测输出与样本真实输出之间的误差。1.2 过拟合:训练过程中样本自身特点被当做潜在样本都具有的一般性质导致泛化能力下降的现象。1.3 欠拟合:与过拟合相反(寻找的样本自身特点不足,无法找出足够潜在样本的一般性质)。备注:P:算起来很快的问题 NP:算起来不一定快,但对于任何答案我们都可以快速的验证这个答案对不对 N...原创 2018-10-13 16:46:28 · 297 阅读 · 0 评论