数据挖掘note5 朴素贝叶斯分类器

本文介绍了朴素贝叶斯分类器的基础知识,包括贝叶斯定理的应用,如何计算条件概率,以及针对数据估算概率的方法,如离散化和概率密度估计。还讨论了朴素贝叶斯存在的问题,如零概率问题,以及对应的改进策略,如拉普拉斯平滑和e-estimation。最后总结了朴素贝叶斯分类器的优势,如对噪声点的免疫力和处理缺失值的能力。
摘要由CSDN通过智能技术生成
  • 前提:
  1. 将每个属性和类标签视为随机变量
  2. 给出某对象的属性值(x1,x2,…, xd),预测label值Y
  3. 换种说法,其实我们想求的是在这里插入图片描述

Bayes classifier 贝叶斯分类器

贝叶斯算法重要的理论基础:
在这里插入图片描述

问题提出与简化

在这里插入图片描述
将贝叶斯算法应用到该问题中,那我们可以将需要求的概率转化为:在这里插入图片描述
因为P(Y)和P(X1X2…Xd)是可以算出的,所以问题便转化为计算P(X1, X2, …, Xd | Y )

如何计算 P(X1, X2, …, Xd | Y )?

推导如下:

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值