R语言：EM算法和高斯混合模型聚类的实现

已于 2024-07-29 23:10:20 修改
阅读量1.1w 收藏 41
点赞数 5
分类专栏： 数据分析 小波滤波器 文章标签： R语言 EM算法
于 2019-06-13 22:07:24 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_19600291/article/details/80270484
版权

全文链接 ：http://tecdat.cn/?p=3433

原文出处：拓端数据部落公众号

 【视频】KMEANS均值聚类和层次聚类：R语言分析生活幸福质量系数可视化实例

KMEANS均值聚类和层次聚类：R语言分析生活幸福质量系数可视化实例

，时长06:05

本文我们讨论期望最大化理论，应用和评估基于期望最大化的聚类。

软件包

数据

我们将使用mclust软件包附带的“糖尿病”数据。

data(diabetes)

summary(diabetes)

## class glucose insulin sspg## Chemical:36 Min. : 70 Min. : 45.0 Min. : 10.0## Normal :76 1st Qu.: 90 1st Qu.: 352.0 1st Qu.:118.0## Overt :33 Median : 97 Median : 403.0 Median :156.0## Mean :122 Mean : 540.8 Mean :186.1## 3rd Qu.:112 3rd Qu.: 558.0 3rd Qu.:221.0## Max. :353 Max. :1568.0 Max. :748.0

期望最大化（EM）

期望最大化（EM）算法是用于找到最大似然的或在统计模型参数，其中该模型依赖于未观察到的潜变量最大后验（MAP）估计的迭代方法。期望最大化（EM）可能是无监督学习最常用的算法。

似然函数

似然函数找到给定数据的最佳模型。

期望最大化（EM）算法

假设我们翻转硬币并得到以下内容 - 0,1,1,0,0,1,1,0,0,1。我们可以选择伯努利分布

或者，如果我们有以厘米为单位的人的身高（男性和女性）的数据。高度遵循正常的分布，但男性（平均）比女性高，因此这表明两个高斯分布的混合模型。

贝叶斯信息准则（BIC）

以糖尿病数据为例

EM集群与糖尿病数据使用mclust。

log.likelihood：这是BIC值的对数似然值

n：这是X点的数量

df：这是自由度

BIC：这是贝叶斯信息标准; 低是好的

ICL：综合完整X可能性 - BIC的分类版本。

clPairs(X,class.d)

EM的绘图命令会生成以下四个绘图：

BIC值用于选择簇的数量

聚类图

分类不确定性的图表

簇的轨道图

 

参考文献

1.R语言k-Shape算法股票价格时间序列聚类

2.R语言中不同类型的聚类方法比较

3.R语言对用电负荷时间序列数据进行K-medoids聚类建模和GAM回归

4.r语言鸢尾花iris数据集的层次聚类

5.Python Monte Carlo K-Means聚类实战

6.用R进行网站评论文本挖掘聚类

7.用于NLP的Python：使用Keras的多标签文本LSTM神经网络

8.R语言对MNIST数据集分析 探索手写数字分类数据

9.R语言基于Keras的小数据集深度学习图像分类

拓端研究室
关注
专栏目录
博客
R语言贝叶斯分层、层次Hierarchical Bayesian模型的房价数据空间分析
10-31 545
贝叶斯分层模型（）可用于分析区域数据，当结果变量汇总到构成研究区域划分的各个区域时会产生这类数据。模型可被设定用于描述响应变量的变异性，其作为一些已知会影响结果的协变量的函数，同时还有随机效应来对协变量未解释的剩余变异进行建模。这提供了一种灵活且稳健的方法，使我们能够评估解释变量的影响、适应空间自相关，并量化所获估计值的不确定性。常用的空间模型之一是Besag-York-Mollié（BYM）模型（假设 (Y_i) 是区域 (i = 1, \cdots, n) 观测到的结果，可使用正态分布进行建模。
博客
【专题】2024年金融数字化转型白皮书报告汇总PDF洞察（附原数据表）
10-31 1072
在当今数字化浪潮席卷全球的时代，各行业都在积极探索数字化转型之路。从数字经济各核心行业的发展态势，到企业数字化转型中的人才、技术等关键要素，再到金融、医药、保险、白酒、制造业、快消等不同领域的具体实践，数字化已成为推动各行业发展与变革的重要力量。604份数字化行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。本文将深入分析各行业的数字化现状，探寻其发展机遇与挑战。
博客
【专题】2023-2024中国保险数字化营销调研报告汇总PDF洞察（附原数据表）
10-30 590
在时代浪潮的推动下，中国保险行业正经历着一场波澜壮阔的变革之旅。2023 年，中国经济迈向高质量发展阶段，保险公司纷纷聚焦队伍转型，专业化、职业化代理人成为行业新方向。回顾保险代理人队伍发展，历经多次变革，从早期扩张到面临问题，再到如今的规范化与稳定发展。124份行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。与此同时，近年来备受瞩目的民生话题，如 “养老”“三胎政策”“医疗成本” 等，让保险服务愈发深入人心，消费者对保险的认知也在重塑。
博客
明星人脸识别基于VGG、MTCNN、RESNET深度学习卷积神经网络应用|附数据代码
10-29 781
人脸识别是从人脸照片中识别和验证人的一般性任务。2011 年出版的《人脸识别手册》提到了人脸识别的两种主要模式：人脸验证（给定面孔与已知身份的一对一映射，比如判断 “这是这个人吗？”）和人脸识别（给定人脸与已知人脸数据库的一对多映射，例如确定 “此人是谁？”）。人脸识别系统可在这两种模式中的一种或两种下运行，旨在自动识别图像和视频中的人脸。
博客
【专题】2024中国B2B市场营销现况白皮书报告汇总PDF洞察（附原数据表）
10-29 1034
在 2024 年的市场环境中，营销领域呈现出复杂多样的态势。首先，从 B2B 企业来看，46% 的营销人员面临预算缩减，然而指标未降，预算分布也呈现多元化，反映出不同的市场定位与策略。同时，预算较 2023 年有多种变化，体现了企业各异的市场预期和经营策略。474份营销行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。此外，各行业也展现出独特的营销趋势。AI 人工智能体验营销行业急需构建新理论体系；汽车行业新能源渗透率提升，营销注重用户需求；客户端游戏市场增长，短视频营销火爆；
博客
银行信贷风控专题：Python、R 语言机器学习数据挖掘应用实例合集：xgboost、决策树、随机森林、贝叶斯等
10-29 542
分析师：Fanghui Shao在当今金融领域，风险管控至关重要。无论是汽车贷款违约预测、银行挖掘潜在贷款客户，还是信贷风控模型的构建，以及基于决策树的银行信贷风险预警，都是金融机构面临的关键挑战。本银行信贷风控专题合集将通过代码和数据案例深入探讨这些金融场景中的问题与解决方案，通过对数据的深入分析、模型的构建与优化，为金融机构提供有效的风险管控策略，以促进金融市场的稳定与健康发展。
博客
【专题】AI市场趋势洞察（2024年）报告汇总PDF洞察（附原数据表）
10-28 665
原文链接：当今时代，科技的浪潮汹涌澎湃，人工智能（AI）作为其中的核心力量，正深刻地改变着我们的生活方式和消费模式。在主流电商平台上，AI 产品展现出多样化的销售态势。AI 大家电虽规模最大，却面临销售额同比下降的挑战；AI 手机凭借丰富功能实现销售额大幅增长；AI 笔记本电脑则以惊人增速异军突起。而在智能家居领域，AI 同样扮演着至关重要的角色。份AI市场行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。
博客
Python量子生成对抗网络QGAN神经网络药物发现、多方法乳腺癌药物筛选应用
10-23 586
分析师：Chenhao Wu在当今的医学领域，乳腺癌作为一种严重威胁女性健康的疾病，其治疗一直是科研工作者们关注的焦点。乳腺癌的发展与雌激素受体密切相关，其中 ERα 被视为治疗乳腺癌的重要靶标。能够拮抗 ERα 活性的化合物有望成为治疗乳腺癌的候选药物。然而，药物筛选是一个复杂而艰巨的过程。一方面，在传统的药物筛选中，面临着诸多难点。各类化合物具有繁多的特征属性，如 ADMET 特性和化合物生物活性等。
博客
【专题】2024年具身智能产业发展研究报告汇总PDF洞察：大模型赋能，人形机器人引领具身智能新浪潮（附原数据表）
10-23 929
当今时代，科技的浪潮汹涌澎湃，机器人产业成为其中一道亮丽的风景线。人形机器人在千亿级蓝海市场的吸引下，资本迅速汇聚，2023 - 2024 年投融资火热，车企的加速布局更是为其增添新动力。235份行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。商用服务机器人随着人工智能等技术进步迅速崛起，头部企业优势显著。康复机器人面对我国庞大的脑卒中患者群体及康复人才缺口应需而生。仿生机器人凭借核心技术逐渐进入大众视野，企业融资情况良好。
博客
【专题】2024年中国银发文旅数智化趋势洞察报告汇总PDF洞察（附原数据表）
10-22 631
在当今时代，旅游已成为人们生活中不可或缺的一部分。银发人群以其高涨的出游热情，成为旅游市场中一道独特的风景线。超七成银发人群去年外出旅行，且偏爱中短期游，4 - 7 天和 8 - 14 天的出游时长比例最高。家人安排、亲友推荐主导着他们的出游决策，网红达人推荐也逐渐成为重要风向标。237份旅游行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。与此同时，2023 年旅游行业强势复苏，“五一”“端午” 假期出游人数大幅增长。拥有丰富景点、独特自然风光和饮食文化的目的地备受游客青睐。
博客
SPSS、R 语言因子分析FA、主成分分析PCA对居民消费结构数据可视化分析
10-21 954
分析师：Ting Mei在经济发展的大背景下，居民消费结构至关重要。本文围绕居民消费结构展开深入研究，运用 SPSS25.0 和 R 语言，以因子分析法和主成分分析法对东北三省居民消费价格指数及全国城镇居民消费性支出指标进行分析。通过数据标准化、效度检验等步骤，找到公共因子，揭示居民消费结构特点。在东北三省分析中，明确了消费结构的因子及变化趋势；全国范围的研究（附代码数据）则指出娱乐教育文化服务等是影响消费的主要因素，且发现消费大小与经济发达程度相关。
博客
【专题】2024年中国智能算力行业白皮书报告汇总PDF洞察（附原数据表）
10-21 1027
当今时代，数字经济高速发展，算力的重要性日益凸显。本文围绕算力展开多方面深入分析。2023 年，中国智能算力规模约 414EFLOPS，主要用于互联网领域，且增长迅速，未来有望达 1436EFLOPS。中国智能算力在不同领域应用分布不均，互联网占主导，其他领域有发展潜力。89份算力行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。全球算力规模持续扩张，智能算力增长迅猛，我国算力总规模居全球第二，网络与能效不断提升。“东数西算”显示东部算力需求大，西部较小。
博客
【视频讲解】共享单车使用量预测：RNN, LSTM，GRU循环神经网络和传统机器学习
10-17 569
分别构建简单循环神经网络（RNN）、长短时记忆网络（LSTM）和门控循环单元（GRU）模型。每个模型都包含一个隐藏层，神经元数量为 50，激活函数为relu，输入形状根据时间步长和特征数量确定，输出层为一个神经元，使用均方误差（MSE）作为损失函数，adam优化器进行优化。
博客
【专题】通往2025：全球消费者展望报告汇总洞察（附PDF原数据表）
10-17 767
2024 年的消费市场呈现出复杂多变的态势。消费者支出意愿发生显著转变，从过去的谨慎消费向目标驱动消费迈进，注重消费的合理性与效益性，青睐足不出户消费、事先规划以及避免浪费。消费市场各领域表现各异，一方面，公用事业支出增长突出，新鲜农产品、健康与保健等领域也有不同程度的增长；另一方面，家装、服装、送餐等领域消费支出明显下降。食品饮料行业反弹势头显著，美妆市场持续改善，线上消费出现结构性分化。476份消费行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。
博客
LSTM神经网络结合PSO粒子群优化对管网优化调度及网络安全入侵检测模型|附数据代码
10-15 893
分析师：Fan Qiao在当今科技飞速发展的时代，无论是工业生产中的管网系统，还是信息领域的网络安全，都面临着日益复杂的挑战😕。管网系统作为能源输送和分配的关键基础设施，其优化调度对于提高能源利用效率、降低运行成本以及保障系统稳定运行具有至关重要的意义🎯。与此同时，随着网络技术的广泛应用，网络安全问题愈发凸显，入侵检测成为保护网络系统安全的重要防线🛡️。在管网优化调度方面，选择合适的优化算法并将其与在线仿真计算相结合是实现高效调度的核心🧐。
博客
【专题】2024年经销商车后用户研究：洞察车主变化制胜售后未来报告合集PDF分享（附原数据表）
10-15 886
在汽车行业快速变革的时代，“互联网原住民”成为车主群体的重要组成部分。2023 - 2024 年，车后用户线上渠道使用比例不断上升，App/小程序备受青睐，各线上渠道各具优势。同时，购车关注点也在不断变化，价格成为关键因素，本土品牌崛起，新能源汽车受青睐。头条汽车用户热衷于新车资讯、车辆测评等内容。新能源汽车在创新、性价比等方面表现出色，性能与保修服务备受关注。476份汽车行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。
博客
【专题】中国上市公司高端制造业发展报告2024报告合集PDF分享（附原数据表）
10-14 899
在当今全球经济格局深刻演变的时代背景下，中国高端制造业正以蓬勃之势崛起。2023 年，我国高端制造业上市公司数量超过 2400 家，行业分布呈现出不均衡之态，机械制造行业一马当先，电子、电力制造等行业亦表现突出。同时，区域分布高度集中于东南沿海，广东、江苏、浙江三省优势显著。138份制造业行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。本报告深入剖析中国高端制造业的行业分布与区域分布情况，探讨各行业发展的特点、趋势及面临的问题与挑战，并提出相应的建议与展望。
博客
Python用CNN - LSTM、ARIMA、Prophet股票价格预测的研究与分析|附数据代码
10-12 856
全文链接：分析师：Sabrina Huang股票市场的波动起伏一直备受投资者关注，准确预测股票价格对于投资者制定合理的投资策略至关重要。股票价格数据具有时间序列特性，近年来，随着机器学习和深度学习技术的发展，各种模型被应用于股票价格预测。长短期记忆（LSTM）模型凭借其记忆功能在剖析时间序列数据关系方面展现出优势，ARIMA 模型在时间序列分析中也有广泛应用，此外，CNN - LSTM 等组合模型（附数据代码）也为股票价格预测提供了新的思路。
博客
【专题】智启未来：新质生产力引擎驱动下的智能制造行业革新报告合集PDF分享（附原数据表）
10-12 1213
原文链接：在当今全球经济格局深刻变革的大背景下，制造业作为国家经济的基石，正处在高质量发展的关键历史时期。智能决策作为一股崭新的力量，正逐步成为推动制造业数智化转型的强大新动能。众多制造企业积极投身于这场变革之中，努力探索适合自身发展的转型之路。本文将深入细致地剖析制造业在智能决策、绿色智能制造、高质量发展以及数字化转型等多个重要方面的现状与未来发展趋势。通过对企业管理模式的深度变革、数据标准化与流程信息化的双重奠基等方面的探讨，揭示智能决策如何助力企业突破业务瓶颈，实现业绩提升。
博客
【专题】2024年半年度中国银行业回顾与展望报告合集PDF分享（附原数据表）
10-11 618
在当今复杂多变的经济环境下，银行业作为金融体系的核心支柱，面临着诸多挑战与机遇。2024 上半年，上市银行营收下滑，利息与手续费收入承压，然而，变革的力量也在悄然涌动。人工智能正引领银行业开启全新的范式变革，有望重塑行业“游戏规则”。264份银行行业研究报告最新趋势已分享在交流群，进群和500+行业人士共同交流和成长。同时，数字化敏捷银行建设成为破解发展难题的关键，生态化业务模式也为商业银行带来新的发展方向。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值