R语言——机器学习模型h2o包与解释

大白成长记Jan

已于 2023-10-13 15:33:02 修改

阅读量788

点赞数

分类专栏：机器学习 R 文章标签： r语言机器学习

于 2023-10-13 10:21:01 首次发布

本文链接：https://blog.csdn.net/weixin_45443016/article/details/133803666

版权

R 同时被 2 个专栏收录

17 篇文章 2 订阅

订阅专栏

机器学习

4 篇文章 0 订阅

订阅专栏

1.自动机器学习（AutoML）

自动机器学习（AutoML）功能实现有监督机器学习模型训练的自动化过程当前版本的AutoML训练并交叉验证了以下算法（按以下顺序）：三个预先指定的XGBoost-GBM（Gradient Boosting Machine）模型、一个固定的GLMs网格、一个默认的随机林（DRF），五个预先指定的H2O GBMs、一个近似默认的深度神经网络、一个极端随机森林（XRT）、一个XGBoost GBMs的随机网格、一个H2O GBMs的随机网格和一个深度神经网络的随机网格。在某些情况下，将没有足够的时间来完成所有的算法，因此有些可能会从排行榜上消失。然后，AutoML训练两个叠加的集成模型，一个是所有模型，另一个是每种模型中最好的模型。
R语言 h2o.automl包解释
 H2O AutoML: Automatic Machine Learning官网*best
R语言h2o.automl代码1*
R语言h2o.automl代码2*

2.各model的分别使用

H20监督算法的model：
广义线性回归模型 (GLM)
随机森林模型(RF)
GBM(也称GBDT)
深度学习(DL)
朴素贝叶斯(NB)
R语言 h2o.model

3.深度学习h2o.deeplearning

常用的深度学习模型框架是Python中的ensorflow和Pytorch，已经基于Kears开发的R包keras。这几种框架具有很高的灵活性，学习难度较大。基于此，我们解释一种经过包装过的深度学习方法h2o.deeplearning。

H2O是一个基于java的机器学习/深度学习平台，它支持大量无监督和有监督的模型，也支持深度学习算法；可以作为R或Python包导入，也给用户提供UI似的界面。

H2O的深度学习基于多层前馈人工神经网络，该网络使用反向传播进行随机梯度下降训练。前馈人工神经网络（ANN）模型，也称为深度神经网络（DNN）或多层感知器（MLP），是最常见的深度神经网络类型。
R 语言深度学习模拟与评价-1
R 语言深度学习模拟与评价-2
R语言 h2o.deeplearning

4.模型解释

（1）模型效果评估指标

a.混淆矩阵(Confusion Matrix)

b.Lift( 提升指数 )

指投入与产出的比例，值越大，模型的运行效果越好。

c.ROC 曲线 & PR 曲线 & KS 曲线

实际应用中，通常是先基于训练好的分类器得出测试样本的预测概率，然后将该测试样本的预测概率与给定的阈值进行比较，若该预测概率大于给定阈值，则将该测试样本划分为正类，反之则将其划分为反类。对于不同的分类任务，该分类阈值的取值也是不一样的。
① ROC 曲线 ( The Receiver Operating Characteristic Curve ) 给出的是不同分类阈值情况下真正率 ( TPr ) 和假正率 ( FPr ) 的变化曲线。
② PR 曲线 ( Precision-Recall Curve ) 给出的是不同分类阈值情况下查准率 ( Precision ) 和查全率 ( Recall ) 的变化曲线。
在这里插入图片描述

d.个体条件期望图 ( ICE )

ICE相较PDPICE 图可以更深入地探索个体差异并识别模型输入之间的子组和相互作用。另一方面，ICE 图使得可以深入到单个观察的水平。它们可以帮助探索个体差异，并确定模型输入之间的子组和交互。可以将每个 ICE 曲线视为一种模拟，显示如果改变特定观察的一个特征，模型预测会发生什么。为避免可视化过载，ICE 图一次只显示一个模型变量。

当对大数据集分析时，则可能需要进行一些调整。例如，可以对选定的变量进行分箱，也可以对数据集进行采样或分组。这些技术可以更快地提供实际图的合理近似值。