基于机器学习的NLP情感分析(二)---- 分类问题

本文探讨了基于机器学习的NLP情感分析中如何进行分类,重点关注特征相关性和模型选择。通过分析,大部分特征展现出较低的相关性,表明所选参数具有良好的表现力。在模型选择上,使用了Kfold交叉验证和f1 Score评估,以找到最佳模型。
摘要由CSDN通过智能技术生成

基于机器学习的NLP情感分析(二)—- 分类问题

前文提到了如何把一个文本转换为相应的词向量,本文讨论的是如何进行分类。

feature相关性

首先,需要看看我之前选出来的feature,是否能够满足需求。

Stary 2017-07-18 at 8.44.44 P

这里其实有很多参数没有显示出来。从该图来看,大部分的参数相关性是非常低的,这是一件非常好的事情,因为这说明选出来的参数具有更大表现力。但也发现有一些参数是重复的,这个比较尴尬。当然可以采用PCA过滤掉就好。

Stary 2017-07-18 at 8.45.58 P

从此图来看,每一个参数都对sentiment有一定的影响,大部分都有比较强的相关性,这说明选出来的参数并不是随便乱选的。

模型选择

这里我选择了一些比较常见的算法模型来进行训练,并试图去获得相对较好的model。
这里采用Kfold函数来循环测试模型,并且用f1 Score来选择最合适的model。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值