文本分类(情感分析)——中文数据集汇总

文本分类数据集要点有情感/观点/评论,一般做倾向性分析,对于分类模型,在上几期中已经给出,今天小编给大家整理一下常用的一些中文分类数据集,喜欢的快来点赞收藏吧!

图片

1.THUCNews数据集

THUCNews是根据新浪新闻RSS订阅频道2005~2011年间的历史数据筛选过滤生成,包含74万篇新闻文档(2.19 GB),均为UTF-8纯文本格式。我们在原始新浪新闻分类体系的基础上,重新整合划分出14个候选分类类别:财经、彩票、房产、股票、家居、教育、科技、社会、时尚、时政、体育、星座、游戏、娱乐。

数据集地址:http://thuctc.thunlp.org/

2.今日头条新闻数据集

数据来源:今日头条客户端 数据规模:共382688条,分布于15个分类中。可参考这个文章

数据集地址:

https://github.com/aceimnorstuvwxz/toutiao-text-classfication-dataset

3.全网新闻(SougouCA)和搜狐新闻(SougouCS)数据集

不推荐使用,处理起来比较繁琐

数据集地址:暂无

4.ChnSentiCorp_htl_all数据集

7000 多条酒店评论数据,5000 多条正向评论,2000 多条负向评论

数据集地址:

https://raw.githubusercontent.com/SophonPlus/ChineseNlpCorpus/master/datasets/ChnSentiCorp_htl_all/ChnSentiCorp_htl_all.csv

5.waimai_10k数据集

某外卖平台收集的用户评价,正向4000 条,负向约 8000 条

数据集地址:

https://github.com/SophonPlus/ChineseNlpCorpus/blob/master/datasets/waimai_10k/intro.ipynb

6.online_shopping_10_cats数据集

10 个类别(书籍、平板、手机、水果、洗发水、热水器、蒙牛、衣服、计算机、酒店),共 6 万多条评论数据,正、负向评论各约 3 万条

数据集地址:

https://github.com/SophonPlus/ChineseNlpCorpus/blob/master/datasets/online_shopping_10_cats/intro.ipynb

7.weibo_senti_100k数据集

10 万多条,带情感标注 新浪微博,正负向评论约各 5 万条。

数据集地址:

https://github.com/SophonPlus/ChineseNlpCorpus/blob/master/datasets/weibo_senti_100k/intro.ipynb

8.simplifyweibo_4_moods数据集

36 万多条,带情感标注 新浪微博,包含 4 种情感,其中喜悦约 20 万条,愤怒、厌恶、低落各约 5 万条。

数据集地址:

https://github.com/SophonPlus/ChineseNlpCorpus/blob/master/datasets/simplifyweibo_4_moods/intro.ipynb

9.dmsc_v2数据集

28部电影,超70万用户,超200万条评分/评论数据

数据集地址:

https://github.com/SophonPlus/ChineseNlpCorpus/blob/master/datasets/dmsc_v2/intro.ipynb

10.yf_dianping数据集

24 万家餐馆,54 万用户,440 万条评论/评分数据

数据集地址:

https://github.com/SophonPlus/ChineseNlpCorpus/blob/master/datasets/yf_dianping/intro.ipynb

11.yf_amazon数据集

2 万件商品,1100 多个类目,142 万用户,720 万条评论/评分数据

数据集地址:

https://github.com/SophonPlus/ChineseNlpCorpus/tree/master/datasets/yf_amazon

12.Datahub数据中心

包含文本分类、情感分析以及知识图谱的数据集

数据集地址:

http://www.datahub.ileadall42.com/data/list?category=2&parent_category=1

13.AI_challenger情感分析数据集

数据集分为训练、验证、测试A与测试B四部分。数据集中的评价对象按照粒度不同划分为两个层次,层次一为粗粒度的评价对象,例如评论文本中涉及的服务、位置等要素;层次二为细粒度的情感对象,例如“服务”属性中的“服务人员态度”、“排队等候时间”等细粒度要素。

数据集地址:https://pan.baidu.com/s/1THPLarF9A2njs7FsCA_QoQ 密码: 9t16

以上便是小编收集的可用于中文分类的数据集,如果上面有误或者你有其他补充,欢迎在评论区留言,另外上面有些数据集需要先进行处理才可以进行训练,有需要可有偿联系,对于训练代码可参考如下:

BERT文本分类——基于美团外卖评论数据集

BERT文本分类——基于toutiao今日头条新闻数据集

BERT文本分类——基于simplifyweibo_4_moods微博数据集

最后:

会不定期发布相关设计内容包括但不限于如下内容:信号处理、通信仿真、算法设计、matlab appdesigner,gui设计、simulink仿真......希望能帮到你!

  • 33
    点赞
  • 81
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
情感分析中文数据集tsv是一种用于中文情感分析数据集文件格式。tsv是指以制表符作为字段分隔符的文本文件。 情感分析是指通过计算机技术来分析和识别文本中的情感倾向,即判断文本是积极的、消极的还是中性的。这在社交媒体分析、舆情监测、自然语言处理等领域广泛应用。 中文情感分析数据集tsv文件通常由两列组成,第一列是文本内容,第二列是对应文本的情感标签。情感标签通常用数字表示,例如0表示消极情感,1表示中性情感,2表示积极情感。 使用tsv格式的好处是它可以方便地使用一些数据处理工具进行处理和分析,如Python的pandas库。可以使用pandas的read_csv函数加载tsv文件,并指定分隔符为制表符,然后将其转换为pandas的数据框(dataframe)对象进行进一步处理和分析。 分析中文情感数据集的步骤包括数据加载、数据清洗、特征提取、模型训练和评估等。可以使用机器学习算法如朴素贝叶斯、支持向量机、深度学习模型如循环神经网络(RNN)或卷积神经网络(CNN)等进行训练和预测。 常见的中文情感分析数据集有Sina Weibo情感分析数据集、大连理工大学中文情感分析数据集等。这些数据集经过标注,可以用于训练和评估情感分析模型的性能。 总之,中文情感分析数据集tsv是一种用于存储和处理中文情感分析数据的文件格式,它可以方便地进行数据加载和分析,是进行中文情感分析研究的重要工具之一。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

MatpyMaster

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值