清华 词向量库_别找了,送你 20 个文本数据集

这篇博客整理了多个中文数据集资源,包括清华大学的词向量库、THUCNews文本分类数据集、古诗词数据库、《口袋妖怪》命名对照、中国股市爬取数据以及各种中文语料库,涵盖了自然语言处理、文本分类、词向量等多个领域的研究和应用。
摘要由CSDN通过智能技术生成

源 /DataCastle数据城堡

中科大自然语言处理与信息检索共享平台

http://www.nlpir.org/?action-category-catid-28

77fb1c09d4ec6307cd7b3342b5e6de7c.png

搜狗实验室

搜狗实验室提供了一些高质量的中文文本数据集,但时间比较早,多为2012年以前的数据。

https://www.sogou.com/labs/resource/list_pingce.php

cfc82141a7e111166770a3d1a80c86d0.png

中文文本分类数据集THUCNews

THUCNews是根据新浪新闻RSS订阅频道2005~2011年间的历史数据筛选过滤生成,包含74万篇新闻文档,划分出 14 个候选分类。

http://thuctc.thunlp.org/#%E4%B8%AD%E6%96%87%E6%96%87%E6%9C%AC%E5%88%86%E7%B1%BB%E6%95%B0%E6%8D%AE%E9%9B%86THUCNews

cae3d16978c2c0f68941214a3c46f920.png

中文完形填空数据集

https://github.com/ymcui/Chinese-RC-Dataset

e9796608b236ba7e73abf732d4bff745.png

清华大学开放中文词库

http://thuocl.thunlp.org/

4141046a4df4e230cb740d284ce8e9bc.png

中华古诗词数据库

最全中华古诗词数据集,唐宋两朝近一万四千古诗人, 接近5.5万首唐诗加26万宋诗. 两宋时期1564位词人,21050首词。

https://github.com/chinese-poetry/chinese-poetry

bfed6397cb26088fc3820db8cdbde81a.png

上百种预训练中文词向量

https://github.com/Embedding/Chinese-Word-Vectors

eb747498c842c0b417fe5b7fcaf8839a.png

《口袋妖怪》跨语种命名对照数据集

任天堂游戏《口袋妖怪》中所有小精灵名字的德、英、法、日、韩、中6种语言对照,中文包含繁简体两种格式。

https://pokewiki.de/index.php?title=Pok%C3%A9mon-Liste

218c50d5a1a07976c38536d9f12b2a56.png

中国宗教用户关键词列表

https://www.dcjingsai.com/common/share/73.html

20ca5f34fe1aef723428fe7c88db018f.png

1998年《人民日报》词性标注库

https://pan.baidu.com/s/1gd6mslt

1ddfc7044b228bea00b52b7b391ea591.png

中文突发事件语料库

https://github.com/shijiebei2009/CEC-Corpus

f92803c36ee024e8958bfb1d13d77aa2.png

中国股市爬取信息数据集

https://github.com/startprogress/China_stock_announcement

f5f32a87434b3ad0ca553441a6691b42.png

中文语料小数据

包含了中文命名实体识别、中文关系识别、中文阅读理解等一些小量数据。

https://github.com/crownpku/Small-Chinese-Corpus

9fb26ddcd4793b8064aefdfd7a3259be.png

Tushare财经数据接口

TuShare是一个免费、开源的python财经数据接口包。

http://tushare.org/

80a0729f9b51fc044effd2cdaaf4ad21.png

保险行业语料库

https://github.com/Samurais/insuranceqa-corpus-zh

8cc822e3cfe83dc572c26980a6a82815.png

中文人名语料库

包含中文常见人名、中文古代人名、中文翻译人名、中文姓氏、中文称谓、中文成语等数据。

https://github.com/wainshine/Chinese-Names-Corpus

628b4d1f3cc715bd058fef2bae635b9c.png

中文简称数据集

https://github.com/zhangyics/Chinese-abbreviation-dataset

7d9479c6f6a45e7ad01976c0d8d10664.png

汉字拆字字典

https://github.com/kfcd/chaizi

9580fde83135e8442f61a6a7fcfe83f2.png

中文实体情感知识库

刻画人们如何描述某个实体,包含新闻、旅游、餐饮,共计30万对。

https://github.com/rainarch/SentiBridge

ed3c0b4f4607ef034e1126bbf1623564.png

中文对话情感分析数据集

https://github.com/z17176/Chinese_conversation_sentiment

ef4baa9c2a9e92b23eccd69ec9ba347a.png

推荐阅读

8ee77cd068557fd4b63d825c19b23784.png

喜欢就点击“在看”吧!

  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值