- 博客(1)
- 收藏
- 关注
原创 使用BERT对搜狐新闻文本进行分类(一)
使用BERT对搜狐新闻文本进行分类(一)本人小白,刚刚接触NLP领域,通过写博客方式来记录写一下学习的过程。如果有文章中有不对或可以改善指出,希望大家可以帮我指出。谢谢大家。处理搜狐新闻数据文本数据集来源:http://www.sogou.com/labs/resource/cs.php,下载的是完整版648M。1.这里直接使用解压后的文件“news_sohusite_xml.dat”(推荐先使用小的文本进行试验处理)'''由于一些转码问题,我们先通过二进制方式读取,转换为gbk格式'''S
2020-11-25 18:08:59
856
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人