文本聚类维基百科处理
文章平均质量分 80
磷脂分子
这个作者很懒,什么都没留下…
展开
-
wiki语料库完成转换成txt的后续处理[包含txt文件过大打不开如何append添加自己的语料数据](二)2020.06
wiki语料库完成转换成txt的后续处理[包含txt文件过大打不开如何append添加自己的语料数据](二)2020.06如何将一个txt文件添加到另一个txt文件之后写在前面的话:我的并不是专业的,和很多小白一样都是导师硬逼的,大家都不容易,冤冤相报何时了。导师不好相处,这里都是我自己踩的坑,一点点找到的解答方法,如果你有更好地方法,请一定要留言。拜托大佬教教我!!!如果你和我一样都曾被老师逼的心肝难受,也请发泄出来,不要客气留言吧。首先发显得问题是txt文件太大了,打开都不能实现,更不要提编原创 2020-06-05 12:55:53 · 663 阅读 · 0 评论 -
维基百科的语料库下载以及后续操作(一)2020年6月【包括opencc下载避雷,繁转简】
(二)下载之后需要对其进行提取txt文件,并且进行繁体字转化,以及去除一些帮助页面和重定向的页面,处理程序为:参考了站内一位大神——残月飞雪的代码,但是因为我的python是3.7以上的版本,稍微修改了一些地方就可以正常使用了。我从接触python开始就不是正常学的,很匆忙一些基础的知识掌握的都不是很好,这是我的CMD显示pip安装成功的提示,我也用三两句代码实现了简繁转换,如下所示。除了上面第二部分修改的,第三部分opencc也进行一些修改,我是Geany运行的,可以实现。我的并不是专业的,都是逼的。原创 2020-06-03 19:08:09 · 4705 阅读 · 5 评论