- 博客(5)
- 收藏
- 关注
原创 2021-01-25
DataWhale Task 5/论文作者信息关联任务说明学习主题:作者关联(数据建模任务),对论文作者关系进行建模,统计最常出现的作者关系;学习内容:构建作者关系图,挖掘作者关系学习成果:论文作者知识图谱、图关系挖掘数据处理步骤将作者列表进行处理,并完成统计。具体步骤如下:将论文第一作者与其他作者(论文非第一作者)构建图;使用图算法统计图中作者与其他作者的联系;社交网络分析图是复杂网络研究中的一个重要概念。Graph是用点和线来刻画离散事物集合中的每对事物间以某种方式相联系的数学模
2021-01-25 23:18:42
83
原创 2021-01-23
DataWhale Task4/论文种类分类任务说明任务主题:论文分类(数据建模任务),利用已有数据建模,对新论文进行类别分类;任务内容:使用论文标题完成类别分类;任务成果:学会文本分类的基本方法、TF-IDF等数据处理步骤在原始arxiv论文中论文都有对应的类别,而论文类别是作者填写的。在本次任务中我们可以借助论文的标题和摘要完成:对论文标题和摘要进行处理;对论文类别进行处理;构建文本分类模型;文本分类思路思路**1:TF-IDF+机器学习分类器直接使用TF-IDF对文本提
2021-01-23 00:36:09
75
原创 2021-01-20
DaWhale Task3/论文代码统计任务说明任务主题:统计所有论文出现代码的相关统计;任务内容:使用正则表达式统计代码链接、页数和图表数据;任务成果:学习正则表达式统计正则表达式正则表达式描述了一种字符串的匹配模式,可以用来检查一个串是否含有某种子串、将匹配的子串替换或者从某个串中提取出符合某个条件的子串。普通字符:大写和小写字母、所有数字、所有标点符号和一些其他符号字符描述[ABC]匹配[…]中的所有字符,eg:[aeiou]匹配"google runoob
2021-01-20 00:38:10
58
原创 2021-01-16
DataWhale Task2/论文作者统计任务说明任务主题:论文作者统计任务内容:使用Pandas读取并使用字符串操作任务结果:掌握Pandas字符串操作字符串处理方法说明str.casefold()将字符串全部小写str.capitalize()第一个字符串大写str.join()字符串拼接str.upper()小写转大写具体代码import seaborn as sns #用于画图 from bs4 import Beautifu
2021-01-16 23:43:23
61
原创 2021-01-13
DataWhale Task1/论文数据统计笔记Task说明任务主题:统计2019年全年计算机方向论文数量;任务内容:基于Pandas进行数据的读取及统计任务结果:掌握Pandas的基础操作一、数据载入1.1数据集介绍下载地址:https://www.kaggle.com/Cornell-University/arxiv数据集的格式如下:id:arXiv ID,可用于访问论文;submitter:论文提交者;authors:论文作者title:论文标题;comments:论文页
2021-01-13 22:46:39
78
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人