数据分析
AlanConstantineLau
额......
展开
-
python简单实战项目:《冰与火之歌1-5》角色关系图谱构建——数据库设计
在弄任何一个数据之前,肯定是要先设计数据库的。这里打算将《冰与火之歌》(以下称《冰火》)的文本数据先存入到数据库中,后续在使用python读取数据来处理。前期准备需要工具: 1.peewee 2.sqlite 3.python3.5(当然python2也是可以的)大致说一下: 1.peewee peewee是python中的一个轻量级ORM框架。 什么是ORM框架? ...原创 2017-04-10 16:38:13 · 5260 阅读 · 3 评论 -
python构建指数平滑预测模型
指数平滑法其实我想说自己百度的… 只有懂的人才会找到这篇文章… 不懂的人…看了我的文章…还是不懂哈哈哈指数平滑法相比于移动平均法,它是一种特殊的加权平均方法。简单移动平均法用的是算术平均数,近期数据对预测值的影响比远期数据要大一些,而且越近的数据影响越大。指数平滑法正是考虑了这一点,并将其权值按指数递减的规律进行分配,越接近当前的数据,权重越大;反之,远离当前的数据,其权重越小。指数平滑法按照平原创 2017-04-14 16:31:29 · 21958 阅读 · 17 评论 -
python简单实战项目:《冰与火之歌1-5》角色关系图谱构建
前两天《权力的游戏》第七季发布了第二弹预告片,思索的第七季也快要来了,正想着脑子突然一热,要不弄个《权利的游戏》的角色共现图谱吧。故事里面的人物关系复杂程度也是出了名了的,如果能用python来把故事人物关系理一下,效果应该不错的。而且刚好之前也一直想弄个python的大数据简单实战项目,苦恼没有什么有意思的主题。这个预告片来得也巧。这里分三步走,一个是数据挖掘,一个是数据可视化实现。...原创 2017-04-09 15:26:02 · 7931 阅读 · 1 评论 -
python简单实战项目:《冰与火之歌1-5》角色关系图谱构建——人物关系可视化
同系列博文: python简单实战项目:《冰与火之歌1-5》角色关系图谱构建 python简单实战项目:《冰与火之歌1-5》角色关系图谱构建——数据库设计 Scrapy+redis+mongodb分布式爬虫抓取小说《冰与火之歌1-5》先来张Gephi绘制酷炫的人物关系图 图中每个节点代表一个角色,节点与节点之间的连线代表共现,而连线的粗细表示共现的频次多少。节点的大小以及颜色深浅表...原创 2017-05-15 14:32:48 · 23829 阅读 · 21 评论 -
python构建关键词共现矩阵
本文仅仅提供了实现思路,如果对算法速度有追求的请移步python构建关键词共现矩阵速度优化(在此非常感谢这位同学的优化) 非常感谢南京大学的张同学发现我代码中的bug,现文中的代码均已经更新请放心使用,并且代码放弃使用numpy进行矩阵的构建,因此可以对中文进行构建关键词共现矩阵了。同时,有很多同学对我在blog中总是提到的“import自己的代码“的代码感兴趣,现在已将代码git至GITHUB原创 2017-04-05 15:44:37 · 43384 阅读 · 44 评论 -
数据科学项目集
从网上搜集各种数据分析、数据挖掘项目并进行复现。项目里面会写上自己的学习心得,项目的READMED会给出参考和转载的原网址。不仅是学习,也是分享,一周一更。项目地址:DataScienceProjectsRequirements:Python3.6Jupyer notebookrequirements.txt...原创 2019-03-04 20:34:28 · 435 阅读 · 4 评论