python开发web项目_用python开发web项目-Django初尝试

简易微博分析

使用python爬取特定用户的微博,进行一些简单的统计

获取数据如下:

微博内容

发博日期

转发博主

转发内容

统计结果包含以下:

转发博主的前10名和转发次数

发博次数最多的前10个日期和数量

出现最多的10个词语

使用词语的词云图(出现次数超过3次的)

最新的10条微博

使用说明:

修改数据库配置:修改 weibo_analyze下面的settings.py的 DATABASES 部分。

修改要获取用户微博的uid,在 myweb/schedule_task.py里面的getWeibo方向里面(获取方法自行百度)。

如想修改停用词,在修改 myweb/stop_word.txt,一行代表一个停用词,停用词在分词时会过滤掉。

数据库建表,可以使用django命令生成(生成的需要将text类型字段改为blob类型,防止表情保存报错),也可以直接执行sql,sql在static文件下面。

效果展示

排行

词云

使用到的python组件:

requests: 进行网络请求

re 进行正则匹配

jieba 进行分词

apscheduler 进行定时任务

前端使用

echarts_wordcloud.js 词云

pure-css 前端样式css

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值