Python爬虫学习记录(5)——python mongodb + 爬虫 + web.py 的acfun视频排行榜

最早这个代码是写给所里那个863项目的,想自动下载热门视频,推送到高校的人民日报的电子板上,后来因为视频内容太和谐作罢,改成推荐优酷土豆的视频

code:

http://pan.baidu.com/share/link?shareid=72883403&uk=1006940630

鉴于trend.avfun坏了。。做个avfun视频排行。希望avfun别老改界面~。~ 

crontab每天爬acfun娱乐,音乐,短影等板块的视频播放数等,放到mongo里。

用web.py做了个界面。。

后面可以做个cache。。

服务器demo地址就不发了。免得cpu撑不住。

另外里面附了个自动下视频的。项目凑合用。。


acfun_crawler: crontab 每天爬favor/comments/views -> mongo

code.py: web.py 界面

acfun_mongo+you_get: 按favors从高到底下视频,阈值30.

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值