- 博客(2)
- 收藏
- 关注
RSS订阅原创 爬虫之路——Day4
最近闲着没事想统计一下目前很火的直播网站的观众数量究竟是多少，所以通过爬虫爬取了斗鱼(http://www.douyu.com/directory/all)的观众数量。首先可以通过网页源代码获取此时直播的页数，之后利用正则表达式取出主播名字以及对应主播的观众数量，存入数据库，接着再对每页都进行相同的操作，并且每间隔10分钟就统计一次，由此来获得人数随着时间变化的关系。下图是某一时间得到的直播情
2016-08-31 14:31:42
270
原创 爬虫之路——Day3
用来导入豆瓣主页所有的推荐电影import requestsimport pymongoimport reimport timeconnection = pymongo.MongoClient()att = connection.doubantags = {'热门', '最新', '经典', '可播放', '豆瓣高分', '冷门佳片', '华语', '欧美', '韩国
2016-08-28 15:36:13
360
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人