爬虫
文章平均质量分 78
流萤__
今天以后,人生无数可能
展开
-
Python爬虫QQ空间
目录 一、前言 二、利用selenium模拟登陆获取cookie并保存到本地 三、破解空间加密参数g_tk 四、在个人QQ空间好友栏获取好友列表 五、获取好友空间说说的json文件,获取姓名、说说内容、时间等信息,存入数据库 六、开启多线程爬取 七、小结 一、前言 玩了这么多年QQ,学了爬虫当然要爬一下啦,肯定有大佬要说爬个QQ空间还要多线程吗,人家只是刚看了多线程方面的知...原创 2018-07-22 17:02:49 · 13706 阅读 · 18 评论 -
bilibili视频信息爬虫
尝试了破解bilibili滑动验证码达到自动登录的效果之后,就顺带做了下其中的视频信息的爬虫。 一,使用selenium登陆bilibili,保存的Cookie的信息到本地(网上有很多,这里就不细说了,代码文末有) 二,选择一个视频分区,爬取其中的视频信息 这里我拿音乐区的原创音乐做例子,查看更多进入原创音乐分区 这里有两种排序方式,按投稿时间和按热度,在chrome的控制台里的J...原创 2018-12-02 15:15:35 · 1622 阅读 · 1 评论