![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
木鱼与琴
木木的木鱼
展开
-
如何突破网站对Selenium的屏蔽(1)接管手动打开的Chrome浏览器
操作环境:Ubuntu 18.04LTSPython 3.61 将google-chrome添加到环境变量PATH中在~/.profile文件下添加该语句export PATH="$PATH:/usr/bin/google-chrome"在Terminal中执行source ~/.profile2...原创 2019-09-25 00:53:23 · 3553 阅读 · 4 评论 -
Requests爬取斗鱼直播列表信息
实现简单小爬虫,爬取斗鱼直播页面所有当前在线直播列表信息文章目录1 目标分析2 分析URL2.1 分析首页URL2.2 分析换页URL2.3 确定爬取URL3 代码4 总结1 目标分析爬取斗鱼直播页面所有当前在线直播列表信息,包括房间标题、主播名、所属类别、热度等信息。2 分析URL2.1 分析首页URL打开斗鱼直播https://www.douyu.com/directory/all...原创 2019-10-02 01:18:53 · 1135 阅读 · 0 评论