- 博客(2)
- 收藏
- 关注
原创 Requests爬取斗鱼直播列表信息
实现简单小爬虫,爬取斗鱼直播页面所有当前在线直播列表信息 文章目录1 目标分析2 分析URL2.1 分析首页URL2.2 分析换页URL2.3 确定爬取URL3 代码4 总结 1 目标分析 爬取斗鱼直播页面所有当前在线直播列表信息,包括房间标题、主播名、所属类别、热度等信息。 2 分析URL 2.1 分析首页URL 打开斗鱼直播https://www.douyu.com/directory/all...
2019-10-02 01:18:53 1131
原创 如何突破网站对Selenium的屏蔽(1)接管手动打开的Chrome浏览器
操作环境: Ubuntu 18.04LTS Python 3.6 1 将google-chrome添加到环境变量PATH中 在~/.profile文件下添加该语句 export PATH="$PATH:/usr/bin/google-chrome" 在Terminal中执行 source ~/.profile 2 ...
2019-09-25 00:53:23 3550 4
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人