文章目录 初识requests_html模块 使用requests_html 安装 基本使用 发送请求 解析响应获 获取需要的内容 快速获取链接 获取元素 使用xpath 使用css选择器(find方法) 正则搜索(search、search_all) search补充 HTML类 高级功能 JS渲染 自动翻页(不太好用) 异步 异步渲染JS 异步传参 异步发送请求 总结 视频讲解源码 原文链接 初识requests_html模块 感觉只要学过Python爬虫的同学应该都知道requests这个库吧,它在我们的Python爬虫任务中应该是最常用的一个库了!今天跟大家分享的这个模块requests_html,他的作者和前者是同一人!这是一个解析HTML的库,用起来和requests一样方便,下面就来介绍一下它! 参考视频 使用requests_html 安装 依然是那个命令 pip3 install -i https://pypi.doubanio.com/simple requests_html 注意:由于requests_html模块中使用了异步asynico模块&