一小时入门 Python 3 网络爬虫

如果你具有 Python 3 基础，想学习一些实战内容，我想学习网络爬虫是一个不错的选择。作为获取数据的手段之一，网络爬虫有它独特的魅力，是一个很好的用来满足个人兴趣爱好的入门项目。

本场 Chat，我会从爬虫原理讲到爬虫实践，讲解一些常用的第三方库的使用方法。我们将一起批量爬取文字、图片、视频，你准备好了吗？

实录提要：

• 如何高效率抓取，常见的优化策略有哪些；
• 抓取小说时，网站 URL 不是以 .html 结尾的就不能抓取到内容了吗；
• 零基础学习爬虫的话要掌握哪些 Python 基础；
• 成为一名合格的爬虫工程师需要具备什么能力；
• 如何反爬虫，如何反反爬虫；
• 如何爬取 HLS 切片的视频；
• 对于实时比如行情音视频流等数据该如何爬取；
• 文章里既然用了 Requests，为什么不用 .json() 而用 JSON 模块；
• 获取在线加密的视频有什么好的解决方案，如用保利威视加密过的视频；
• 如何获取有效的 HTTPS 代理 IP 地址；
• 什么样的爬虫是非法的，哪些是合法的。

阅读全文: http://gitbook.cn/gitchat/activity/59b09bbf015c905277c2cc09

您还可以下载 CSDN 旗下精品原创内容社区 GitChat App ，阅读更多 GitChat 专享技术内容哦。