慕课网 Python 开发简答爬虫课程笔记

在慕课网上跟了一门课《python开发简单爬虫》，收益颇多，在这里记录下部分课程笔记，便于以后的回顾。 非常感谢讲师乒乓球鸡蛋的分享，感谢！ 课程链接：http://www.imooc.com/video/10677

第三章：简单的爬虫架构

• 3.1 简单的爬虫架构
• 3.2 简单的爬虫架构的动态运行流程

第四章：URL管理器和实现方法

• 4.1 URL管理器
• 4.2 URL管理器的实现方法

第五章：网页下载器和urllib2模块

• 5.1 网页下载器简介
• 5.2 urllib2下载网页的几种方法
• 5.3 urllib2实例代码演示

第六章：网页解析器和BeautifulSoup第三方插件

• 6.1 网页解析器简介
• 6.2 BeautifulSoup模块的安装
• 6.3 BeautifulSoup的语法
• 6.4 BeautifulSoup的实例代码