Python网络爬虫与信息提取

内容：The website is the API…
掌握定向网络数据爬取和网页解析的能力
Requests库——robots.txt——beautiful soup（解析HTML页面）——projects——Re（正则表达式库）——scrapy（原理，框架）
8内容+4实例
Python开发工具选择：
文本工具类IDE：IDLE（python自带入门，简单）；sublime text（专业）；
集成工具类IDE：wing（公司维护，工具收费；调试功能丰富）；visual studio&PTVS（window）；eclipse（开源）；PyCharm（简单，集成度高）
科学计算，数据分析：canopy（收费，500第三方库）；anaconda（免费）
网络爬虫之规则：request库＋robots协议＋实例