#Python 爬虫#

#Python 爬虫#

1、借助Chrome 开发者工具分析网页

2、较为重要的几个知识点：
（1）User-Agent:表明我们是一个什么版本的浏览器
（2）Cooklie:需要做一些登录以后才能看到的爬取，就必须学会存储和读取cookie,如果没有，那么网站就会认为你没有登录

3、 Python爬虫需学习的知识

注：decode(‘utf-8’) #将返回内容进行解码

4、获取一个Get请求

补充：如果要注释多行，用快捷键Ctrl+?

5、Post请求是模拟用户网页的登录

6、超时处理
timeout：制定一个时间，防止爬取过程时间太长，超时。
except：是对错误进行检测，当他超时是对他进行检测。


**总结：**今天对于Python爬虫进行深入了解和学习，以上纯属是我个人学习所得，如有不当之处，请各位大佬指点一二，不胜感激。