python学习-反爬第一课

反爬第一课：

在打印html.text的时候总会提示

{'success': False, 'msg': '您操作太频繁,请稍后再访问', 'clientIp': '113.14.1.254'}

需要加header，请求头，用来模拟用户登陆。

至少需要这三个信息，否则都有可能出现问题。

header={
'Cookie':'XXXX',
# 用于告诉服务器我是从哪个页面链接过来的，服务器基此可以获得一些信息用于处理。如果不加入，服务器可能依旧会判断为非法请求
'Referer':'XXXX',
# User-Agent(UA) 服务器能够识别客户使用的操作系统及版本、CPU 类型、浏览器及版本、浏览器渲染引擎、浏览器语言、浏览器插件等。也就是说伪装成浏览器进行访问

'User-Agent':'XXX'}