代理

为什么要使用代理

• 让服务器以为不是同一个客户端在请求

• 防止我们的真实地址被泄露，防止被追究

理解正向代理和反向代理的区别

 正向代理：对于浏览器知道服务器的真实地址，例如VPN

反向代理：浏览器不知道服务器的真实地址，例如nginx

用法： requests.get("http://www.baidu.com", proxies = proxies)

proxies的形式：字典

proxies = { 
    "http": "http://12.34.56.79:9527", 
    "https": "https://12.34.56.79:9527", 
    }

 代理IP的分类

透明代理：

 REMOTE_ADDR = Proxy IP
  HTTP_VIA = Proxy IP
  HTTP_X_FORWARDED_FOR = Your IP

 虽然可以直接“隐藏”你的IP地址，但是还是可以从HTTP_X_FORWARDED_FOR来查到你是谁。

匿名代理：

 REMOTE_ADDR = proxy IP
  HTTP_VIA = proxy IP
  HTTP_X_FORWARDED_FOR = proxy IP

匿名代理比透明代理进步了一点：别人只能知道你用了代理，无法知道你是谁。

高匿代理：

  REMOTE_ADDR = Proxy IP
  HTTP_VIA = not determined
  HTTP_X_FORWARDED_FOR = not determined

高匿代理让别人根本无法发现你是在用代理，所以是最好的选择。

代理ip可以分为http代理，https代理，socket代理等，使用的时候需要根据抓取网站的协议来选择