需求:爬取国外某网站数据,然后向国内服务器提交爬取的数据
有两种解决方式,
1.在requests请求接口提交数据时,挂上代理
// proxies 必须是key-val形式,而且严格来讲http和https要同时拥有
proxies = {
"http": "http://~~",
"https": "http://~~",
}
requests.post(url=url,headers={~~},data=post_data, proxies=proxies))
2. 在开启vpn的插件中添加白名单(添加接口的域名或者ping一下获得ip和端口号),然后重新启动一下vpn.