python 爬虫 <class 'socket.error'>: [Errno 104] Connection reset by peer)

写google 的 URL 爬虫时遇到的错误
高冷的老师说他做的爬虫都在国外!!!! 所以没遇到过这种问题!!!
google了两天~都是歪果仁的尸体

最后解决办法很简单 爬的哪国的网 就用哪国的代理

比如我的google爬虫在www.google.com.hk

用香港的代理最好的!!

tips www.google.co.kr 配合韩国代理更好用

headers = {
    'host': 'www.google.co.kr',
    'method': 'GET',
    'referer': 'https://www.google.com/',
    'user-agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/27.0.1453.93 Safari/537.36'
}
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值