爬虫代理设置之urllib

最新推荐文章于 2025-02-26 11:53:11 发布

chengqiuming

最新推荐文章于 2025-02-26 11:53:11 发布

阅读量1k

点赞数

分类专栏：爬虫文章标签：爬虫代理

本文链接：https://blog.csdn.net/chengqiuming/article/details/86775535

版权

一安装CCProxy软件

1 下载地址：

https://ccproxy.en.softonic.com/

2 下载后文件

ccproxysetup.exe

3 简单设置

二代理设置方法

1 代码

from urllib.error import URLError
from urllib.request import ProxyHandler, build_opener

proxy = '127.0.0.1:808'
# 参数是字典，键名是协议类型，健值是代理
proxy_handler = ProxyHandler({
    'http': 'http://' + proxy,
    'https': 'https://' + proxy
})
# Opener已经设置好代理了
opener = build_opener(proxy_handler)
try:
    response = opener.open('http://httpbin.org/get')
    # 运行结果是一个JSON
    print(response.read().decode('utf-8'))
except URLError as e:
    print(e.reason)

2 结果