爬虫小插曲：关于代理参数-proxies那些事

最新推荐文章于 2025-11-12 09:54:28 发布

原创

最新推荐文章于 2025-11-12 09:54:28 发布 · 2.7k 阅读

8 ·

CC 4.0 BY-SA版权

文章标签：

#python #爬虫

代理参数-proxies

定义及分类

	【1】定义 : 代替你原来的IP地址去对接网络的IP地址
	
	【2】作用 : 隐藏自身真实IP,避免被封

普通代理

	【1】获取代理IP网站
	   快代理、全网代理、代理精灵、... ...
	
	【2】参数类型
	   proxies = {
   
    '协议':'协议://IP:端口号' }
	   proxies = {
   
   
	    	'http':'http://IP:端口号',
	    	'https':'https://IP:端口号',
	   }

普通代理 - 示例
使用快代理中的免费IP地址测试是否可用：

	# 使用免费普通代理IP访问测试网站: http://httpbin.org/get
	import requests
	
	url = 'http://httpbin.org/get'
	headers = {
   
   'User-Agent':'Mozilla/5.0'}
	# 定义代理,在代理IP网站中查找免费代理IP
	proxies = {
   
   
	   'http':'http://182.116.239.37:9999',
	   'https':'http