Python调用REST API接口，添加代理并将数据存为json文件

最新推荐文章于 2024-06-24 15:33:33 发布

Smilelulinlin

最新推荐文章于 2024-06-24 15:33:33 发布

阅读量476

点赞数

分类专栏： python 文章标签： python json http

本文链接：https://blog.csdn.net/Smilelulinlin/article/details/120081048

版权

python 专栏收录该内容

15 篇文章 5 订阅

订阅专栏

本文详细介绍了在Python2.7环境下配置REST API接口请求的步骤，包括设置代理以解决网络访问问题。首先确保安装了json、urllib和urllib2库，接着通过urllib2模块创建代理处理器，设定HTTP和HTTPS代理，然后添加请求头信息，最后执行请求并保存响应数据到UTF-8编码的JSON文件中。这个过程对于进行网络爬虫或需要代理访问API的开发者具有参考价值。

摘要由CSDN通过智能技术生成

文章目录

环境配置

运行环境：python2.7
所需要的库：
json urllib urllib2 codecs
注意中文的问题

REST API接口请求

添加代理

    # 添加代理
    proxy = 'user:pwd@ip:端口'
    proxies = {
	        'http': 'http://' + proxy,
	        'https': 'https://' + proxy 
		  }
    handlers = urllib2.ProxyHandler(proxies)
    opener =  urllib2.build_opener(handlers)
    	  }
    # 添加请求头
    header= {
        'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36 QIHU 360SE',
        'Accept': 'application/json',
        'Accept-Encoding': 'gzip, deflate',
        'Accept-Language': 'zh-CN,zh;q=0.9'
    }
    req = urllib2.Request(url=url)
    res = opener.open(req)
    status = res.read()
    # print(json.loads(status)['DS'])
    data = json.loads(status)
    if not os.path.exists(os.path.dirname(outjson)):
        os.makedirs(os.path.dirname(outjson))
    with codecs.open(outjson,'w','utf-8') as fp:
        content = json.dumps(data,ensure_ascii=False)
        fp.write(content)
        fp.close()
    return data