python使用urllib2发送http请求

原创 2016年05月31日 16:58:31
# -*-coding:utf8-*-
import re
import json
import urllib
import urllib2
from poster.encode import multipart_encode
from poster.streaminghttp import register_openers


# ##
# @param url:请求地址,字符串,http://xxx.xx.com/xx
# @param method: 请求方式,字符串,仅支持GET、POST、PUT、DELETE、HEAD
# @param user_header:请求头,字典,{"key":"value"}
# @param request_body_type:请求体类型,字符串,仅支持form-data、x-www-form-urlencoded、raw格式
# @param request_body_data:请求体,字符串或者字典。
# # 1、如果是form-data、x-www-form-urlencoded格式的,传字典;
# # 2、如果是raw格式的,可传字典或字符串。
# ##
def get_api_response(url, method, user_header, request_body_type, request_body_data):
    try:
        # GET请求
        if re.match(method, "get", re.IGNORECASE):
            request = urllib2.Request(url)
        # POST请求/PUT请求
        elif re.match(method, "post", re.IGNORECASE) or re.match(method, "put", re.IGNORECASE):
            # 处理form-data格式请求体
            if re.match(request_body_type, "form-data", re.IGNORECASE):
                register_openers()
                # headers 包含必须的 Content-Type 和 Content-Length
                # data 是一个生成器对象,返回编码过后的参数
                data, headers = multipart_encode(request_body_data)
                request = urllib2.Request(url, data, headers)
            # 处理x-www-form-urlencoded格式请求体
            elif re.match(request_body_type, "x-www-form-urlencoded", re.IGNORECASE):
                data = urllib.urlencode(request_body_data)
                request = urllib2.Request(url, data)
            # 处理raw格式请求体
            elif re.match(request_body_type, "raw", re.IGNORECASE):
                if type(request_body_data) == str:
                    data = json.JSONDecoder().decode(request_body_data)
                else:
                    data = request_body_data
                if type(data) == list:
                    data = json.JSONEncoder().encode(data)
                else:
                    data = urllib.urlencode(data)
                request = urllib2.Request(url, data)
            if re.match(method, "put", re.IGNORECASE):
                request.get_method = lambda: 'PUT'
        # DELETE请求
        elif re.match(method, "delete", re.IGNORECASE):
            request = urllib2.Request(url)
            request.get_method = lambda: 'DELETE'
        # HEAD请求
        else:
            request = urllib2.Request(url)
            request.get_method = lambda: 'HEAD'
        # 统一添加请求头
        if user_header:
            for keys in user_header:
                request.add_header(keys, user_header[keys])
        response = urllib2.urlopen(request)
        result_data = response.read()
        response_code = response.code
    except urllib2.HTTPError, e:
        result_data = ""
        response_code = e.code
    result = {"code": response_code, "data": result_data}
    return result
版权声明:本文为博主原创文章,未经博主允许不得转载。 举报

相关文章推荐

Python利用urllib/2模拟Http的Post请求调用php

一、应用需求         VSO平台的推广系统已接近尾声,还有最后一个问题就是每个月末对分红进行结账,将平台订单金额产生的分红打到用户的账户上,这种情况肯定要用Linux的定时任务来完成,结合前面...

python的http请求模块urllib+requests

针对开发日益复(sha)杂(bi)的接口设计,一些接口工具的功能逐渐不足以满足小屌们的日常测试了,所以在这里教大家用2个模块来进行http的get、post方式请求。 urllib ...

我是如何成为一名python大咖的?

人生苦短,都说必须python,那么我分享下我是如何从小白成为Python资深开发者的吧。2014年我大学刚毕业..

Python 标准库 urllib2 的使用细节

好久不用爬虫的时候,拿来浏览一下。 转载自 道可道 | Python 标准库 urllib2 的使用细节 Python 标准库中有很多实用的工具类,但是在具体使用时,标准库文档上对使用细节描述的并不清...

《python爬虫》学习笔记:urllib2库的使用

最简单的爬虫代码import urllib2 response=urllib2.urlopen("http://www.baidu.com") print response.read()上面的等价代...

python写爬虫使用urllib2方法

python写爬虫使用urllib2方法 整理了一部分urllib2的使用细节。 1.Proxy 的设置 urllib2 默认会使用环境变量 http_proxy 来设置...

Python 标准库 urllib2 的使用细节

刚好用到,这篇文章写得不错,转过来收藏。    转载自 道可道 | Python 标准库 urllib2 的使用细节 Python 标准库中有很多实用的工具类,但是在具体使用时,标准库文档上...

Python3.7 爬虫(三)使用 Urllib2 与 BeautifulSoup4 爬取网易云音乐歌单

版权声明:本文为 wintersmilesb101 -(个人独立博客– http://wintersmilesb101.online 欢迎访问)博主原创文章,未经博主允许不得转载。 废话在前面的的博客...

Python学习urllib2模块使用

urllib包和urllib2包基于httplib包之上,提供高层次的抽象,用于处理url请求,urllib 和 urllib2 可以更方便地进行 HTTP GET 和 POST 等各种操作。 ...

Python 标准库 urllib2 的使用细节

Python 标准库 urllib2 的使用细节 刚好用到,这篇文章写得不错,转过来收藏。    转载自 道可道 | Python 标准库 urllib2 的使用细节 Pyth...
返回顶部
收藏助手
不良信息举报
您举报文章:深度学习:神经网络中的前向传播和反向传播算法推导
举报原因:
原因补充:

(最多只允许输入30个字)