python批量发送请求并下载_Python 批量POST下载

本文介绍了如何使用Python的urllib和httplib模块批量发送POST请求并下载响应数据,以从imgloop.com下载图片为例。通过创建多线程实现并发下载,并通过命令行参数指定下载范围。代码中详细解释了HTTP请求的头部设置和HTTP状态码的含义。
摘要由CSDN通过智能技术生成

今天无聊准备从imgloop.com上搜集一些图包,直接通过官方的下载档进行的.

原理比较简单,用urllib和httplib模拟发送POST,然后下载返回的数据.

直接在命令行运行:

python 文件名.py 参数1 参数2

headers是发送头,如果不太明白可以抓包,用firefox里的firebug插件也行.

httplib.HTTPConnection所接收的参数是服务器(这里填写域名,如果要设置端口在后面加上:port)

request方法里设置发送方式(get或者post)和url地址

response.status中是http状态码,等于200时即为发送成功,在wiki上可以查到关于http状态码的信息

argv控制下载的文件名.

比如python download.py 100 200

就是下载100~200的文件,当然,你想要自己能成功使用需要修改里面的url格式和headers

#!/usr/bin/env python

import sys

import httplib,urllib

import threading

class download(threading.Thread):

def __init__(self,number):

threading.Thread.__init__(self,name=str(number))

self.number=str(number)

def run(self):

params=urllib.urlencode({'name':'zipform'})

headers={'Host':'imgloop.com',

'User-Agent&

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值