[root@localhost ~]# cat pycurl_module.py
#!/usr/local/python3/bin/python3
#coding: utf-8
import os,sys
import time
import pycurl
URL = "www.baidu.com"
c = pycurl.Curl() #创建一个curl对象
c.setopt(pycurl.URL,URL) #指定请求的URL
c.setopt(pycurl.CONNECTTIMEOUT,5) #连接的等待时间,0表示不等待
c.setopt(pycurl.TIMEOUT,5) #请求超时时间
c.setopt(pycurl.NOPROGRESS,1) #是否屏蔽下载进度条,非0则屏蔽
c.setopt(pycurl.FORBID_REUSE,1) #完成交互后强制断开连接,不重用
c.setopt(pycurl.MAXREDIRS,1) #制定HTTP重定向的最大数
c.setopt(pycurl.DNS_CACHE_TIMEOUT,30) #设置保存DNS信息的时间,默认120s
indexfile = open(os.path.dirname(os.path.realpath(__file__))+"/content.txt","wb") #创建一个文件对象,以“wb”方式打开,存储返回的http头部及页面内容
c.setopt(pycurl.WRITEHEADER,indexfile) #将返回的HTTP HEADER定向到indexfile文件对象
c.setopt(pycurl.WRITEDATA,indexfile) #将返回的HTML内容定向到indexfile文件对象
try:
c.perform() #提交curl请求
except Exception as e:
print("connection error:"+str(e))
indexfile.close()
c.close()
sys.exit()
NAMELOOKUP_TIME = c.getinfo(c.NAMELOOKUP_TIME) #获取DNS解析时间
CONNECT_TIME = c.getinfo(c.CONNECT_TIME) #获取建立连接时间
PRETRANSFER_TIME = c.getinfo(c.PRETRANSFER_TIME) #获取从建立连接到准备传输所消耗的时间
STARTTRANSFER_TIME = c.getinfo(c.STARTTRANSFER_TIME) #获取从建立连接到传输开始消耗的时间
TOTAL_TIME = c.getinfo(c.TOTAL_TIME) #获取传输总时间
HTTP_CODE = c.getinfo(c.HTTP_CODE) #获取HTTP状态码
SIZE_DOWNLOAD = c.getinfo(c.SIZE_DOWNLOAD) #获取下载数据包大小
HEADER_SIZE = c.getinfo(c.HEADER_SIZE) #获取HTTP头部大小
SPEED_DOWNLOAD = c.getinfo(c.SPEED_DOWNLOAD) #获取平均下载速度
print("状态码: %s" %(HTTP_CODE))
print("dns解析时间: %.2f ms" %(NAMELOOKUP_TIME*1000))
print("建立连接时间: %.2f ms" %(CONNECT_TIME*1000))
print("准备传输时间: %.2f ms" %(PRETRANSFER_TIME*1000))
print("传输开始时间: %.2f ms" %(STARTTRANSFER_TIME*1000))
print("传输结束总时间: %.2f ms" %(TOTAL_TIME*1000))
print("下载数据包大小: %d bytes" %(SIZE_DOWNLOAD))
print("HTTP头部大小: %d bytes" %(HEADER_SIZE))
print("平均下载速度: %d bytes/s" %(SPEED_DOWNLOAD))
indexfile.close() #关闭文件
c.close() #关闭curl对象
转载于:https://blog.51cto.com/13740724/2327850