python笔记系列：探测web服务质量方法：pycurl

最新推荐文章于 2023-12-01 12:39:55 发布
最新推荐文章于 2023-12-01 12:39:55 发布
阅读量331 收藏 1
点赞数
分类专栏： Python 文章标签： python pycurl
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40809549/article/details/79697238
版权
探测web服务质量方法：pycurl
easy_install pycurl #easy_install安装方法
pip install pycurl #pip安装方法
源码安装方法：(要求curl-config包支持，需要源码方式重新安装curl)
wget http://curl.haxx.se/download/curl-7.36.0.tar.gz
tar -zxvf curl-7.36.0.tar.gz
cd curl-7.36.0
./configure
make && make install
export LD_LIBRARY_PATH=/usr/local/lib
wget https://pypi.python.org/packages/source/p/pycurl/pycrul-7.19.3.1.tar.gz --no-check-certificate
tar -zxvf pycrul-7.19.3.1.tar.gz
cd pycrul-7.19.3.1
python setup.py install --curl-config=/usr/local/bin/curl-config

校验安装结果：
import pycurl
pycurl.version

pycurl.Curl()类实现创建一个libcurl包的Curl句柄对象，无参数。Curl几个常用方法：
close() 对应libcurl包中的curl_easy_cleanup方法 无参数
perform() 对应libcurl包中的curl_easy_perform方法 无参数
setopt(option,value) 对应libcurl包中的curl_easy_setopt方法，参数option通过libcurl的常量指定
getinfo(option) 对应libcurl包中的curl_easy_getinfo方法

实践：实现探测web服务质量（服务可用性、响应速度）
# -*- coding: utf-8 -*-
import os,sys
import time
import sys
import pycurl

URL="http://www.novowater.com.cn"
c = pycurl.Curl()
c.setopt(pycurl.URL, URL)
#连接超时时间,5秒
c.setopt(pycurl.CONNECTTIMEOUT, 5)

#下载超时时间,5秒
c.setopt(pycurl.TIMEOUT, 5)
c.setopt(pycurl.FORBID_REUSE, 1)
c.setopt(pycurl.MAXREDIRS, 1)
c.setopt(pycurl.NOPROGRESS, 1)
c.setopt(pycurl.DNS_CACHE_TIMEOUT,30)
indexfile = open(os.path.dirname(os.path.realpath(__file__))+"/content.txt", "wb")
c.setopt(pycurl.WRITEHEADER, indexfile)
c.setopt(pycurl.WRITEDATA, indexfile)
try:
c.perform()
except Exception,e:
print "connecion error:"+str(e)
indexfile.close()
c.close()
sys.exit()

NAMELOOKUP_TIME = c.getinfo(c.NAMELOOKUP_TIME)
CONNECT_TIME = c.getinfo(c.CONNECT_TIME)
PRETRANSFER_TIME = c.getinfo(c.PRETRANSFER_TIME)
STARTTRANSFER_TIME = c.getinfo(c.STARTTRANSFER_TIME)
TOTAL_TIME = c.getinfo(c.TOTAL_TIME)
HTTP_CODE = c.getinfo(c.HTTP_CODE)
SIZE_DOWNLOAD = c.getinfo(c.SIZE_DOWNLOAD)
HEADER_SIZE = c.getinfo(c.HEADER_SIZE)
SPEED_DOWNLOAD=c.getinfo(c.SPEED_DOWNLOAD)

print "HTTP状态码：%s" %(HTTP_CODE)
print "DNS解析时间：%.2f ms"%(NAMELOOKUP_TIME*1000)
print "建立连接时间：%.2f ms" %(CONNECT_TIME*1000)
print "准备传输时间：%.2f ms" %(PRETRANSFER_TIME*1000)
print "传输开始时间：%.2f ms" %(STARTTRANSFER_TIME*1000)
print "传输结束总时间：%.2f ms" %(TOTAL_TIME*1000)

print "下载数据包大小：%d bytes/s" %(SIZE_DOWNLOAD)
print "HTTP头部大小：%d byte" %(HEADER_SIZE)
print "平均下载速度：%d bytes/s" %(SPEED_DOWNLOAD)

indexfile.close()
c.close()

探测web服务质量方法：pycurl
easy_install pycurl #easy_install安装方法
pip install pycurl #pip安装方法
源码安装方法：(要求curl-config包支持，需要源码方式重新安装curl)
wget http://curl.haxx.se/download/curl-7.36.0.tar.gz
tar -zxvf curl-7.36.0.tar.gz
cd curl-7.36.0
./configure
make && make install
export LD_LIBRARY_PATH=/usr/local/lib
wget https://pypi.python.org/packages/source/p/pycurl/pycrul-7.19.3.1.tar.gz --no-check-certificate
tar -zxvf pycrul-7.19.3.1.tar.gz
cd pycrul-7.19.3.1
python setup.py install --curl-config=/usr/local/bin/curl-config

校验安装结果：
import pycurl
pycurl.version

pycurl.Curl()类实现创建一个libcurl包的Curl句柄对象，无参数。Curl几个常用方法：
close() 对应libcurl包中的curl_easy_cleanup方法 无参数
perform() 对应libcurl包中的curl_easy_perform方法 无参数
setopt(option,value) 对应libcurl包中的curl_easy_setopt方法，参数option通过libcurl的常量指定
getinfo(option) 对应libcurl包中的curl_easy_getinfo方法

实践：实现探测web服务质量（服务可用性、响应速度）
# -*- coding: utf-8 -*-
import os,sys
import time
import sys
import pycurl

URL="http://www.novowater.com.cn"
c = pycurl.Curl()
c.setopt(pycurl.URL, URL)
#连接超时时间,5秒
c.setopt(pycurl.CONNECTTIMEOUT, 5)

#下载超时时间,5秒
c.setopt(pycurl.TIMEOUT, 5)
c.setopt(pycurl.FORBID_REUSE, 1)
c.setopt(pycurl.MAXREDIRS, 1)
c.setopt(pycurl.NOPROGRESS, 1)
c.setopt(pycurl.DNS_CACHE_TIMEOUT,30)
indexfile = open(os.path.dirname(os.path.realpath(__file__))+"/content.txt", "wb")
c.setopt(pycurl.WRITEHEADER, indexfile)
c.setopt(pycurl.WRITEDATA, indexfile)
try:
c.perform()
except Exception,e:
print "connecion error:"+str(e)
indexfile.close()
c.close()
sys.exit()

NAMELOOKUP_TIME = c.getinfo(c.NAMELOOKUP_TIME)
CONNECT_TIME = c.getinfo(c.CONNECT_TIME)
PRETRANSFER_TIME = c.getinfo(c.PRETRANSFER_TIME)
STARTTRANSFER_TIME = c.getinfo(c.STARTTRANSFER_TIME)
TOTAL_TIME = c.getinfo(c.TOTAL_TIME)
HTTP_CODE = c.getinfo(c.HTTP_CODE)
SIZE_DOWNLOAD = c.getinfo(c.SIZE_DOWNLOAD)
HEADER_SIZE = c.getinfo(c.HEADER_SIZE)
SPEED_DOWNLOAD=c.getinfo(c.SPEED_DOWNLOAD)

print "HTTP状态码：%s" %(HTTP_CODE)
print "DNS解析时间：%.2f ms"%(NAMELOOKUP_TIME*1000)
print "建立连接时间：%.2f ms" %(CONNECT_TIME*1000)
print "准备传输时间：%.2f ms" %(PRETRANSFER_TIME*1000)
print "传输开始时间：%.2f ms" %(STARTTRANSFER_TIME*1000)
print "传输结束总时间：%.2f ms" %(TOTAL_TIME*1000)

print "下载数据包大小：%d bytes/s" %(SIZE_DOWNLOAD)
print "HTTP头部大小：%d byte" %(HEADER_SIZE)
print "平均下载速度：%d bytes/s" %(SPEED_DOWNLOAD)

indexfile.close()
c.close()

川中胡子
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
如何用Python获取接口响应时间?elapsed方法来帮你
2201_75554489的博客
02-10 816
如果是少量、正常的测试数据，可以直接通过手动方式模拟出来，如果是大量的用户数据的模拟，可以借助测试工具来构建。测试工具：工具是辅助测试的好帮手，针对将要做的测试类型，可选择合适的工具让我们的测试事半功倍。8）重启tomcat：执行tomcat/bin下的./shutup.sh停止，再输入./startup.sh重新启动。requests发请求时，接口的响应时间，也是我们需要关注的一个点，如果响应时间太长，显然是不合理的。参考链接：https://mbd.baidu.com/ma/s/kdHO1KQA。
python怎样执行curl命令_如何使用python执行curl命令
weixin_30995917的博客
12-23 1万+
如何使用python执行curl命令我想在python中执行curl命令。通常，我只需要在终端输入命令并按回车键。 但是，我不知道它在python中是如何工作的。该命令如下所示：curl -d @request.json --header "Content-Type: application/json" https://www.googleapis.com/qpxExpress/v1/trips/...
Python使用cURL库下载文件
最新发布
weixin_73725158的博客
12-01 575
例如，您可以添加进度条以显示下载进度，或者在程序中添加异常处理以更好地处理错误情况。总之，cURL库提供了许多功能，可以帮助您在Python中实现各种下载任务。选项传递给cURL，告诉它将文件保存在指定的输出路径中。如果返回代码为0，表示下载成功。cURL库是一个功能强大的工具，可以用于在Python中下载文件。请注意，在实际使用中，您需要替换示例URL和输出路径为您自己的值。在示例用法中，我们定义了一个URL和一个输出路径，然后调用。是要下载的文件的URL地址，是下载后文件的保存路径。
使用Python获取网站加载时间
weixin_45253622的博客
03-25 3945
使用Python获取网站加载时间 import time from urllib.request import urlopen def load_time(url): try: if("http" or "https") in url: open_url = urlopen(url) #打开url else: open_url = urlopen("https://" + url) st
python执行curl_使用 Python 执行 Curl 命令(demo)
weixin_39930144的博客
11-20 310
示例 1Curl命令：curl --request POST --url https://open.workec.com/auth/accesstoken --header 'cache-control: no-cache' --header 'content-type: application/json' --data '{ "appId": appId, "appSecret": "appSe...
python 函数学习之sys.argv[1]
热门推荐
bro_two的博客
08-15 2万+
一、sys 模块 sys是Python的一个「标准库」，也就是官方出的「模块」，是「System」的简写，封装了一些系统的信息和接口。 官方的文档参考：https://docs.python.org/2/library/sys.html 中文版文档参考： http://xukaizijian.blog.163.com/blog/static/17043311920111162542862...
pycurl:PycURL - libcurl 的 Python 接口
08-04
PycURL——cURL 库的 Python 接口 PycURL 是多协议文件传输库的 Python 接口。 与 Python 模块类似，PycURL 可用于从 Python 程序中获取由 URL 标识的对象。 除了简单的获取之外，PycURL 还公开了 libcurl 的大部分...
Python基于PycURL实现POST的方法
12-25
本文实例讲述了Python基于PycURL实现POST的方法。分享给大家供大家参考。具体如下： import pycurl import StringIO import urllib url = "http://www.google.com/" post_data_dic = {"name":"value"} crl = pycurl...
Python安装pycurl失败的解决方法
12-25
Centos安装pycurl centos 安装pycurl yum install python-devel curl-devel pip3 install pycurl Mac(老版本)安装pycurl 解决MacOS升级后出现xcrun: error: invalid active developer path, missing xcrun的问题 ...
Python基于PycURL自动处理cookie的方法
12-25
本文实例讲述了Python基于PycURL自动处理cookie的方法。分享给大家供大家参考。具体如下： import pycurl import StringIO url = "http://www.google.com/" crl = pycurl.Curl() crl.setopt(pycurl.VERBOSE,1) crl....
python 获取网页响应时间
qq_34783484的博客
07-18 1465
import requests r = requests.get("http://www.baidu.com") # 获取微妙 print(r.elapsed.microseconds) # 获取秒 print(r.elapsed.total_seconds())
python获取网页响应时间
weixin_41787887的博客
09-12 6613
""" 描述：获取网页的响应时间r.elapsed.total_seconds （计算的是从发送请求到服务端响应回来这段时间） """ import requests r = requests.get("http://www.cnblogs.com/yoyoketang/") print(r.elapsed) print(r.elapsed.total_seconds()) print(r.el...
2021-09-29 python中curl的使用和curl的语法
Amoor的博客
09-29 7029
本文主要写curl的用法 安装的话根据正常的系统提供的方法安装，ubuntu就是apt install，centos就是yum install 这里演示在windows下的Pycharm演示 执行命令的内置方法 第一种是用os的popen方法，不仅可以获取结果，还可以用readlines或者read方法 储存结果，在 linux中效果比较好，在windows中因为编码的问题无法显示，如果大家有办法解决，记得给我 留言哦 import os xx=os.popen('curl www.baidu.com').
python访问网站响应时间_使用Python获取DNS解析时间和响应时间
weixin_39605191的博客
12-22 325
PycURL或任何其他python pakcage是否提供有关以下信息：>查找>连接时间我想获得与此cURL命令相同的信息(无需使用子过程调用该命令)：命令curl -s -w '\nLookup time:\t%{time_namelookup}\nConnect time:\t%{time_connect}\nPreXfer time:\t%{time_pretransfer}\n...
测试-前端网页加载时间测试的几种方法
chrisyoungest的博客
08-20 5376
jemter chrome开发者模式 python+selenium+js 先通过python+selenium，模拟用户操作，录制脚本 再添加；js = 'return window.performance.timing' timing = driver.execute_script(js) DNS查询耗时 ：domainLookupEnd - domainLookupStart TCP链接耗时 ：connectEnd - connectStart SS...
Curl转Python代码 (无需依赖Postman)
qq_18453581的博客
01-06 1696
浏览器请求复制为curl转Python requests代码,简单适配,亲测可用
python批量测试网站加载时间_使用python测试网页的解析时间，连接时间以及下载时间...
weixin_39942335的博客
11-23 241
#!/usr/bin/python#-*- coding:utf-8 -*-import pycurlimport osc=pycurl.Curl()indexfile=open(os.path.dirname(os.path.realpath(__file__))+"/content.txt","wb")c.setopt(c.URL,"www.bailitop.com")c.setopt(c.V...
Python爬虫模块：Pycurl的安装与高效使用简介
安装完成后，可以通过Python环境检查PycURL的版本信息，导入pycurl模块并调用`version`属性查看： ```python import pycurl pycurl.version ``` PycURL的使用主要包括创建Curl对象、CurlMulti对象和CurlShare对象...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值