探测web服务质量方法--pycurl

pycurl安装

sudo pip install pycurl

模块常用方法说明

close()方法，对应libcurl包中的curl_easy_cleanup方法，无参数，实现关闭、回收curl对象

perform()方法，对应libcurl包中的curl_easy_perform方法，无参数，实现curl对象请求提交

setopt(option, value)方法，对应libcurl包中的curl_easy_setopt方法，参数option是通过libcurl

的常量来指定的，参数value的值会依赖option，可以是一个字符串、整数、长整数、文件对象

列表或者函数。

 

示例：

 1 #!/usr/bin/env python
 2 #coding=utf-8
 3 import pycurl
 4 import os,sys,time
 5 def getInfo(URL):
 6     """
 7     :param URL:用户输入需要检测的URL地址
 8     info 字典主要用于映射dic字典
 9     dic字典主要存下curl结果
10     :return:没return，直接print，函数可以改写，可以用于定时检测多个域名，增加一个需要检测的url列表即可
11     """
12     c = pycurl.Curl()
13     c.setopt(pycurl.URL,URL) #定义请求的URL常量
14     c.setopt(pycurl.CONNECTTIMEOUT,5) #请求等待时间最多5秒
15     c.setopt(pycurl.TIMEOUT,5)   #定义请求超时时间（服务器没回应）
16     c.setopt(pycurl.NOPROGRESS,1) #屏蔽下载进度条
17     c.setopt(pycurl.FORBID_REUSE,1) #交互完成后强制断开连接，不重用
18     c.setopt(pycurl.MAXREDIRS,1)  #指定HTTP重定向的最大数为1
19     c.setopt(pycurl.DNS_CACHE_TIMEOUT,30) #设置DNS信息保存时间为30秒
20     c.setopt(pycurl.USERAGENT,"Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.116 Safari/537.36 OPR/40.0.2308.81 (Edition Baidu)")
21     dic = {}
22     info ={'NAMELOOKUP_TIME':'DNS解析时间','CONNECT_TIME':'建立连接时间','PRETRANSFER_TIME':'建立到准备传输所消耗的时间','STARTTRANSFER_TIME':'建立连接到传输开始消耗的时间','TOTAL_TIME':'传输总时间',
23            'HTTP_CODE':'HTTP状态码','SIZE_DOWNLOAD':'下载数据包大小','HEADER_SIZE':'HTTP头部大小','SPEED_DOWNLOAD':'平均下载速度'}
24     with open(os.path.dirname(os.path.realpath(__file__))+"/content.txt","wb") as indexfile:
25         c.setopt(pycurl.WRITEHEADER,indexfile)   #将返回的HTTP HEADER定向到indexfile文件对象
26         c.setopt(pycurl.WRITEDATA,indexfile)     #将返回的HTML内容定向到indexfile文件对象
27         try:
28             c.perform()
29         except Exception,e:
30             print "Connection error:" +str(e)
31             c.close()
32             sys.exit()
33         dic['NAMELOOKUP_TIME'] = '%.2f ms' % (c.getinfo(c.NAMELOOKUP_TIME)*1000)     #获取DNS解析时间
34         dic['CONNECT_TIME'] = '%.2f ms' % (c.getinfo(c.CONNECT_TIME)*1000)          #获取建立连接时间
35         dic['PRETRANSFER_TIME'] = '%.2f ms' % (c.getinfo(c.PRETRANSFER_TIME)*1000)  #获取从建立到准备传输所消耗的时间
36         dic['STARTTRANSFER_TIME'] = '%.2f ms' % (c.getinfo(c.STARTTRANSFER_TIME)*1000)  #获取从建立连接到传输开始消耗的时间
37         dic['TOTAL_TIME'] = '%.2f ms' % (c.getinfo(c.TOTAL_TIME)*1000)              #获取传输总时间
38         dic['HTTP_CODE'] = c.getinfo(c.HTTP_CODE)                #获取HTTP状态码
39         dic['SIZE_DOWNLOAD'] = '%d bytes/s' % (c.getinfo(c.SIZE_DOWNLOAD))        #获取下载数据包大小
40         dic['HEADER_SIZE'] = '%d bytes/s' % (c.getinfo(c.HEADER_SIZE))            #获取HTTP头部大小
41         dic['SPEED_DOWNLOAD'] = '%d bytes/s' % (c.getinfo(c.SPEED_DOWNLOAD))      #获取平均下载速度
42     for key in info:
43         print info[key],':',dic[key]
44 def main():
45     while True:
46         URL = raw_input("请输入一个URL地址(Q for exit)：")
47         if URL.lower() == 'q':
48             sys.exit()
49         else:
50             getInfo(URL)
51 if __name__ == '__main__':
52     main()

 

posted @ 2018-01-13 16:42  飞奔的小水牛  阅读(109)  评论(0)    收藏  举报