python urllib2计时

Question

我想收集与Web请求的每个阶段需要多长时间相关的统计信息。 httplib提供：

 def run(self): conn = httplib.HTTPConnection('www.example.com') start = time.time() conn.request('GET', '/') request_time = time.time() resp = conn.getresponse() response_time = time.time() conn.close() transfer_time = time.time() self.custom_timers['request sent'] = request_time - start self.custom_timers['response received'] = response_time - start self.custom_timers['content transferred'] = transfer_time - start assert (resp.status == 200), 'Bad Response: HTTP %s' % resp.status 

这些统计数据是否来自urllib2等更高级别的界面？ 是否有提供此类统计数据的高级图书馆？

Answer 1

正如在相关问题中提到的，现在执行此操作的一个好方法是使用请求库。 您可以使用它来衡量请求延迟，但我不确定您是否可以测量内容传输时间。 您可以通过将HEAD请求与GET请求进行比较来实现。

Answer 2

time.time不是最可靠和最精确的。 您可以在python中使用timeIt模块进行分析。 http://docs.python.org/library/timeit.html这是一个使用timeit的代码片段

    statmnt = 'print "Replace print with the snippet you want to profile"'
    setup = 'print "Replace this line with some snippet specific imports"' 
    n = 1 #Number of times you want the timeit module to execute the statmnt
    t = timeit.Timer(statmnt, setup)
    qTime = t.timeit(n)

在您的情况下，您将为请求，响应和内容提供创建三个timeit对象。 有关模块时间的更多信息，请参阅文档