如何使用python timeit模块使用实践

其实平时使用测试应用运行时间的情况 细算一下还真的很少。很久没有做性能优化的工作,不管是cProfile还是timeit模块都已经生疏了很久没有使用,我在以前的文章里面有提到过cPfile的性能测试使用,但是一直没有使用过这个更轻量级的运行时间测量库进行过仔细实践总结,今天就来总结一下。

从最简单的例子开始,比如我们想测试一个列表推导式究竟要比正常写for快多少。

import timeit

foooo = """
sum = []
for i in range(1000):
    sum.append(i)
"""

print timeit.timeit(stmt="[i for i in range(1000)]", number=100000)
print timeit.timeit(stmt=foooo, number=100000)

输出:

3.79257702827

9.0510661602

不难看出,使用列表推导式要比正常使用list追加元素 通过10w次循环会快上近5.3秒左右,速度快上近三倍。

timeit 模块抽象出了;两个可以直接使用的方法,包了一层可以让我们不用关心内部的实现,下面看一下模块里面的代码:

def timeit(stmt="pass", setup="pass", timer=default_timer,
           number=default_number):
    """Convenience function to create Timer object and call timeit method."""
    return Timer(stmt, setup, timer).timeit(number)

def repeat(stmt="pass", setup="pass", timer=default_timer,
           repeat=default_repeat, number=default_number):
    """Convenience function to create Timer object and call repeat method."""
    return Timer(stmt, setup, timer).repeat(repeat, number)

可以看到这两个方法都是对Timer类包了一层这几个参数:

stmt: 这个参数就是statement,可以把要进行计算时间的代码放在里面。他可以直接接受字符串的表达式,也可以接受单个变量,也可以接受函数。

setup:  这个参数可以将stmt的环境传进去。比如各种import和参数什么的。

timer: 这个参数一般使用不到,具体使用可以参看文档。

Timer类下面还有repeat和timeit方法 使用也非常方便就是 timeit.timeit 和  timeit.repeat。

一个就是上面例子的timeit,一个就是repeat 其实repeat就比timeit多了一个执行Timer次数的参数。这个执行次数会以数组的形式返回每次执行的时间 like this

import timeit

foooo = """
sum = []
for i in range(1000):
    sum.append(i)
"""

print timeit.repeat(stmt="[i for i in range(1000)]", repeat=2, number=100000)

输出[4.466734170913696, 4.255025148391724]

我们可以根据此,对所有执行时间取min最小值,平均值,最大值得到我们想要的数据。感觉还是十分方便的。

贴一个稍微进阶的例子,就是用到了一下setup参数的例子,是我在测试protocol buffer python的时候的例子:

# coding: utf-8
import timeit

# 初始化类
x = """
say_hi.ParseFromString(p)
"""

y = """
simplejson.loads(x)
"""

print timeit.timeit(stmt=x, setup="import say_hi_pb2;"
                                  "say_hi = say_hi_pb2.SayHi();"
                                  "say_hi.id = 13423;"
                                  "say_hi.something = ‘axiba‘;"
                                  "say_hi.extra_info = ‘xiba‘;"
                                  "p =say_hi.SerializeToString()", number=1000000)

print timeit.timeit(stmt=y, setup="import simplejson; "
                                  "json={"
                                  "‘id‘: 13423,"
                                  "‘something‘: ‘axiba‘,"
                                  "‘extra_info‘: ‘xiba‘,"
                                  "};"
                                  "x = simplejson.dumps(json)", number=1000000
时间: 2024-10-11 11:27:13

如何使用python timeit模块使用实践的相关文章

Python timeit模块

測试一段代码的执行时间.在python里面有个非常easy的方法,就是使用timeit模块.使用起来超级方便 以下简介一个timeit模块中的函数 主要就是这两个函数: 1,    timeit(stmt='pass', setup='pass', timer=<defaulttimer>, number=1000000) 返回: 返回运行stmt这段代码number遍所用的时间,单位为秒.float型 參数: stmt:要运行的那段代码 setup:运行代码的准备工作,不计入时间,通常是im

python自动化模块之实践一

1.探测Web服务质量方法: python版本3.5.2,pycurl版本:pycurl-7.43.0.win-amd64-py3.5 # -*- coding: utf-8 -*- import os, sys import time import sys import pycurl URL = "http://www.baidu.com" #探测的目标URL c = pycurl.Curl() #创建一个Curl对象 c.setopt(pycurl.URL, URL) #定义请求的

python threading模块使用 以及python多线程操作的实践(使用Queue队列模块)

今天花了近乎一天的时间研究python关于多线程的问题,查看了大量源码 自己也实践了一个生产消费者模型,所以把一天的收获总结一下. 由于GIL(Global Interpreter Lock)锁的关系,纯的python代码处理一般逻辑的确无法活动性能上的极大提升,但是在处理需要等待外部资源返回或多用户的应用程序中,多线程仍然可以作为一个比较好的工具来进行使用. python提供了两个模块thread和threading 来支持python的多线程操作.通俗的讲一般现在我们只使用threading

2 timeit模块,python中数据结构

1.timeit模块:代码事件测量模块 timeit模块可以用来测试一小段Python代码的执行速度. class timeit.Timer(stmt='pass', setup='pass', timer=<timer function>) Timer是测量小段代码执行速度的类. stmt参数是要测试的代码语句(statment): setup参数是运行代码时需要的设置: timer参数是一个定时器函数,与平台有关. timeit.Timer.timeit(number=1000000) T

python之timeit模块

timeit模块: timeit 模块定义了接受两个参数的 Timer 类.两个参数都是字符串. 第一个参数是你要计时的语句或者函数. 传递给 Timer 的第二个参数是为第一个参数语句构建环境的导入语句. 从内部讲, timeit 构建起一个独立的虚拟环境, 手工地执行建立语句,然后手工地编译和执行被计时语句. 一旦有了 Timer 对象,最简单的事就是调用 timeit(),它接受一个参数为每个测试中调用被计时语句的次数,默认为一百万次:返回所耗费的秒数. Timer 对象的另一个主要方法是

Python 使用timeit模块计算时间复杂度时系统报“invalid syntax”错误

最近在看算法相关的文档 在时间复杂度环节 遇到一个实例: 导入timeit模块后,通过Timer定时器计算两种不同处理方法的时间复杂度 错误代码及报错如下图所示: 仔细查阅 发现from__main__import 不是一个连续的变量 而是由 from+__main__+import 三部分组合而成 将红框中的代码改为绿框中的代码之后 代码可以正确执行 正确结果如下: 原文地址:https://www.cnblogs.com/QianyuQian/p/12084433.html

python 正则模块的使用(re)说明

python 正则模块的使用(re)说明 正则表达式使用反斜杆(\)来转义特殊字符,使其可以匹配字符本身,而不是指定其他特殊的含义.这可能会和python字面意义上的字符串转义相冲突,这也许有些令人费解.比如,要匹配一个反斜杆本身,你也许要用'\\\\'来做为正则表达式的字符串,因为正则表达式要是\\,而字符串里,每个反斜杆都要写成\\. 你也可以在字符串前加上 r 这个前缀来避免部分疑惑,因为 r 开头的python字符串是 raw 字符串,所以里面的所有字符都不会被转义,比如r'\n'这个字

Python timeit

timeit模块: 1) timeit.timeit(stmt='pass', setup='pass', timer=<defaulttimer>, number=1000000) 返回:返回执行stmt这段代码number遍所用的时间,单位为秒,float型参数:stmt:要执行的那段代码setup:执行代码的准备工作,初始化代码或构建环境导入语句,不计入时间,一般是import之类的timer:这个在win32下是time.clock(),linux下是time.time(),默认的,不

实战篇一 python常用模块和库介绍

# [email protected] coding: utf-8 [email protected] -- Python 常用模块和库介绍 第一部分:json模块介绍 import json 将一个Python数据结构转换为JSON: dict_ = {1:2, 3:4, "55":"66"} # test json.dumps print type(dict_), dict_ json_str = json.dumps(dict_) print "js