timeit模块:
-
timeit 模块定义了接受两个参数的 Timer 类。两个参数都是字符串。 第一个参数是你要计时的语句或者函数。 传递给 Timer 的第二个参数是为第一个参数语句构建环境的导入语句。 从内部讲, timeit 构建起一个独立的虚拟环境, 手工地执行建立语句,然后手工地编译和执行被计时语句。
-
一旦有了 Timer 对象,最简单的事就是调用 timeit(),它接受一个参数为每个测试中调用被计时语句的次数,默认为一百万次;返回所耗费的秒数。
- Timer 对象的另一个主要方法是 repeat(), 它接受两个可选参数。 第一个参数是重复整个测试的次数,第二个参数是每个测试中调用被计时语句的次数。 两个参数都是可选的,它们的默认值分别是 3 和1000000。 repeat() 方法返回以秒记录的每个测试循环的耗时列表。Python 有一个方便的 min 函数可以把输入的列表返回成最小值,如: min(t.repeat(3, 1000000))
测试一个列表推导式与for循环的时间
1 2 3 4 5 6 7 8 9 10 11 12 13 |
import timeit
foooo = """
sum = []
for i in range(1000):
sum.append(i)
"""
print (timeit.timeit(stmt = "[i for i in range(1000)]" , number = 100000 ))
print (timeit.timeit(stmt = foooo, number = 100000 ))
#res:
#3.2855970134734345
#8.19918414604134
|
使用列表推导式要比正常使用list追加元素 通过10w次循环会快上近5秒左右,速度快上近三倍。
timeit 模块抽象出了;两个可以直接使用的方法,包了一层可以让我们不用关心内部的实现,下面看一下模块里面的代码:
1 2 3 4 5 6 7 8 9 |
def timeit(stmt = "pass" , setup = "pass" , timer = default_timer,
number = default_number):
"""Convenience function to create Timer object and call timeit method."""
return Timer(stmt, setup, timer).timeit(number)
def repeat(stmt = "pass" , setup = "pass" , timer = default_timer,
repeat = default_repeat, number = default_number):
"""Convenience function to create Timer object and call repeat method."""
return Timer(stmt, setup, timer).repeat(repeat, number)
|
可以看到这两个方法都是对Timer类包了一层这几个参数:
stmt: 这个参数就是statement,可以把要进行计算时间的代码放在里面。他可以直接接受字符串的表达式,也可以接受单个变量,也可以接受函数。
setup: 这个参数可以将stmt的环境传进去。比如各种import和参数什么的。
timer: 这个参数一般使用不到,具体使用可以参看文档。
Timer类下面还有repeat和timeit方法 使用也非常方便就是 timeit.timeit 和 timeit.repeat。
一个就是上面例子的timeit,一个就是repeat 其实repeat就比timeit多了一个执行Timer次数的参数。这个执行次数会以数组的形式返回.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 |
import timeit
foooo = """
sum = []
for i in range(1000):
sum.append(i)
"""
print (timeit.repeat(stmt = "[i for i in range(1000)]" , repeat = 2 , number = 100000 ))
print ( min (timeit.repeat(stmt = "[i for i in range(1000)]" , repeat = 2 , number = 100000 )))
#res:
#[3.4540683642063277, 3.300991128415932]
#3.321008256502136
|
我们可以根据此,对所有执行时间取min最小值,平均值,最大值得到我们想要的数据。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 |
# coding: utf-8
import timeit
# 初始化类
x = """
say_hi.ParseFromString(p)
"""
y = """
simplejson.loads(x)
"""
print (timeit.timeit(stmt = x, setup = "import say_hi_pb2;"
"say_hi = say_hi_pb2.SayHi();"
"say_hi.id = 13423;"
"say_hi.something = 'axiba';"
"say_hi.extra_info = 'xiba';"
"p =say_hi.SerializeToString()" , number = 1000000 ))
print (timeit.timeit(stmt = y, setup = "import simplejson; "
"json={"
"'id': 13423,"
"'something': 'axiba',"
"'extra_info': 'xiba',"
"};"
"x = simplejson.dumps(json)" , number = 1000000 ))<br>
|
另外需要补充一点是,如果你想直接 stmt 那里执行函数。可以把函数申明在当前文件中,然后在 stmt = ‘func()’ 执行函数。然后使用 setup = ‘from __main__ import func’ 即可,如果要import 多个需要使用 setup = from __main__ import func; import simplejson'
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 |
def test1():
n = 0
for i in range ( 101 ):
n + = i
return n
def test2():
return sum ( range ( 101 ))
def test3():
return sum (x for x in range ( 101 ))
if __name__ = = '__main__' :
from timeit import Timer
t1 = Timer( "test1()" , "from __main__ import test1" )
t2 = Timer( "test2()" , "from __main__ import test2" )
t3 = Timer( "test3()" , "from __main__ import test3" )
print (t1.timeit( 10000 ))
print (t2.timeit( 10000 ))
print (t3.timeit( 10000 ))
print (t1.repeat( 3 , 10000 ))
print (t2.repeat( 3 , 10000 ))
print (t3.repeat( 3 , 10000 ))
t4 = timeit.timeit(stmt = test1,setup = "from __main__ import test1" ,number = 10000 )
t5 = timeit.timeit(stmt = test2,setup = "from __main__ import test2" ,number = 10000 )
t6 = timeit.timeit(stmt = test3,setup = "from __main__ import test3" ,number = 10000 )
print (t4) #0.05130029071325269
print (t5) #0.015494466822610305
print (t6) #0.05650903115721077
print (timeit.repeat(stmt = test1,setup = "from __main__ import test1" ,number = 10000 )) # [0.05308853391023148, 0.04544335904366706, 0.05969025402337652]
print (timeit.repeat(stmt = test2,setup = "from __main__ import test2" ,number = 10000 )) # [0.012824560678924846, 0.017111019558035345, 0.01429126826003152]
print (timeit.repeat(stmt = test3,setup = "from __main__ import test3" ,number = 10000 )) # [0.07385010910706968, 0.06244617606430164, 0.06273494371932059]
#res:
0.043916918200588385
0.014892355541932578
0.05214884436618059
[ 0.04372713709398021 , 0.04197132052492908 , 0.04255431716177577 ]
[ 0.014356804181737959 , 0.012456603785177323 , 0.012629659578433372 ]
[ 0.0543709217115389 , 0.05334180294099272 , 0.05334931226535494 ]
|