Python内置数据类型list各方法的性能测试过程解析


Posted in Python onJanuary 07, 2020

这篇文章主要介绍了Python内置数据类型list各方法的性能测试过程解析,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下

测试环境

本文所涉及的代码均在MacOS系统与CentOS7下测试,使用的Python版本为3.6.8。

测试模块

测试用的模块是Python内置的timeit模块:

timeit模块可以用来测试一小段Python代码的执行速度。

Timer类

class timeit.Timer(stmt='pass', setup='pass', timer=<timer function>)

Timer是测量小段代码执行速度的类。

stmt参数是要测试的代码语句(statment);

setup参数是运行代码时需要的设置;

timer参数是一个定时器函数,与平台有关。

Timer类的timeit方法

timeit.Timer.timeit(number=1000000)

Timer类中测试语句执行速度的对象方法。number参数是测试代码时的测试次数,默认为1000000次。方法返回执行代码的平均耗时,一个float类型的秒数。

列表内置方法的性能测试

我们知道,生成一个列表可以使用列表生成式或者append、insert、extend这些方法,现在我们来看一下这些方法的执行效率:

from timeit import Timer


def test_list():
  lst = list(range(1000))

def test_generation():
  lst = [i for i in range(1000)]


def test_append():
  lst = []
  for i in range(1000):
    lst.append(i)

def test_add():
  lst = []
  for i in range(1000):
    lst += [i]

# 在列表的头部insert
def test_insert_zero():
  lst = []
  for i in range(1000):
    lst.insert(0,i)

# 在列表的尾部insert
def test_insert_end():
  lst = []
  for i in range(1000):
    lst.insert(-1,i)

def test_extend():
  lst = []
  lst.extend(list(range(1000)))


t1 = Timer("test_list()","from __main__ import test_list")
print(f"test_list takes {t1.timeit(number=1000)} seconds")

t2 = Timer("test_generation()","from __main__ import test_generation")
print(f"test_generation takes {t2.timeit(number=1000)} seconds")

t3 = Timer("test_append()","from __main__ import test_append")
print(f"test_append takes {t3.timeit(number=1000)} seconds")

t4 = Timer("test_add()","from __main__ import test_add")
print(f"test_add takes {t4.timeit(number=1000)} seconds")

t5 = Timer("test_insert_zero()","from __main__ import test_insert_zero")
print(f"test_insert_zero takes {t5.timeit(number=1000)} seconds")

t6 = Timer("test_insert_end()","from __main__ import test_insert_end")
print(f"test_insert_end takes {t6.timeit(number=1000)} seconds")

t7 = Timer("test_extend()","from __main__ import test_extend")
print(f"test_extend takes {t7.timeit(number=1000)} seconds")

我们先看看在MacOS系统下,执行上面这段代码的结果:

"""
test_list takes 0.012904746999993222 seconds
test_generation takes 0.03530399600003875 seconds
test_append takes 0.0865129750000051 seconds
test_add takes 0.08066114099983679 seconds
test_insert_zero takes 0.30594958500023495 seconds
test_insert_end takes 0.1522782449992519 seconds
test_extend takes 0.017534753999825625 seconds
"""

我们可以看到:直接使用list方法强转的效率最高,其次是使用列表生成式,而append与直接加的方式紧随其后并且二者的效率相当;insert方法的执行效率最低——并且从头插入的效率要低于从尾部插入的效率!最后我们将强转的列表使用extend方法放入到新的列表中的过程效率并没有减少多少。

然后试试在Linux系统下的执行结果:

Python内置数据类型list各方法的性能测试过程解析

列表pop方法的性能测试

pop可以从第0各位置删除元素,也可以从最后位置删除元素(默认删除最后面的元素),现在我们来测试一下两种从不同位置删除元素的性能对比:

from timeit import Timer

def test_pop_zero():
  lst = list(range(2000))
  for i in range(2000):
    lst.pop(0)


def test_pop_end():
  lst = list(range(2000))
  for i in range(2000):
    lst.pop()
t1 = Timer("test_pop_zero()","from __main__ import test_pop_zero")
print(f"test_pop_zero takes {t1.timeit(number=1000)} seconds")

t2 = Timer("test_pop_end()","from __main__ import test_pop_end")
print(f"test_pop_end takes {t2.timeit(number=1000)} seconds")

在MacOS下程序的执行结果为:

test_pop_zero takes 0.5015365449999081 seconds

test_pop_end takes 0.22170215499954793 seconds

然后我们来试试Linux系统中的执行结果:

Python内置数据类型list各方法的性能测试过程解析

可以看到:从列表的尾部删除元素的效率要比从头部删除的效率高很多!

关于列表insert方法的一个小坑

如果想使用insert方法生成一个列表[0,1,2,3,4,5]的话(当然使用insert方法效率会低很多,建议使用其他的方法)会有一个这样的问题,在此记录一下:

def test_insert():
  lst = []
  for i in range(6):
    lst.insert(-1,i)
    print(lst)

test_insert()

结果竟然是这样的——第一个元素竟然一直在最后!

[0]
[1, 0]
[1, 2, 0]
[1, 2, 3, 0]
[1, 2, 3, 4, 0]
[1, 2, 3, 4, 5, 0]

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
总结Python编程中三条常用的技巧
May 11 Python
python中的内置函数max()和min()及mas()函数的高级用法
Mar 29 Python
用Python3创建httpServer的简单方法
Jun 04 Python
python+Splinter实现12306抢票功能
Sep 25 Python
基于python实现高速视频传输程序
May 05 Python
python适合人工智能的理由和优势
Jun 28 Python
python 绘制拟合曲线并加指定点标识的实现
Jul 10 Python
Python 使用元类type创建类对象常见应用详解
Oct 17 Python
pytorch程序异常后删除占用的显存操作
Jan 13 Python
Python3 filecmp模块测试比较文件原理解析
Mar 23 Python
解决Python发送Http请求时,中文乱码的问题
Apr 30 Python
Python requests HTTP验证登录实现流程
Nov 05 Python
python模拟实现斗地主发牌
Jan 07 #Python
python全局变量引用与修改过程解析
Jan 07 #Python
python__new__内置静态方法使用解析
Jan 07 #Python
Python常用模块sys,os,time,random功能与用法实例分析
Jan 07 #Python
python单例设计模式实现解析
Jan 07 #Python
Python字典生成式、集合生成式、生成器用法实例分析
Jan 07 #Python
linux环境下安装python虚拟环境及注意事项
Jan 07 #Python
You might like
PHP句法规则详解 入门学习
2011/11/09 PHP
Session服务器配置指南与使用经验的深入解析
2013/06/17 PHP
CodeIgniter中使用cookie的三种方式详解
2014/07/18 PHP
Codeigniter控制器controller继承问题实例分析
2016/01/19 PHP
PHP自定义错误用法示例
2016/09/28 PHP
动态创建script标签实现跨域资源访问的方法介绍
2014/02/28 Javascript
简述JavaScript的正则表达式中test()方法的使用
2015/06/16 Javascript
深入理解jQuery之防止冒泡事件
2016/05/24 Javascript
一个超简单的jQuery回调函数例子(分享)
2016/08/08 Javascript
jquery实现input框获取焦点的简单实例
2017/01/26 Javascript
Bootstrap jquery.twbsPagination.js动态页码分页实例代码
2017/02/20 Javascript
基于JavaScript实现微信抢红包功能
2017/07/20 Javascript
Vue2.0基于vue-cli+webpack父子组件通信(实例讲解)
2017/09/14 Javascript
angularJs中ng-model-options设置数据同步的方法
2018/09/30 Javascript
vue2之简易的pc端短信验证码的问题及处理方法
2019/06/03 Javascript
微信小程序sessionid不一致问题解决
2019/08/30 Javascript
vue 的 solt 子组件过滤过程解析
2019/09/07 Javascript
element-ui 远程搜索组件el-select在项目中组件化的实现代码
2019/12/04 Javascript
[51:20]完美世界DOTA2联赛PWL S2 Magma vs PXG 第一场 11.28
2020/12/01 DOTA
python根据经纬度计算距离示例
2014/02/16 Python
Python中的Classes和Metaclasses详解
2015/04/02 Python
Python中列表和元组的相关语句和方法讲解
2015/08/20 Python
Python设置默认编码为utf8的方法
2016/07/01 Python
利用Python实现颜色色值转换的小工具
2016/10/27 Python
Python排序算法之选择排序定义与用法示例
2018/04/29 Python
Python后台管理员管理前台会员信息的讲解
2019/01/28 Python
详解python使用turtle库来画一朵花
2019/03/21 Python
Django实现从数据库中获取到的数据转换为dict
2020/03/27 Python
django中嵌套的try-except实例
2020/05/21 Python
安装pyinstaller遇到的各种问题(小结)
2020/11/20 Python
追悼会上的答谢词
2014/01/10 职场文书
个人批评与自我批评发言稿
2014/09/28 职场文书
公司合并协议书范本
2014/09/30 职场文书
毕业论文答辩开场白和答辩技巧
2015/05/27 职场文书
婚宴父母致辞
2015/07/27 职场文书
基于PyTorch实现一个简单的CNN图像分类器
2021/05/29 Python