Python字典和列表性能之间的比较


Posted in Python onJune 07, 2021

Python列表和字典

  • 前面我们了解了 “大O表示法” 以及对不同的算法的评估,下面来讨论下 Python 两种内置数据类型有关的各种操作的大O数量级:列表 list 和字典dict。
  • 这是 Python 中两种非常重要的数据类型,后面会用来实现各种数据结构,通过运行试验来估计其各种操作运行时间数量级。

对比 list 和 dict 操作如下:

Python字典和列表性能之间的比较

List列表数据类型常用操作性能:

最常用的是:按索引取值和赋值(v=a[i],a[i]=v),由于列表的随机访问特性,这两个操作执行时间与列表大小无关,均为O(1)。

另一个是列表增长,可以选择 append() 和 “+”:lst.append(v),执行时间是O(1);lst= lst+ [v],执行时间是O(n+k),其中 k 是被加的列表长度,选择哪个方法来操作列表,也决定了程序的性能。

测试 4 种生成 n 个整数列表的方法:

Python字典和列表性能之间的比较

创建一个 Timer 对象,指定需要反复运行的语句和只需要运行一次的"安装语句"。

然后调用这个对象的 timeit 方法,指定反复运行多少次。

# Timer(stmt="pass", setup="pass")   # 这边只介绍两个参数
# stmt:statement的缩写,就是要测试的语句,要执行的对象
# setup:导入被执行的对象(就和run代码前,需要导入包一个道理) 在主程序命名空间中  导入
time1 = Timer("test1()", "from __main__ import test1") 
print("concat:{} seconds".format(time1.timeit(1000)))
time2 = Timer("test2()", "from __main__ import test2")
print("append:{} seconds".format(time2.timeit(1000)))
time3 = Timer("test3()", "from __main__ import test3")
print("comprehension:{} seconds".format(time3.timeit(1000)))
time4 = Timer("test4()", "from __main__ import test4")
print("list range:{} seconds".format(time4.timeit(1000))

结果如下:

Python字典和列表性能之间的比较

可以看到,4种方法运行时间差别挺大的,列表连接(concat)最慢,List range最快,速度相差近 100 倍。append要比 concat 快得多。另外,我们注意到列表推导式速度大约是 append 两倍的样子。

总结列表基本操作的大 O 数量级:

Python字典和列表性能之间的比较

我们注意到 pop 这个操作,pop()是从列表末尾移除元素,时间复杂度为O(1);pop(i)从列表中部移除元素,时间复杂度为O(n)。
原因在于 Python 所选择的实现方法,从中部移除元素的话,要把移除元素后面的元素,全部向前挪位复制一遍,这个看起来有点笨拙
但这种实现方法能够保证列表按索引取值和赋值的操作很快,达到O(1)。这也算是一种对常用和不常用操作的折中方案。

list.pop()的计时试验,通过改变列表的大小来测试两个操作的增长趋势:

import timeit

pop_first = timeit.Timer("x.pop(0)", "from __main__ import x")
pop_end = timeit.Timer("x.pop()", "from __main__ import x")
print("pop(0)          pop()")
y_1 = []
y_2 = []
for i in range(1000000, 10000001, 1000000):
    x = list(range(i))
    p_e = pop_end.timeit(number=1000)
    x = list(range(i))
    p_f = pop_first.timeit(number=1000)
    print("{:.6f}        {:.6f}".format(p_f, p_e))
    y_1.append(p_f)
    y_2.append(p_e)

结果如下:

Python字典和列表性能之间的比较

将试验结果可视化,可以看出增长趋势:pop()是平坦的常数,pop(0)是线性增长的趋势。

Python字典和列表性能之间的比较

字典与列表不同,是根据键值(key)找到数据项,而列表是根据索引(index)。最常用的取值和赋值,其性能均为O(1)。另一个重要操作contains(in)是判断字典中是否存在某个键值(key),这个性能也是O(1)。

Python字典和列表性能之间的比较

做一个性能测试试验来验证 list 中检索一个值,以及 dict 中检索一个值的用时对比,生成包含连续值的 list 和包含连续键值 key 的
dict,用随机数来检验操作符 in 的耗时。

import timeit
import random

y_1 = []
y_2 = []
print("lst_time         dict_time")
for i in range(10000, 1000001, 25000):
    t = timeit.Timer("random.randrange(%d) in x" % i, "from __main__ import random, x")
    x = list(range(i))
    lst_time = t.timeit(number=1000)
    x = {j: 'k' for j in range(i)}
    dict_time = t.timeit(number=1000)
    print("{:.6f}        {:.6f}".format(lst_time, dict_time))
    y_1.append(lst_time)
    y_2.append(dict_time)

结果如下:

Python字典和列表性能之间的比较
Python字典和列表性能之间的比较

  • 可见字典的执行时间与规模无关,是常数。
  • 而列表的执行时间则会随着列表的规模加大而线性上升。

更多 Python 数据类型操作复杂度可以参考官方文档:
https://wiki.python.org/moin/TimeComplexity

到此这篇关于Python字典和列表性能之间的比较的文章就介绍到这了,更多相关Python列表和字典内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Python 相关文章推荐
python抓取百度首页的方法
May 19 Python
python如何在终端里面显示一张图片
Aug 17 Python
python分布式环境下的限流器的示例
Oct 26 Python
python读取与写入csv格式文件的示例代码
Dec 16 Python
简述Python2与Python3的不同点
Jan 21 Python
python中将zip压缩包转为gz.tar的方法
Oct 18 Python
python学习--使用QQ邮箱发送邮件代码实例
Apr 16 Python
解决Django后台ManyToManyField显示成Object的问题
Aug 09 Python
详解Django将秒转换为xx天xx时xx分
Sep 27 Python
使用tensorflow DataSet实现高效加载变长文本输入
Jan 20 Python
python开发一款翻译工具
Oct 10 Python
Python实现信息轰炸工具(再也不怕说不过别人了)
Jun 11 Python
使用pycharm运行flask应用程序的详细教程
只用Python就可以制作的简单词云
python通过函数名调用函数的几种方法总结
Jun 07 #Python
Python爬虫实战之爬取京东商品数据并实实现数据可视化
Python实现的扫码工具居然这么好用!
Jun 07 #Python
忆童年!用Python实现愤怒的小鸟游戏
python单元测试之pytest的使用
Jun 07 #Python
You might like
php调用mysql数据 dbclass类
2011/05/07 PHP
如何利用PHP执行.SQL文件
2013/07/05 PHP
朋友网关于QQ相关的PHP代码(研究QQ的绝佳资料)
2015/01/26 PHP
Codeigniter检测表单post数据的方法
2015/03/21 PHP
ThinkPHP5&5.1框架关联模型分页操作示例
2019/08/03 PHP
Laravel框架Eloquent ORM修改数据操作示例
2019/12/03 PHP
php命令行模式代码实例详解
2021/02/26 PHP
破解Session cookie的方法
2006/07/28 Javascript
JQuery中each()的使用方法说明
2010/08/19 Javascript
用jquery与css打造个性化的单选框和复选框
2010/10/20 Javascript
基于jQuery实现左右div自适应高度完全相同的代码
2012/08/09 Javascript
网页中可关闭的漂浮窗口实现可自行调节
2013/08/20 Javascript
js取消单选按钮选中并判断对象是否为空
2013/11/14 Javascript
js实现同一页面可多次调用的图片幻灯切换效果
2015/02/28 Javascript
jQuery与getJson结合的用法实例
2015/08/07 Javascript
Window.Open打开窗体和if嵌套代码
2016/04/15 Javascript
URL中“#” “?” &“”号的作用浅析
2017/02/04 Javascript
小程序云开发教程如何使用云函数实现点赞功能
2019/05/18 Javascript
微信小程序实现单个卡片左滑显示按钮并防止上下滑动干扰功能
2019/12/06 Javascript
[53:44]DOTA2-DPC中国联赛 正赛 PSG.LGD vs Magma BO3 第一场 1月31日
2021/03/11 DOTA
Python的ORM框架SQLObject入门实例
2014/04/28 Python
Python3爬虫全国地址信息
2019/01/05 Python
WxPython建立批量录入框窗口
2019/02/27 Python
Django实现发送邮件功能
2019/07/18 Python
pytorch中tensor.expand()和tensor.expand_as()函数详解
2019/12/27 Python
PyCharm设置注释字体颜色以及是否倾斜的操作
2020/09/16 Python
波兰运动鞋网上商店:e-Sporting
2018/02/16 全球购物
UML设计模式笔试题
2014/06/07 面试题
应届毕业生应聘自荐信范文
2014/02/26 职场文书
优秀大学生职业生涯规划书
2014/02/27 职场文书
《盘古开天地》教学反思
2014/02/28 职场文书
特此通知格式
2015/04/27 职场文书
社区艾滋病宣传活动总结
2015/05/07 职场文书
2015秋季开学典礼新闻稿
2015/07/17 职场文书
读《推着妈妈去旅行》有感1500字
2019/10/15 职场文书
pytorch 梯度NAN异常值的解决方案
2021/06/05 Python