Python和Ruby中each循环引用变量问题(一个隐秘BUG?)


Posted in Python onJune 04, 2014

虽然这个问题我是在 Python 里遇到的,但是用 Ruby 解释起来比较容易一些。在 Ruby 里,遍历一个数组可以有很多种方法,最常用的两种无非是 for 和 each:

arr = ['a', 'b', 'c']arr.each { |e|
  puts e
}
for e in arr
  puts e
end

通常我比较喜欢后者,似乎因为写起来比较好看,不过从效率上来说前者应该会稍微快一点,因为后者实际上是在遍历的过程中对每个元素都调用一个 lambda 函数来做的,虽然一般情况下并不明显,不过设置上下文并调用函数确实是有开销的,特别是在动态语言里面(不考虑 JIT 内联优化的话)。不过这次的问题并不是性能。然而确实跟“ each 对每个元素都会新建一个 scope 而 for 则不是”有关。

看下面一段代码:

arr = ['a', 'b', 'c']
h1 = Hash.new
h2 = Hash.newarr.each { |e|
  h1[e] = lambda { e+'!'}
}
for e in arr
  h2[e] = lambda { e+'!' }
end
h1['a'].call # => ?
h2['a'].call # => ?

两个 call 分别会得到什么?应该已经猜到了吧?分别是 'a!' 和 'c!' ,后者之所以是 'c!' 是因为 for 并没有在循环的每一步都重新创建一个 scope ,因此三个 lambda 的 closure 引用到了同一个变量,而这个变量在最后一次被赋值为 'c' ,所以导致了这样的后果。

问题其实出自我在用 Python 写的一个小程序中的一段,代码类似于这样:

for prop in public_props:
    setattr(proxy, 'get_%s'%prop, lambda: self.get_prop(prop))

其中 proxy 是我提供的一个代理对象,将 self 的一些公开的属性给暴露出去,因为要限制对非 public 的属性的访问,我并不想在这个 proxy 中存放任何到 self 的引用,否则在没有访问权限限制的 Python 里通过类似 proxy._orig_self.some_private_prop 的方式来访问是轻而易举的。所以最后选择了上面那样的做法。

不幸的是,由于像刚才所说的那样,for 并没有每次都单独创建 scope ,因此 closure 全部引用到了同一个变量上,导致所有的属性值取出来都是最后一个属性了。看到这样诡异的 bug ,如果是在 C/C++ 里面,我肯定要怀疑是内存或者指针的问题了。不过想了半天才终于恍然大悟!不过 Python 里面没有 Ruby 那么方便的 each 可以用,lambda 用起来也很鸡肋,所以最后通过定义一个局部的函数来解决了:

def proxy_prop(name):
    setattr(proxy, 'get_%s'%prop, lambda: self.get_prop(name)
for prop in public_props:
    proxy_prop(prop)

最后,还要多嘴一句,对于之前 Ruby 那个例子,如果把 each 和 for 的执行顺序颠倒过来,会得到不同的结果:
arr = ['a', 'b', 'c']
h1 = Hash.new
h2 = Hash.newfor e in arr
  h2[e] = lambda { e+'!' }
end
arr.each { |e|
  h1[e] = lambda { e+'!'}
}
h1['a'].call # => 'c!'
h2['a'].call # => 'c!'

现在两个都是 'c!' 了!这是因为 Ruby 1.8 的实现里面 block 的参数可以对局部变量或者全局变量之类的任何东西进行赋值,而不是通常意义上的一个 lambda 函数的参数那么简单。由于前面的 for 语句在当前作用域创建了一个 e 作为局部变量,因此 each 就直接对这个局部变量进行赋值了,这样,每次引用到的又变成了同一个东西,导致了一个隐秘的 Bug !

值得庆幸的是,block 的这个“特性”在 Ruby 1.9 中已经被去除了,block 的参数只能是正常参数,所以就不再存在这样的问题了。希望 1.9 尽快普及吧!

Python 相关文章推荐
Python实现把回车符\r\n转换成\n
Apr 23 Python
Python 中的with关键字使用详解
Sep 11 Python
python中子类继承父类的__init__方法实例
Dec 15 Python
python之PyMongo使用总结
May 26 Python
Python标准库sched模块使用指南
Jul 06 Python
Django 登陆验证码和中间件的实现
Aug 17 Python
Python中的四种交换数值的方法解析
Nov 18 Python
python实现读取类别频数数据画水平条形图案例
Apr 24 Python
python3:excel操作之读取数据并返回字典 + 写入的案例
Sep 01 Python
python实现学生通讯录管理系统
Feb 25 Python
Django debug为True时,css加载失败的解决方案
Apr 24 Python
OpenCV全景图像拼接的实现示例
Jun 05 Python
python控制台英汉汉英电子词典
Apr 23 #Python
测试、预发布后用python检测网页是否有日常链接
Jun 03 #Python
Python中的CURL PycURL使用例子
Jun 01 #Python
Python实现多线程下载文件的代码实例
Jun 01 #Python
python使用在线API查询IP对应的地理位置信息实例
Jun 01 #Python
pip 错误unused-command-line-argument-hard-error-in-future解决办法
Jun 01 #Python
2款Python内存检测工具介绍和使用方法
Jun 01 #Python
You might like
当海贼王变成JOJO风
2020/03/02 日漫
php 删除一个数组中的某个值.兼容多维数组!
2012/02/18 PHP
PHP统计目录大小的自定义函数分享
2014/11/18 PHP
Javascript学习笔记5 类和对象
2010/01/11 Javascript
jQuery队列控制方法详解queue()/dequeue()/clearQueue()
2010/12/02 Javascript
五段实用的js高级技巧
2011/12/20 Javascript
在jQuery ajax中按钮button和submit的区别分析
2012/10/07 Javascript
js完美实现@提到好友特效(兼容各大浏览器)
2015/03/16 Javascript
完善的jquery处理机制
2016/02/21 Javascript
Angular2中Bootstrap界面库ng-bootstrap详解
2016/10/18 Javascript
基于VUE选择上传图片并页面显示(图片可删除)
2017/05/25 Javascript
node通过npm写一个cli命令行工具
2017/10/12 Javascript
详解基于Vue+Koa的pm2配置
2017/10/24 Javascript
vue 多入口文件搭建 vue多页面搭建的实例讲解
2018/03/12 Javascript
npm 下载指定版本的组件方法
2018/05/17 Javascript
JavaScript继承定义与用法实践分析
2018/05/28 Javascript
vue下拉菜单组件(含搜索)的实现代码
2018/11/25 Javascript
vue计算属性computed、事件、监听器watch的使用讲解
2019/01/21 Javascript
微信小程序中如何计算距离某个节日还有多少天
2019/07/15 Javascript
Python基于递归算法实现的汉诺塔与Fibonacci数列示例
2018/04/18 Python
python基于K-means聚类算法的图像分割
2019/10/30 Python
Flask模板引擎Jinja2使用实例
2020/04/23 Python
python实点云分割k-means(sklearn)详解
2020/05/28 Python
日本非常有名的内衣丝袜品牌:GUNZE
2017/01/06 全球购物
匈牙利最大的健身制造商和销售商:inSPORTline
2018/10/30 全球购物
给老婆的搞笑检讨书
2014/01/12 职场文书
农村党支部先进事迹
2014/01/14 职场文书
生日寿宴答谢词
2014/01/19 职场文书
地质灾害防治方案
2014/05/14 职场文书
田径运动会通讯稿
2014/09/13 职场文书
企业群众路线教育实践活动心得体会
2014/11/03 职场文书
农村党员学习党的群众路线教育实践活动心得体会
2014/11/04 职场文书
我的长征观后感
2015/06/09 职场文书
Redis安装启动及常见数据类型
2021/04/14 Redis
为什么MySQL 删除表数据 磁盘空间还一直被占用
2021/10/16 MySQL
Redis唯一ID生成器的实现
2022/07/07 Redis