一波神奇的Python语句、函数与方法的使用技巧总结


Posted in Python onDecember 08, 2015

显示有限的接口到外部
当发布python第三方package时,并不希望代码中所有的函数或者class可以被外部import,在__init__.py中添加__all__属性,该list中填写可以import的类或者函数名, 可以起到限制的import的作用, 防止外部import其他函数或者类。

#!/usr/bin/env python
# -*- coding: utf-8 -*-
from base import APIBase
from client import Client
from decorator import interface, export, stream
from server import Server
from storage import Storage
from util import (LogFormatter, disable_logging_to_stderr,
            enable_logging_to_kids, info)
__all__ = ['APIBase', 'Client', 'LogFormatter', 'Server',
      'Storage', 'disable_logging_to_stderr', 'enable_logging_to_kids',
      'export', 'info', 'interface', 'stream']

with的魔力
with语句需要支持上下文管理协议的对象, 上下文管理协议包含__enter__和__exit__两个方法。 with语句建立运行时上下文需要通过这两个方法执行进入和退出操作。

其中上下文表达式是跟在with之后的表达式, 该表达式返回一个上下文管理对象。

# 常见with使用场景
with open("test.txt", "r") as my_file: # 注意, 是__enter__()方法的返回值赋值给了my_file,
  for line in my_file:
    print line

知道具体原理,我们可以自定义支持上下文管理协议的类,类中实现__enter__和__exit__方法。

#!/usr/bin/env python
# -*- coding: utf-8 -*-
class MyWith(object):
  def __init__(self):
    print "__init__ method"
  def __enter__(self):
    print "__enter__ method"
    return self # 返回对象给as后的变量
  def __exit__(self, exc_type, exc_value, exc_traceback):
    print "__exit__ method"
    if exc_traceback is None:
      print "Exited without Exception"
      return True
    else:
      print "Exited with Exception"
      return False
def test_with():
  with MyWith() as my_with:
    print "running my_with"
  print "------分割线-----"
  with MyWith() as my_with:
    print "running before Exception"
    raise Exception
    print "running after Exception"
if __name__ == '__main__':
  test_with()

执行结果如下:

__init__ method
__enter__ method
running my_with
__exit__ method
Exited without Exception
------分割线-----
__init__ method
__enter__ method
running before Exception
__exit__ method
Exited with Exception
Traceback (most recent call last):
 File "bin/python", line 34, in <module>
  exec(compile(__file__f.read(), __file__, "exec"))
 File "test_with.py", line 33, in <module>
  test_with()
 File "test_with.py", line 28, in test_with
  raise Exception
Exception

证明了会先执行__enter__方法, 然后调用with内的逻辑, 最后执行__exit__做退出处理, 并且, 即使出现异常也能正常退出

filter的用法
相对filter而言, map和reduce使用的会更频繁一些, filter正如其名字, 按照某种规则过滤掉一些元素。

#!/usr/bin/env python
# -*- coding: utf-8 -*-
lst = [1, 2, 3, 4, 5, 6]
# 所有奇数都会返回True, 偶数会返回False被过滤掉
print filter(lambda x: x % 2 != 0, lst)
#输出结果
[1, 3, 5]

一行作判断
当条件满足时, 返回的为等号后面的变量, 否则返回else后语句。

lst = [1, 2, 3]
new_lst = lst[0] if lst is not None else None
print new_lst
# 打印结果
1

装饰器之单例
使用装饰器实现简单的单例模式

# 单例装饰器
def singleton(cls):
  instances = dict() # 初始为空
  def _singleton(*args, **kwargs):
    if cls not in instances: #如果不存在, 则创建并放入字典
      instances[cls] = cls(*args, **kwargs)
    return instances[cls]
  return _singleton
@singleton
class Test(object):
  pass
if __name__ == '__main__':
  t1 = Test()
  t2 = Test()
  # 两者具有相同的地址
  print t1, t2

staticmethod装饰器
类中两种常用的装饰, 首先区分一下他们:

普通成员函数, 其中第一个隐式参数为对象

  • classmethod装饰器, 类方法(给人感觉非常类似于OC中的类方法), 其中第一个隐式参数为类
  • staticmethod装饰器, 没有任何隐式参数. python中的静态方法类似与C++中的静态方法
#!/usr/bin/env python

# -*- coding: utf-8 -*-
class A(object):
  # 普通成员函数
  def foo(self, x):
    print "executing foo(%s, %s)" % (self, x)
  @classmethod  # 使用classmethod进行装饰
  def class_foo(cls, x):
    print "executing class_foo(%s, %s)" % (cls, x)
  @staticmethod # 使用staticmethod进行装饰
  def static_foo(x):
    print "executing static_foo(%s)" % x
def test_three_method():
  obj = A()
  # 直接调用噗通的成员方法
  obj.foo("para") # 此处obj对象作为成员函数的隐式参数, 就是self
  obj.class_foo("para") # 此处类作为隐式参数被传入, 就是cls
  A.class_foo("para") #更直接的类方法调用
  obj.static_foo("para") # 静态方法并没有任何隐式参数, 但是要通过对象或者类进行调用
  A.static_foo("para")
if __name__ == '__main__':
  test_three_method()
  
# 函数输出
executing foo(<__main__.A object at 0x100ba4e10>, para)
executing class_foo(<class '__main__.A'>, para)
executing class_foo(<class '__main__.A'>, para)
executing static_foo(para)
executing static_foo(para)

property装饰器
定义私有类属性
将property与装饰器结合实现属性私有化(更简单安全的实现get和set方法)。

#python内建函数
property(fget=None, fset=None, fdel=None, doc=None)

fget是获取属性的值的函数,fset是设置属性值的函数,fdel是删除属性的函数,doc是一个字符串(像注释一样)。从实现来看,这些参数都是可选的。

property有三个方法getter(), setter()和delete() 来指定fget, fset和fdel。 这表示以下这行:

class Student(object):
  @property #相当于property.getter(score) 或者property(score)
  def score(self):
    return self._score
  @score.setter #相当于score = property.setter(score)
  def score(self, value):
    if not isinstance(value, int):
      raise ValueError('score must be an integer!')
    if value < 0 or value > 100:
      raise ValueError('score must between 0 ~ 100!')
    self._score = value

iter魔法
通过yield和__iter__的结合,我们可以把一个对象变成可迭代的
通过__str__的重写, 可以直接通过想要的形式打印对象

#!/usr/bin/env python
# -*- coding: utf-8 -*-
class TestIter(object):
  def __init__(self):
    self.lst = [1, 2, 3, 4, 5]
  def read(self):
    for ele in xrange(len(self.lst)):
      yield ele
  def __iter__(self):
    return self.read()
  def __str__(self):
    return ','.join(map(str, self.lst))
  
  __repr__ = __str__
def test_iter():
  obj = TestIter()
  for num in obj:
    print num
  print obj
if __name__ == '__main__':
  test_iter()

神奇partial
partial使用上很像C++中仿函数(函数对象)。

在stackoverflow给出了类似与partial的运行方式:

def partial(func, *part_args):
  def wrapper(*extra_args):
    args = list(part_args)
    args.extend(extra_args)
    return func(*args)
  return wrapper

利用用闭包的特性绑定预先绑定一些函数参数,返回一个可调用的变量, 直到真正的调用执行:

#!/usr/bin/env python
# -*- coding: utf-8 -*-
from functools import partial
def sum(a, b):
  return a + b
def test_partial():
  fun = partial(sum, 2)  # 事先绑定一个参数, fun成为一个只需要一个参数的可调用变量
  print fun(3) # 实现执行的即是sum(2, 3)
if __name__ == '__main__':
  test_partial()
  
# 执行结果
5

神秘eval
eval我理解为一种内嵌的python解释器(这种解释可能会有偏差), 会解释字符串为对应的代码并执行, 并且将执行结果返回。

看一下下面这个例子:

#!/usr/bin/env python
# -*- coding: utf-8 -*-
def test_first():
  return 3
def test_second(num):
  return num
action = { # 可以看做是一个sandbox
    "para": 5,
    "test_first" : test_first,
    "test_second": test_second
    }
def test_eavl(): 
  condition = "para == 5 and test_second(test_first) > 5"
  res = eval(condition, action) # 解释condition并根据action对应的动作执行
  print res
if __name__ == '_

exec
exec在Python中会忽略返回值, 总是返回None, eval会返回执行代码或语句的返回值
exec和eval在执行代码时, 除了返回值其他行为都相同
在传入字符串时, 会使用compile(source, '<string>', mode)编译字节码。 mode的取值为exec和eval

#!/usr/bin/env python
# -*- coding: utf-8 -*-
def test_first():
  print "hello"
def test_second():
  test_first()
  print "second"
def test_third():
  print "third"
action = {
    "test_second": test_second,
    "test_third": test_third
    }
def test_exec():
  exec "test_second" in action
if __name__ == '__main__':
  test_exec() # 无法看到执行结果

getattr
getattr(object, name[, default])返回对象的命名属性,属性名必须是字符串。如果字符串是对象的属性名之一,结果就是该属性的值。例如, getattr(x, ‘foobar') 等价于 x.foobar。 如果属性名不存在,如果有默认值则返回默认值,否则触发 AttributeError 。

# 使用范例
class TestGetAttr(object):
  test = "test attribute"
  def say(self):
    print "test method"
def test_getattr():
  my_test = TestGetAttr()
  try:
    print getattr(my_test, "test")
  except AttributeError:
    print "Attribute Error!"
  try:
    getattr(my_test, "say")()
  except AttributeError: # 没有该属性, 且没有指定返回值的情况下
    print "Method Error!"
if __name__ == '__main__':
  test_getattr()
  
# 输出结果
test attribute
test method

命令行处理

def process_command_line(argv):
  """
  Return a 2-tuple: (settings object, args list).
  `argv` is a list of arguments, or `None` for ``sys.argv[1:]``.
  """
  if argv is None:
    argv = sys.argv[1:]
  # initialize the parser object:
  parser = optparse.OptionParser(
    formatter=optparse.TitledHelpFormatter(width=78),
    add_help_option=None)
  # define options here:
  parser.add_option(   # customized description; put --help last
    '-h', '--help', action='help',
    help='Show this help message and exit.')
  settings, args = parser.parse_args(argv)
  # check number of arguments, verify values, etc.:
  if args:
    parser.error('program takes no command-line arguments; '
           '"%s" ignored.' % (args,))
  # further process settings & args if necessary
  return settings, args
def main(argv=None):
  settings, args = process_command_line(argv)
  # application code here, like:
  # run(settings, args)
  return 0    # success
if __name__ == '__main__':
  status = main()
  sys.exit(status)

读写csv文件

# 从csv中读取文件, 基本和传统文件读取类似
import csv
with open('data.csv', 'rb') as f:
  reader = csv.reader(f)
  for row in reader:
    print row
# 向csv文件写入
import csv
with open( 'data.csv', 'wb') as f:
  writer = csv.writer(f)
  writer.writerow(['name', 'address', 'age']) # 单行写入
  data = [
      ( 'xiaoming ','china','10'),
      ( 'Lily', 'USA', '12')]
  writer.writerows(data) # 多行写入
各种时间形式转换
只发一张网上的图, 然后查文档就好了, 这个是记不住的

一波神奇的Python语句、函数与方法的使用技巧总结

字符串格式化
一个非常好用, 很多人又不知道的功能:

>>> name = "andrew"
>>> "my name is {name}".format(name=name)
'my name is andrew'
Python 相关文章推荐
python选择排序算法实例总结
Jul 01 Python
python调用xlsxwriter创建xlsx的方法
May 03 Python
python实现自动发送报警监控邮件
Jun 21 Python
使用pandas实现csv/excel sheet互相转换的方法
Dec 10 Python
Python中的asyncio代码详解
Jun 10 Python
简单了解python的内存管理机制
Jul 08 Python
Flask框架路由和视图用法实例分析
Nov 07 Python
Python绘图实现显示中文
Dec 04 Python
python清空命令行方式
Jan 13 Python
Django认证系统user对象实现过程解析
Mar 02 Python
详解基于python的图像Gabor变换及特征提取
Oct 26 Python
教你用python实现12306余票查询
Jun 30 Python
Python使用pygame模块编写俄罗斯方块游戏的代码实例
Dec 08 #Python
用Python抢过年的火车票附源码
Dec 07 #Python
Python随手笔记之标准类型内建函数
Dec 02 #Python
python抓取网页中图片并保存到本地
Dec 01 #Python
利用Python学习RabbitMQ消息队列
Nov 30 #Python
MySQL中表的复制以及大型数据表的备份教程
Nov 25 #Python
python基础知识小结之集合
Nov 25 #Python
You might like
用PHP实现多级树型菜单
2006/10/09 PHP
PHP中10个不常见却非常有用的函数
2010/03/21 PHP
php mysql 判断update之后是否更新了的方法
2012/01/10 PHP
shell脚本作为保证PHP脚本不挂掉的守护进程实例分享
2013/07/15 PHP
PHP const定义常量及global定义全局常量实例解析
2020/05/28 PHP
javascript 控制弹出窗口
2007/04/10 Javascript
改善用户体验的五款jQuery插件分享
2011/05/22 Javascript
利用js实现禁止复制文本信息
2015/06/03 Javascript
JavaScript实现自动对页面上敏感词进行屏蔽的方法
2015/07/27 Javascript
jquery+CSS3模拟Path2.0动画菜单效果代码
2015/08/31 Javascript
详解JavaScript数组的操作大全
2015/10/19 Javascript
js与jQuery实现checkbox复选框全选/全不选的方法
2016/01/05 Javascript
JS显示日历和天气的方法
2016/03/01 Javascript
js中 计算两个日期间的工作日的简单实例
2016/08/08 Javascript
vue自定义全局共用函数详解
2018/09/18 Javascript
使用react context 实现vue插槽slot功能
2019/07/18 Javascript
JQuery绑定事件四种实现方法解析
2020/12/02 jQuery
[07:37]DOTA2-DPC中国联赛2月2日Recap集锦
2021/03/11 DOTA
Python实现计算两个时间之间相差天数的方法
2017/05/10 Python
浅谈Pandas中map, applymap and apply的区别
2018/04/10 Python
Pycharm 创建 Django admin 用户名和密码的实例
2018/05/30 Python
python验证码识别教程之利用投影法、连通域法分割图片
2018/06/04 Python
python用plt画图时,cmp设置方法
2018/12/13 Python
Python通过for循环理解迭代器和生成器实例详解
2019/02/16 Python
详解python解压压缩包的五种方法
2019/07/05 Python
python 并发编程 多路复用IO模型详解
2019/08/20 Python
Python爬虫:Request Payload和Form Data的简单区别说明
2020/04/30 Python
Python 利用Entrez库筛选下载PubMed文献摘要的示例
2020/11/24 Python
css图标制作教程制作云图标
2014/01/19 HTML / CSS
5分钟实现Canvas鼠标跟随动画背景
2019/11/18 HTML / CSS
社团成立邀请函
2014/01/08 职场文书
个人作风剖析材料
2014/02/02 职场文书
《满井游记》教学反思
2014/02/26 职场文书
献爱心标语
2014/06/21 职场文书
python和Appium的移动端多设备自动化测试框架
2022/04/26 Python
windows server2008 开启端口的实现方法
2022/06/25 Servers