深入源码解析Python中的对象与类型


Posted in Python onDecember 11, 2015

对象
对象, 在C语言是如何实现的?

Python中对象分为两类: 定长(int等), 非定长(list/dict等)

所有对象都有一些相同的东西, 源码中定义为PyObject和PyVarObject, 两个定义都有一个共同的头部定义PyObject_HEAD(其实PyVarObject有自己的头部定义PyObject_VAR_HEAD, 但其实际上用的也是PyObject_HEAD).

源码位置: Include/object.h

PyObject_HEAD
Python 内部, 每个对象拥有相同的头部.

定义

/* PyObject_HEAD defines the initial segment of every PyObject. */
#define PyObject_HEAD          \
  _PyObject_HEAD_EXTRA        \
  Py_ssize_t ob_refcnt;        \
  struct _typeobject *ob_type;

说明

1. _PyObject_HEAD_EXTRA
先忽略, 双向链表结构, 后面垃圾回收再说

2. Py_ssize_t ob_refcnt
Py_ssize_t在编译时确定, 整型
ob_refcnt, 引用计数, 跟Python的内存管理机制相关(基于引用计数的垃圾回收)

3. struct _typeobject *ob_type
*ob_type 指向类型对象的指针(指向_typeobject结构体)
决定了这个对象的类型!
PyObject
定义

typedef struct _object {
   PyObject_HEAD
 } PyObject;

说明

 1. 依赖关系
 PyObject -> PyObject_HEAD
结构

深入源码解析Python中的对象与类型

PyVarObject
定义

typedef struct {
  PyObject_VAR_HEAD
} PyVarObject;

#define PyObject_VAR_HEAD        \
 PyObject_HEAD            \
 Py_ssize_t ob_size; /* Number of items in variable part */

说明

 1. 依赖关系
 PyVarObject -> PyObject_VAR_HEAD -> PyObject_HEAD

 2.Py_ssize_t ob_size
 ob_size, 变长对象容纳的元素个数
结构

深入源码解析Python中的对象与类型

代码关系

深入源码解析Python中的对象与类型

几个方法
跟对象相关的方法

#define Py_REFCNT(ob)           (((PyObject*)(ob))->ob_refcnt)
读取引用计数

#define Py_TYPE(ob)             (((PyObject*)(ob))->ob_type)
获取对象类型

#define Py_SIZE(ob)             (((PyVarObject*)(ob))->ob_size)
读取元素个数(len)
跟引用计数相关的方法

Py_INCREF(op)  增加对象引用计数

Py_DECREF(op)  减少对象引用计数, 如果计数位0, 调用_Py_Dealloc

_Py_Dealloc(op) 调用对应类型的 tp_dealloc 方法(每种类型回收行为不一样的, 各种缓存池机制, 后面看)
其他
几个参数涉及

ob_refcnt 引用计数, 与内存管理/垃圾回收相关
ob_type   类型, 涉及Python的类型系统

类型
一个例子

>>> a = 1
>>> a
1

>>> type(a)
<type 'int'>

#等价的两个
>>> type(type(a))
<type 'type'>
>>> type(int)
<type 'type'>

#还是等价的两个
>>> type(type(type(a)))
<type 'type'>
>>> type(type(int))
<type 'type'>

我们反向推导一个int对象是怎么生成的.

1. 首先, 定义一种类型叫PyTypeObject
代码位置 Include/object.h

定义

 

typedef struct _typeobject {

 /* MARK: base, 注意, 是个变长对象*/
 PyObject_VAR_HEAD
 const char *tp_name; /* For printing, in format "<module>.<name>" */ //类型名
 Py_ssize_t tp_basicsize, tp_itemsize; /* For allocation */ // 创建该类型对象时分配的内存空间大小


 // 一堆方法定义, 函数和指针
 /* Methods to implement standard operations */
 printfunc tp_print;
 hashfunc tp_hash;

 /* Method suites for standard classes */
 PyNumberMethods *tp_as_number;  // 数值对象操作
 PySequenceMethods *tp_as_sequence; // 序列对象操作
 PyMappingMethods *tp_as_mapping; // 字典对象操作

 // 一堆属性定义
 ....

} PyTypeObject;

说明

1. PyObject_VAR_HEAD
变长对象

2. const char *tp_name
tp_name, 类型名字符串数组
所有Type都是PyTypeObject的"实例": PyType_Type/PyInt_Type

2. 然后, 用PyTypeObject初始化得到一个对象PyType_Type
代码位置 Objects/typeobject.c

定义

PyTypeObject PyType_Type = {
 PyVarObject_HEAD_INIT(&PyType_Type, 0)
 "type",                   /* tp_name */
 sizeof(PyHeapTypeObject),          /* tp_basicsize */
 sizeof(PyMemberDef),            /* tp_itemsize */
 (destructor)type_dealloc,          /* tp_dealloc */

 // type对象的方法和属性初始化值
 .....

};

说明

1. tp_name
类型名, 这里是"type"

2. PyVarObject_HEAD_INIT(&PyType_Type, 0)
PyVarObject_HEAD_INIT, 这个方法在 Include/object.h中,
等价于
        ob_refcnt = 1
        *ob_type = &PyType_Type
        ob_size = 0

即, PyType_Type的类型是其本身!
结构

第一张图, 箭头表示实例化(google doc用不是很熟找不到对应类型的箭头)

深入源码解析Python中的对象与类型

第二张图, 箭头表示指向

深入源码解析Python中的对象与类型

使用

# 1. int 的 类型 是`type`
>>> type(int)
<type 'type'>

# 2. type 的类型 还是`type`, 对应上面说明第二点
>>> type(type(int))
<type 'type'>

注意: 无论任何时候, ob_type指向的是 PyTypeObject的实例: PyType_Type/PyInt_Type...

3. 再然后, 定义具体的类型, 这里以PyInt_Type为例子
代码位置 Objects/intobject.c

定义

PyTypeObject PyInt_Type = {
 PyVarObject_HEAD_INIT(&PyType_Type, 0)
 "int",
 sizeof(PyIntObject),
 0,

 // int类型的相关方法和属性值
 ....

 (hashfunc)int_hash,             /* tp_hash */

};

说明

1. "int"
PyInt_Type的类型名是int

2.PyVarObject_HEAD_INIT(&PyType_Type, 0)
PyInt_Type的

 

*ob_type = &PyType_Type

结构

深入源码解析Python中的对象与类型

使用

>>> type(1)
<type 'int'>

>>> type(type(1))
<type 'type'>

4. 最后, 生成一个整数对象int
代码位置 Include/intobject.h

定义

typedef struct {
  PyObject_HEAD
  long ob_ival;
} PyIntObject;

结构

深入源码解析Python中的对象与类型

Python 相关文章推荐
python动态性强类型用法实例
May 09 Python
wxPython中listbox用法实例详解
Jun 01 Python
Python使用Pycrypto库进行RSA加密的方法详解
Jun 06 Python
对于Python中RawString的理解介绍
Jul 07 Python
Python中的连接符(+、+=)示例详解
Jan 13 Python
python非递归全排列实现方法
Apr 10 Python
Python3调用微信企业号API发送文本消息代码示例
Nov 10 Python
Python线性拟合实现函数与用法示例
Dec 13 Python
python爬虫获取小区经纬度以及结构化地址
Dec 30 Python
Scrapy框架实现的登录网站操作示例
Feb 06 Python
利用python清除移动硬盘中的临时文件
Oct 28 Python
python中pyplot基础图标函数整理
Nov 10 Python
Python实现各种排序算法的代码示例总结
Dec 11 #Python
Python操作MySQL数据库9个实用实例
Dec 11 #Python
使用Python编写简单的画图板程序的示例教程
Dec 08 #Python
一波神奇的Python语句、函数与方法的使用技巧总结
Dec 08 #Python
Python使用pygame模块编写俄罗斯方块游戏的代码实例
Dec 08 #Python
用Python抢过年的火车票附源码
Dec 07 #Python
Python随手笔记之标准类型内建函数
Dec 02 #Python
You might like
php实现爬取和分析知乎用户数据
2016/01/26 PHP
Gambit vs ForZe BO3 第三场 2.13
2021/03/10 DOTA
JavaScript入门教程(6) Window窗口对象
2009/01/31 Javascript
JQuery里选择超链接的实现代码
2011/05/22 Javascript
js限制文本框输入长度两种限制方式(长度、字节数)
2012/12/19 Javascript
JavaScript实现网页图片等比例缩放实现代码及调用方式
2013/02/25 Javascript
js根据日期判断星座的示例代码
2014/01/23 Javascript
jQuery实现鼠标经过图片预览大图效果
2014/04/10 Javascript
js实现的标题栏新消息闪烁提示效果
2014/06/06 Javascript
Jquery实现地铁线路指示灯提示牌效果的方法
2015/03/02 Javascript
JavaScript匿名函数之模仿块级作用域
2015/12/12 Javascript
微信小程序图片宽100%显示并且不变形
2017/06/21 Javascript
ES6中Array.find()和findIndex()函数的用法详解
2017/09/16 Javascript
vue多种弹框的弹出形式的示例代码
2017/09/18 Javascript
node.js学习笔记之koa框架和简单爬虫练习
2018/12/13 Javascript
微信小程序实现消息框弹出动画
2020/04/18 Javascript
Python操作Mysql实例代码教程在线版(查询手册)
2013/02/18 Python
Python安装lz4-0.10.1遇到的坑
2018/05/20 Python
Python装饰器限制函数运行时间超时则退出执行
2019/04/09 Python
jupyter notebook oepncv 显示一张图像的实现
2020/04/24 Python
python pyecharts 实现一个文件绘制多张图
2020/05/13 Python
Scrapy 配置动态代理IP的实现
2020/09/28 Python
详解使用scrapy进行模拟登陆三种方式
2021/02/21 Python
基于CSS3制作立体效果导航菜单
2016/01/12 HTML / CSS
CSS3的常见transformation图形变化用法小结
2016/05/13 HTML / CSS
HTML5 Geolocation API的正确使用方法
2018/12/04 HTML / CSS
HTML5教程之html 5 本地数据库(Web Sql Database)
2014/04/03 HTML / CSS
美国按摩椅批发网站:Titan Chair
2018/12/27 全球购物
Java提供了哪些企业应用编程接口
2015/02/13 面试题
超市后勤自我鉴定
2014/01/17 职场文书
家庭教育的心得体会
2014/09/01 职场文书
学校食堂管理制度
2015/08/04 职场文书
2015年度学校应急管理工作总结
2015/10/22 职场文书
PHP中strval()函数实例用法
2021/06/07 PHP
idea 在springboot中使用lombok插件的方法
2021/08/02 Java/Android
python可视化分析绘制带趋势线的散点图和边缘直方图
2022/06/25 Python