使用C++扩展Python的功能详解


Posted in Python onJanuary 12, 2018

本文主要研究的是使用C++扩展Python的功能的相关问题,具体如下。

环境

VS2005Python2.5.4Windows7(32位)

简介

长话短说,这里说的扩展Python功能与直接用其它语言写一个动态链接库,然后让Python来调用有点不一样(虽然本质是一样的)。而是指使用Python本身提供的API,使用C++来对Python进行功能性扩展,可以这样理解,使用更高效的语言实现一些算法计算等等需要更高执行效率的核心(或者需要与系统进行密切交互的)模块,然后让Python像调用内建标准库的方式来调用这些模块,听起来是不是很诱人?!在软件技术高速发展的今天,借助几种计算机语言来实现一个系统的例子数不胜数,目的不外乎就是性能和便利的平衡。譬如本文要讨论的使用C++来扩展Python就是Python和C++的一种巧妙的有机结合,好处不言而喻,既可以获得和C++相似的执行性能,又可以利用Python的开发灵活性。由于Python本身是使用C实现的,二者结合起来还是比较容易的。

基本流程

本文不适合这样的读者——对Python完全不了解或者对C\C++完全不了解,道理你们懂的。另外就是Python里面有6种基本数据类型。你需要了解如何在C和Python之间对这些类型进行转化(这不在本文讨论范围,可以参考[1])。

言归正传,感觉前面说得太多了,实际上很简单,因此我决定少说多做。一个C++的Python扩展模块至少应该有导出函数,方法列表和初始化函数三个部分。我们用VS2005这个强大的工具开工!一般来说,你应该建一个Dll工程(至于使用exe来扩展Python可以不可以,暂时还没研究过)。下面按部就班的说明(关键说明在注释部分)。

一、初始化函数

//-------------------------------------------------------------------------
// 函数    : initPyExt
// 功能    : 初始化函数
// 返回值   :PyMODINIT_FUNC
// 附注    : 注意,这个函数的名字不能改动。必须是init+模块名字,
// 我们的模块名字是PyExt,所以函数名是initPyExt。Python在导入
// 我们的PyExt模块时,会找到这个函数,并调用。这个函数实现的
// 功能很简单,通过调用Py_InitModule将模块名字和映射表结合起
// 来,它的意思是说PyExt这个模块使用PyExtMethods这个映射表。
//-------------------------------------------------------------------------
PyMODINIT_FUNCinitPyExt()
{
    Py_InitModule("PyExt",PyExtMethods);
}

二、方法列表

/*
   方法列表,这个是一个C结构数组。把需要扩展的函数都映射到这个表里。
   那么Python就知道你的这个扩展模块支持一些什么方法了。表的第一个字
   段是方法名字,也是通过Python来调用时的名字。第二个字段是导出函数,
   是真正调用的函数,也是C\C++实现的函数。第三个参数是指明Python向
   C\C++函数传递参数的形式。可选的两种方式是METH_VARARGS和
   METH_KEYWORDS,其中METH_VARARGS是参数传递的标准形式,它通
   过Python的元组在Python解释器和C函数之间传递参数,若采用
   METH_KEYWORD方式,则Python解释器和C函数之间将通过Python的字典
   类型在两者之间进行参数传递。第四个字段是这个函数的说明。如果你在
   python里来help这个函数,将显示这个说明。相当于在python里的函数的文档说明。
*/
staticPyMethodDefPyExtMethods[]=
{
    {"Add", Add,METH_VARARGS,"Addtwo number - edit by magictong."},
    {"ExecSystem",ExecSystem,METH_VARARGS,"Execute a shell command - edit bymagictong." },
    {NULL,NULL, 0,NULL}
};

三、导出函数

//-------------------------------------------------------------------------
// 函数    : Add
// 功能    : 这是一个加法函数
// 返回值   :PyObject*
// 参数    : PyObject*self 这个参数我们暂时不用理会
// 参数    : PyObject*args 是一个参数列表,我们需要从它解析出参数
// 附注    :
// 所有的导出函数都具有相同的原型:
// PyObject*method(PyObject* self, PyObject* args);
//PyArg_ParseTuple来完成解析参数任务。它的第一个参数是args,
// 就是我们要转换的参数。第二个是格式符号。"s"代表是个string。
// 从args里提取一个参数就写"s",两个的话就写"s|s",如果是一个
// string,一个int,就写"s|i",有点和printf类似哦。第三个参数就是
// 提取出来的参数放置的真正位置。必须传递这个参数的地址。
//-------------------------------------------------------------------------
staticPyObject*Add(PyObject*self,PyObject*args)
{
    intx = 0 ;
    inty = 0;
    intz = 0;
    if(!PyArg_ParseTuple(args,"i|i", &x, &y))
       returnNULL;
    z=x +y;
    returnPy_BuildValue("i",z);
    /*
      调用完之后我们需要返回结果。这个结果是c的type或者是我们自己定义的类型。
      必须把他转换成PyObject,让python认识。这个用Py_BuildValue来完成。他
      是PyArg_ParseTuple的逆过程。他的第一个参数和PyArg_ParseTuple的第二个
      参数一样,是个格式化符号。第三个参数是我们需要转换的参数。Py_BuildValue
      会把所有的返回只组装成一个tutple给python。
 
      如果对应的C函数没有返回值(即返回值类型为void),则应返回一个全局的None
      对象(Py_None),并将其引用计数增,如下所示:
      Py_INCREF(Py_None);
      returnPy_None;
   */
}

四、再加点功能

intcmd(constchar* arg)
{
    returnsystem(arg);
}
 
staticPyObject*ExecSystem(PyObject*self,PyObject*args)
{
    constchar*command;
    if(!PyArg_ParseTuple(args,"s", &command))
       returnNULL;
    intn =cmd(command);
    returnPy_BuildValue("i",n);
}

编译

开编,编译出来的PyExt.dll文件改名为PyExt.pyd放入Python的C:\Python25\DLLs目录就可以全局使用了,如果你只想某个Python的工程,放在工程的相对路径下面就可以了。

使用

使用C++扩展Python的功能详解

可能的问题

里面的这些PyMODINIT_FUNC,与Python相关的宏和定义在哪里呢?定义下#include<Python.h>就可以了,但是定义了之后提示Python.h找不到还是编译不过怎么办?这说明你没有安装Python或者安装了但是没有把头文件路径引入Path环境变量,或者你把Python的include目录加入工程的附加包含目录(Additional IncludeDirectories),一般是C:\Python25\include这个目录,其中C:\Python25是Python的安装目录,按你机器的实际情况配置)。

如果提示:Error 1 fatal error LNK1104:cannot open file 'python25_d.lib' 类似这样的错误,一般可能是没有安装Python的开发版本,没关系,你使用Release编译一下,如果还不行,就把C:\Python25\libs目录加入工程的附加库目录(Additional LibraryDirectories)。

总结

以上就是本文关于使用C++扩展Python的功能详解的全部内容,希望对大家有所帮助。感兴趣的朋友可以继续参阅本站其他相关专题,如有不足之处,欢迎留言指出。感谢朋友们对本站的支持!

Python 相关文章推荐
python 装饰器功能以及函数参数使用介绍
Jan 27 Python
Python素数检测的方法
May 11 Python
在主机商的共享服务器上部署Django站点的方法
Jul 22 Python
Python 将pdf转成图片的方法
Apr 23 Python
python实现对csv文件的列的内容读取
Jul 04 Python
Python 使用PyQt5 完成选择文件或目录的对话框方法
Jun 27 Python
简单了解Python生成器是什么
Jul 02 Python
解决django model修改添加字段报错的问题
Nov 18 Python
Python3 实现减少可调用对象的参数个数
Dec 20 Python
基于TensorFlow的CNN实现Mnist手写数字识别
Jun 17 Python
Python 解析xml文件的示例
Sep 29 Python
Python读写csv文件流程及异常解决
Oct 20 Python
聊聊Python中的pypy
Jan 12 #Python
Python中实现switch功能实例解析
Jan 11 #Python
Python中getpass模块无回显输入源码解析
Jan 11 #Python
python版微信跳一跳游戏辅助
Jan 11 #Python
微信跳一跳python辅助脚本(总结)
Jan 11 #Python
Python用sndhdr模块识别音频格式详解
Jan 11 #Python
Python用imghdr模块识别图片格式实例解析
Jan 11 #Python
You might like
根据ip调用新浪api获取城市名并转成拼音
2014/03/07 PHP
浅谈PHP Cookie处理函数
2016/06/10 PHP
PHP中in_array函数使用的问题与解决办法
2016/09/11 PHP
php自定义函数实现统计中文字符串长度的方法小结
2017/04/15 PHP
PHP实现将几张照片拼接到一起的合成图片功能【便于整体打印输出】
2017/11/14 PHP
PHP实现Redis单据锁以及防止并发重复写入
2018/04/10 PHP
深入理解 PHP7 中全新的 zval 容器和引用计数机制
2018/10/15 PHP
jQuery+PHP实现图片上传并提交功能
2020/07/27 PHP
extjs DataReader、JsonReader、XmlReader的构造方法
2009/11/07 Javascript
jquery和javascript的区别(常用方法比较)
2013/07/04 Javascript
Javascript Objects详解
2014/09/04 Javascript
java必学必会之static关键字
2015/12/03 Javascript
实例讲解jQuery中对事件的命名空间的运用
2016/05/24 Javascript
jQuery基本选择器之标签名选择器
2016/09/03 Javascript
jQuery 实现ajax传入参数含有特殊字符的方法总结
2016/10/17 Javascript
jquery实现下拉框左右选择功能
2017/02/21 Javascript
vue + socket.io实现一个简易聊天室示例代码
2017/03/06 Javascript
打通前后端构建一个Vue+Express的开发环境
2018/07/17 Javascript
微信小程序使用canvas自适应屏幕画海报并保存图片功能
2019/07/25 Javascript
使用vant的地域控件追加全部选项
2020/11/03 Javascript
vue 在服务器端直接修改请求的接口地址
2020/12/19 Vue.js
[01:01:51]EG vs VG Supermajor小组赛B组 BO3 第二场 6.2
2018/06/03 DOTA
python实现的文件同步服务器实例
2015/06/02 Python
Flask数据库迁移简单介绍
2017/10/24 Python
Python打印输出数组中全部元素
2018/03/13 Python
TensorFlow使用Graph的基本操作的实现
2020/04/22 Python
python中的测试框架
2020/11/13 Python
售后服务科岗位职责范文
2013/11/13 职场文书
家居设计专业个人自荐信范文
2013/11/26 职场文书
研究生求职推荐信范文
2013/11/30 职场文书
工程项目经理任命书
2014/06/05 职场文书
研究生求职自荐书
2014/06/23 职场文书
毕业生就业推荐表自我鉴定
2019/06/20 职场文书
nginx 多个location转发任意请求或访问静态资源文件的实现
2021/03/31 Servers
python glom模块的使用简介
2021/04/13 Python
MySQL优化及索引解析
2022/03/17 MySQL