浅要分析Python程序与C程序的结合使用


Posted in Python onApril 07, 2015

Python 是一种用于快速开发软件的编程语言,它的语法比较简单,易于掌握,但存在执行速度慢的问题,并且在处理某些问题时存在不足,如对计算机硬件系统的访问,对媒体文件的访问等。而作为软件开发的传统编程语言 C 语言,却能在这些问题上很好地弥补 Python 语言的不足。因此,本文通过实例研究如何在 Python 程序中整合既有的 C 语言模块,包括用 C 语言编写的源程序和动态链接库等,从而充分发挥 Python 语言和 C 语言各自的优势。
概览

背景知识介绍
Python 语言的特点

Python 作为一门程序开发语言,被越来越多地运用到快速程序开发。Python 是一种解释型的,互动的,面向对象的编程语言,它包含了模块化的操作,异常处理,动态资料形态,以及类型的使用。它的语法表达优美易读,具有很多优秀的脚本语言的特点:解释的,面向对象的,内建的高级数据结构,支持模块和包,支持多种平台,可扩展。而且它还支持交互式方式运行,图形方式运行。它拥有众多的编程界面支持各种操作系统平台以及众多的各类函数库,利用 C 和 C++ 可以对它进行扩充。
C 语言的特点

C 语言作为最受人们欢迎的语言之一,有广泛的发展基础。简洁紧凑、灵活方便,功能强大是其特点。另外,C 语言是一门中级语言。它把高级语言的基本结构和语句与低级语言的实用性结合起来。由于可以直接访问物理地址,可以方便的对硬件进行操作。因此,很多的系统软件都是由 C 语言编写。
Python 语言与 C 语言的交互

为了节省软件开发成本,软件开发人员希望能够缩短的软件的开发时间,希望能够在短时间内开发出稳定的产品。Python 功能强大,简单易用,能够快速开发应用软件。但是由于 Python 自身执行速度的局限性,对性能要求比较高的模块需要使用效率更高的程序语言进行开发,例如 C 语言,系统的其他模块运用 Python 进行快速开发,最后将 C 语言开发的模块与 Python 开发的模块进行整合。在此背景下,基于 Python 语言与 C 语言的各自特点,用 C 语言来扩展现有的 Python 程序,显得很有意义。本文首先介绍几种常用的整合 Python 程序与 C 语言程序的方法,最后给出相应的实例。
利用 ctypes 模块整合 Python 程序和 C 程序
ctypes 模块

ctypes 是 Python 的一个标准模块,它包含在 Python2.3 及以上的版本里。ctypes 是一个 Python 的高级外部函数接口,它使得 Python 程序可以调用 C 语言编译的静态链接库和动态链接库。运用 ctypes 模块,能够在 Python 源程序中创建,访问和操作简单的或复杂的 C 语言数据类型。最为重要的是 ctypes 模块能够在多个平台上工作,包括 Windows,Windows CE,Mac OS X,Linux,Solaris,FreeBSD,OpenBSD。

接下来通过几个简单的例子来看一下 ctypes 模块如何整合 Python 程序和 C 程序。
源代码层面上的整合

利用 Python 本身提供的 ctypes 模块可以使 Python 语言和 C 语言在源代码层面上进行整合。本节介绍了如何通过使用 ctypes 库,在 Python 程序中可以定义类似 C 语言的变量。

下表列出了 ctypes 变量类型,C 语言变量类型和 Python 语言变量类型之间的关系:
表 1. ctypes,c 语言和 Python 语言变量类型关系

浅要分析Python程序与C程序的结合使用

表 1 中的第一列是在 ctypes 库中定义的变量类型,第二列是 C 语言定义的变量类型,第三列是 Python 语言在不使用 ctypes 时定义的变量类型。

举例:
清单 1. ctypes 简单使用

>>> from ctypes import *        # 导入 ctypes 库中所有模块
 >>> i = c_int(45)            # 定义一个 int 型变量,值为 45 
 >>> i.value                # 打印变量的值
 45 
 >>> i.value = 56             # 改变该变量的值为 56 
 >>> i.value                # 打印变量的新值
 56

从下面的例子可以更明显地看出 ctypes 里的变量类型和 C 语言变量类型的相似性:
清单 2. ctypes 使用 C 语言变量

>>> p = create_string_buffer(10)   # 定义一个可变字符串变量,长度为 10 
 >>> p.raw                 # 初始值是全 0,即 C 语言中的字符串结束符' \0 '
'\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00'
 >>> p.value = "Student"         # 字符串赋值
 >>> p.raw                 # 后三个字符仍是' \0 '
'Student\x00\x00\x00'
 >>> p.value = "Big"           # 再次赋值
 >>> p.raw                  # 只有前三个字符被修改,第四个字符被修改为' \0 '
'Big\x00ent\x00\x00\x00'

下面例子说明了指针操作:
清单 3. ctypes 使用 C 语言指针

>>> i = c_int(999)                 # 定义 int 类型变量 i,值为 999 
 >>> pi = pointer(i)                # 定义指针,指向变量 i 
 >>> pi.contents                   # 打印指针所指的内容
 c_long(999) 
 >>> pi.contents = c_long(1000)          # 通过指针改变变量 i 的值
 >>> pi.contents                   # 打印指针所指的内容
 c_long(1000)

下面例子说明了结构和数组的操作:
清单 4. ctypes 使用 C 语言数组和结构体

>>> class POINT(Structure):         # 定义一个结构,内含两个成员变量 x,y,均为 int 型
 ...   _fields_ = [("x", c_int), 
 ...         ("y", c_int)] 
 ... 
 >>> point = POINT(2,5)           # 定义一个 POINT 类型的变量,初始值为 x=2, y=5 
 >>> print point.x, point.y           # 打印变量
 2 5 
 >>> point = POINT(y=5)              # 重新定义一个 POINT 类型变量,x 取默认值
 >>> print point.x, point.y           # 打印变量
 0 5 
 >>> POINT_ARRAY = POINT * 3          # 定义 POINT_ARRAY 为 POINT 的数组类型
 # 定义一个 POINT 数组,内含三个 POINT 变量
 >>> pa = POINT_ARRAY(POINT(7, 7), POINT(8, 8), POINT(9, 9)) 
 >>> for p in pa: print p.x, p.y        # 打印 POINT 数组中每个成员的值
 ... 
 7 7 
 8 8 
 9 9

Python 访问 C 语言 dll

通过 ctypes 模块,Python 程序可以访问 C 语言编译的 dll,本节通过一个简单的例子,Python 程序 helloworld.py 中调用 some.dll 中的 helloworld 函数,来介绍 Python 程序如何调用 windows 平台上的 dll。

    导入动态链接库
    清单 5. ctypes 导入 dll

from ctypes import windll # 首先导入 ctypes 模块的 windll 子模块
 somelibc = windll.LoadLibrary(some.dll) # 使用 windll 模块的 LoadLibrary 导入动态链接库

    访问动态链接库中的函数
    清单 6. ctypes 使用 dll 中的函数

     

somelibc. helloworld() # 这样就可以得到 some.dll 的 helloworld 的返回值。

    整个 helloworld.py 是这样的:
    清单 7. Python hellpworld 代码

from ctypes import windll 

   def callc(): 
   # load the some.dll 
   somelibc = windll.LoadLibrary(some.dll) 
   print somelibc. helloworld() 
   if __name__== “__main__”: 
   callc()

    在命令行运行 helloworld.py,在 console 上可以看到 some.dll 中 helloworld 的输出。
    清单 8. Python hellpworld Windows command console 运行输出

C:\>python C:\python\test\helloworld.py 
   Hello World! Just a simple test.

Python 调用 C 语言 so

通过 ctypes 模块,Python 程序也可以访问 C 语言编译的 so 文件。与 Python 调用 C 的 dll 的方法基本相同,本节通过一个简单的例子,Python 程序 helloworld.py 中调用 some.so 中的 helloworld 函数,来介绍 Python 程序如何调用 linux 平台上的 so。

    导入动态链接库
    清单 9. ctypes 导入 so

from ctypes import cdll   
   # 首先导入 ctypes 模块的 cdll 子模块,注意 linux 平台上使用 cdll 的,而不是 windll。
   somelibc = cdll.LoadLibrary(“./some.so”)
   # 使用 cdll 模块的 LoadLibrary 导入动态链接库

    访问动态链接库中的函数
    清单 10. ctypes 使用 so 中的函数

somelibc. helloworld() # 使用方法与 windows 平台上是一样的。

    整个 helloworld.py 是这样的:
    清单 11. Python helloworld 代码

from ctypes import cdll 

   def callc(): 
   # load the some.so 
   somelibc = cdll.LoadLibrary(some.so) 
   print somelibc. helloworld() 
   if __name__== “__main__”: 
   callc()

    在命令行运行 helloworld.py,在 linux 标准输出上可以看到 some.so 中 helloworld 的输出。
    清单 12. Python hellpworld Linux shell 运行输出

[root@linux-790t] python ./helloworld.py 
   Hello World! Just a simple test.

Python 程序和 C 程序整合实例

以下我们举例用 Python 来实现一个小工具,用来实现 hash 算法,查看文件的校验和(MD5,CRC,SHA1 等等)。通过查看文件的校验和,可以知道文件在传输过程中是否被破坏或篡改。

Hash,一般翻译做“散列”,也有直接音译为"哈希"的,就是把任意长度的输入(又叫做预映射,pre-image),通过散列算法,变换成固定长度的输出,该输出就是散列值。这种转换是一种压缩映射,也就是,散列值的空间通常远小于输入的空间,不同的输入可能会散列成相同的输出,而不可能从散列值来唯一的确定输入值。简单的说就是一种将任意长度的消息压缩到某一固定长度的消息摘要的函数。

由于相对 C 语言来说,Python 的运行效率较低,因此我们的 Python 小工具利用一个已有的 C 语言的动态链接库 (hashtcalc.dll) 来实现我们的程序。本例中,我们运用 wxPython 编写简单的 GUI 界面,通过 python 调用 hashtcalc.dll 的接口计算文件的校验和,然后输出在界面上。
架构图
图 1. 工具的架构图

浅要分析Python程序与C程序的结合使用

hashcalc.dll 接口描述

函数名:calc_CRC32

函数:char* calc_CRC32(char *filename);

参数:文件名

返回值:字符串

说明:该函数对输入的文件内容进行计算,并且返回它的 CRC32

函数名:calc_MD5

函数:char* calc_MD5(char *filename);

参数:文件名

返回值:字符串

说明:该函数对输入的文件内容进行计算,并且返回它的 MD5

函数名:calc_SHA1

函数:char* calc_SHA1 (char *filename);

参数:文件名

返回值:字符串

说明:该函数对输入的文件内容进行计算,并且返回它的 SHA1
HashcalcAdapter 代码

HashcalcAdapter.py 实现了一个 python 的 class HashcalcAdapter,HashcalcAdapter 对 hashtcalc.dl 的 C 语言接口进行了封装,使得其他 python 模块可以直接通过 HashcalcAdapter 使用 hashtcalc.dll 中实现的 hash 算法。具体的代码如下:
清单 13. HashcalcAdapter.py 代码

from ctypes import windll 
 from ctypes import * 

 class HashcalcAdapter(object): 
  def __init__(self, dllpath): 
    self._dllpath = dllpath 
    self._libc = windll.LoadLibrary(self._dllpath) 

  def calc_CRC32(self, filename): 
  new_filename = c_char_p(filename) 
  return self._libc.calc_CRC32(new_filename) 

  def calc_MD5(self, filename): 
  new_filename = c_char_p(filename) 
  return self._libc.calc_MD5(new_filename) 

  def calc_SHA1(self, filename): 
  new_filename = c_char_p(filename) 
  return self._libc.calc_SHA1(new_filename)

运行界面
图 2. 工具的运行界面

浅要分析Python程序与C程序的结合使用

Python 相关文章推荐
python字符串编码识别模块chardet简单应用
Jun 15 Python
Python中强大的命令行库click入门教程
Dec 26 Python
利用python实现xml与数据库读取转换的方法
Jun 17 Python
Python的CGIHTTPServer交互实现详解
Feb 08 Python
Python数据分析:手把手教你用Pandas生成可视化图表的教程
Dec 15 Python
python中的单引号双引号区别知识点总结
Jun 23 Python
ansible动态Inventory主机清单配置遇到的坑
Jan 19 Python
python同义词替换的实现(jieba分词)
Jan 21 Python
Python实现粒子群算法的示例
Feb 14 Python
Pytest之测试命名规则的使用
Apr 16 Python
用 Python 定义 Schema 并生成 Parquet 文件详情
Sep 25 Python
Django中celery的使用项目实例
Jul 07 Python
python实现根据用户输入从电影网站获取影片信息的方法
Apr 07 #Python
python中列表元素连接方法join用法实例
Apr 07 #Python
简单介绍Python中的filter和lambda函数的使用
Apr 07 #Python
解析Python中的变量、引用、拷贝和作用域的问题
Apr 07 #Python
在Python中利用Pandas库处理大数据的简单介绍
Apr 07 #Python
详解Python中的join()函数的用法
Apr 07 #Python
Python中用于去除空格的三个函数的使用小结
Apr 07 #Python
You might like
ASP 过滤数组重复数据函数(加强版)
2010/05/31 Javascript
深入理解JavaScript系列(14) 作用域链介绍(Scope Chain)
2012/04/12 Javascript
基于jQuery实现左右div自适应高度完全相同的代码
2012/08/09 Javascript
javascript在myeclipse中报错的解决方法
2013/10/29 Javascript
javascript 终止函数执行操作
2014/02/14 Javascript
JavaScript中的依赖注入详解
2015/03/18 Javascript
javascript自定义右键弹出菜单实现方法
2015/05/25 Javascript
基于Jquery插件Uploadify实现实时显示进度条上传图片
2020/03/26 Javascript
全面了解JavaScirpt 的垃圾(garbage collection)回收机制
2016/07/11 Javascript
Angular.JS学习之依赖注入$injector详析
2016/10/20 Javascript
JS使用面向对象技术实现的tab选项卡效果示例
2017/02/28 Javascript
gulp安装以及打包合并的方法教程
2017/11/19 Javascript
Express本地测试HTTPS的示例代码
2018/06/06 Javascript
elementUI Vue 单个按钮显示和隐藏的变换功能(两种方法)
2018/09/04 Javascript
构建Vue大型应用的10个最佳实践(小结)
2019/11/07 Javascript
js判断浏览器的环境(pc端,移动端,还是微信浏览器)
2020/12/24 Javascript
微信小程序wxs实现吸顶效果
2020/01/08 Javascript
javascript设计模式 ? 代理模式原理与用法实例分析
2020/04/16 Javascript
python通过装饰器检查函数参数数据类型的方法
2015/03/13 Python
解决python3 安装完Pycurl在import pycurl时报错的问题
2018/10/15 Python
Flask框架中request、请求钩子、上下文用法分析
2019/07/23 Python
使用python os模块复制文件到指定文件夹的方法
2019/08/22 Python
简单了解django文件下载方式
2020/02/10 Python
python自定义函数def的应用详解
2020/06/03 Python
python使用ctypes库调用DLL动态链接库
2020/10/22 Python
分享一枚pycharm激活码适用所有pycharm版本我的pycharm2020.2.3激活成功
2020/11/20 Python
浏览器实现移动端高性能css3动画(开启gpu加速)
2013/12/23 HTML / CSS
Marks & Spencer爱尔兰:英国马莎百货
2016/04/20 全球购物
欧舒丹加拿大官网:L’Occitane加拿大
2017/10/29 全球购物
实现向右循环移位
2014/07/31 面试题
保险专业自荐信范文
2014/02/20 职场文书
写好自荐信需做到的5要点
2014/03/07 职场文书
亮剑观后感
2015/06/05 职场文书
投诉书范文
2015/07/02 职场文书
MYSQL 运算符总结
2021/11/11 MySQL
简单聊聊Golang中defer预计算参数
2022/03/25 Golang