python扩展:Python的C/C++扩展

  Python 的 C/C++ 扩展

                          By [email protected]

可扩展性是 Python 的一大特色，一方面，由于 Python 是解释执行的，这导致运行速度会比编译型语言慢，因此可以通过使用 C/C++ 重写核心部分代码以解决性能上的瓶颈 ( 程序 90% 的时间再运行 10% 的代码 ) ；另一方面，可以通过扩展，达到添加整合一些额外的功能以及保持专有源代码的目的。在本文接下来的部分中我们将讨论如何编写 C/C++ 扩展代码，并使用它们的功能。

我们要建立的是一个可以在 Python 内运行的 C/C++ 模块，因此需要解决如何使 C 代码和 Python 代码能够进行交互以及数据共享。扩展是通过为 C 代码编写包装函数 ( 类似适配器 ) 实现双向交互和数据共享的。

一．一般的包装模式

每一个包装函数主要做三件事：

1. 把输入的 Python 对象转换为 C/C++ 对象；

2. 调用 C/C++ 函数；

3. 转换 C/C++ 函数处理的输出结果为 Python 对象，并返回；

先用一个简单样例描述模块大体的过程：

 //wrap.cpp //1.C代码 #include "Python.h" int add(int arg1, int arg2) { return arg1 + arg2; } //2.add的包装函数： static PyObject* wrap_add(PyObject *self, PyObject *args) { //把输入的Python对象转换为C/C++能识别的数据 int arg1, arg2; if(!PyArg_ParseTuple(args, "ii", &arg1, &arg2)) return NULL; //调用C/C++函数，得到结果 int result = add(arg1,arg2); //把得到的结果包装成Python对象，并返回 return (PyObject*)Py_BuildValue("i", result); } //3.为模块添加PyMethodDef方法数组 static PyMethodDef wrap_methods[] ={ {"add", wrap_add, METH_VARARGS}, {NULL, NULL} }; //4.增加模块初始化函数InitModule PyMODINIT_FUNC initwrap (void) { Py_InitModule("wrap ", wrap_methods); }

    把上面的代码编译，生成 wrap.pyd 。

       Visual Studio 2005 编译方法参考：

http://blog.csdn.net/solo_lxy/archive/2007/07/20/1700515.aspx

  启动控制台切换到相应的工程目录，即可测试生成的模块：

    (PS: 似乎只有 Release 模式生成的模块才能正常运行 )

相关说明

每个包装函数都有如下形式：

PyObject * wrap_function(PyObject *, PyObject * args)

      函数第一个参数，有特殊用途，通常选择忽略。第二个参数是一个PyTuple(PyObject的子类型，和Python中的Tuple对应)，是调用时Python传入的参数。

函数 PyArg_ParseTuple 把 Python 对象转换为 C 的数据类型，其声明如下 :

int PyArg_ParseTuple(PyObject* args, char* format, ...);

参数 args 必须是一个 tuple 对象，包含传递过来的参数， format 参数必须是格式化字符串。剩余参数是各个变量的地址，类型要与格式化字符串对应。如：

int arg1, arg2;

PyArg_ParseTuple(args, "ii", &arg1, &arg2);

函数 Py_BuildValue 可以说是 PyArg_ParseTuple 的逆过程，它把 C 的数据类型包装为 Python 对象。

return (PyObject*) Py_BuildValue("i", result);

把调用 C 函数的结果 result 包装为 Python 的 int 对象，并返回。

static PyMethodDef wrap_methods[] ={

      {"add", wrap_add , METH_VARARGS},

      {NULL, NULL}

};

这个数组包含多个数组，其中的每个数组都包含了一个函数的信息，以便解释器能够导入并调用它们，最后一个 NULL 数组表示列表的结束。 METH_VARARGS 常量表示参数以元组形式传入。

PyMODINIT_FUNC initwrap (void)

{

      Py_InitModule("wrap ", wrap_methods);

}

模块初始化函数 void initModuleName(), 这部分代码在模块被导入的时候被解释器调用。这样所有的包装就已经完成了。

二． C++ 类的包装

 // Example.cpp class Numbers { public: Numbers(int first, double second) : m_first( first), m_second(second){} double NumMemberMult(void){ return m_first*m_second;} private: int m_first; double m_second; }; static void PyDelNumbers(void *ptr) { Numbers * oldnum = static_cast<Numbers *>(ptr); delete oldnum; return; } PyObject *Example_new_Numbers(PyObject *, PyObject* args) { int arg1; double arg2; int ok = PyArg_ParseTuple(args,"id",&arg1,&arg2); if(!ok) return NULL; //动态创建一个新对象 Numbers *newnum = new Numbers(arg1, arg2); //把指针newnum包装成PyCObject对象并返回给解释器 return PyCObject_FromVoidPtr( newnum, PyDelNumbers); } PyObject * Example_Numbers_MemberMult(PyObject *, PyObject* args) { PyObject *pynum = 0; int ok = PyArg_ParseTuple( args, "O", &pynum); if(!ok) return NULL; //把PyCObject转换为void指针 void * temp = PyCObject_AsVoidPtr(pynum); //把void指针转换为一个Numbers对象指针 Numbers * thisnum = static_cast<Numbers *>(temp); //调用函数 double result = thisnum->NumMemberMult(); //返回结果 return Py_BuildValue("d",result); } static PyMethodDef Example_methods[] = { {"Numbers", Example_new_Numbers, METH_VARARGS}, {"NumMemberMult", Example_Numbers_MemberMult, METH_VARARGS}, {NULL, NULL} }; PyMODINIT_FUNC initExample (void) { Py_InitModule("Example", Example_methods); }

C++ 类的包装和 C 函数的包装大同小异，因为对类的包装是对函数的包装，所以仍需要用 Python 代码对扩展模块进行包装，才可以像类一样的使用。

 #example.py from Example import * class example(object): def __init__(self,arg1,arg2): self._base = Numbers(arg1,arg2) def MemberMult(self): return NumMemberMult(self._base)

这样 C++ 类的包装也完成了。

三． C/C++ 中创建 Python list

static PyObject* Windy_dict(PyObject *self, PyObject *args) { //创建列表 PyObject *newlist = PyList_New(0); PyList_Append(newlist, PyString_FromString("first")); PyList_Append(newlist, PyString_FromString("second")); PyList_Append(newlist, PyString_FromString("third")); //返回给解释器 return newlist; }

创建其它 Python 对象也类似 list 的创建，返回给 解释器的都是一个对象指针 。 C/C++ 对 Python 对象的解析差不多是创建时的逆过程。具体的对象模型及 API 可以查阅相关参考文档。

Python v2.6.2 documentation » Python/C API Reference Manual » Concrete Objects Layer  

延伸阅读

• 2011-9-12-- python代码,谁说使用Python你就写不出混乱的代码？
• 2010-12-15-- python,Python Class System
• 2011-6-23-- python,如何成为Python高手
• 2011-6-25-- protorpc,Google App Engine ProtoRPC Python API 概述
• 2009-2-12-- python软件:Python 设计模式——用模式改善软件设计
• 2010-12-9-- python,多国外PHP开发者已放弃PHP而改用Python?
• 2009-2-12-- psyco:用 Psyco 让 Python 运行得像 C一样快
• 2010-12-31-- python,python的mysql
• 2009-2-12-- python与php:Python 之优雅与瑕疵
• 2008-12-13-- 使用Python做软件Software持续构建