0、背景
Python是一种面向对象的解释型计算机程序设计语言,具有丰富和强大的库,使用其开发产品快速高效。
python的解释特性是将py编译为独有的二进制编码pyc文件,然后对pyc中的指令进行解释执行,但是pyc的反编译却非常简单,可直接反编译为源码,当需要将产品发布到外部环境的时候,源码的保护尤为重要。
基于以上原因,本文将介绍如何将python源码编译pyc,编译成动态链接库.so文件,以及自定义python模块如何打包发布,以便用pip安装自己的python模块。
1、python源码编译至pyc文件
使用python的py_compile模块实现python源码编译pyc。
这里举一个简单的例子:在demo文件夹下有一个demo.py,需要将demo.py编译.pyc。
demo.py内容如下:
def print_hello():
print('hello')
在demo文件夹下新建setup.py,内容如下:
import py_compile
py_compile.compile(r'demo.py',r'demo.pyc')
在shell执行:
cd demo
python setup.py
在demo文件夹下,就会生成demo.pyc文件。
2、python源码编译.so文件
Python源码编译至.so文件的思路是先将py转换为c代码,然后编译c为so文件。
所需编译环境:
python安装:cython
pip install cython
linux 安装:python-devel,gcc
yum install python-devel
yum install gcc
同样举上述例子:在demo文件夹下有一个demo.py,需要将demo.py编译.so。
demo.py内容如下:
def print_hello():
print('hello')
在demo文件夹下新建setup.py,内容如下:
from distutils.core import setup
from Cython.Build import cythonize
setup(ext_modules = cythonize(["demo.py"]))
在shell执行:
cd demo
python setup.py build_ext
在demo文件夹下,就会生成demo.c文件,同时在demo文件夹下生成build文件夹,在build文件夹下包含生成的.so文件。
3、自定义python模块打包发布
将自定义python模块打包发布有两种,一种是将python源码打包发布,一种是将python源码转换至动态链接库.so文件打包发布。下面介绍一下这两种打包方式。
A)、使用python源码打包
同样使用上述例子:在demo文件夹下有一个demo.py,需要将demo.py打包。
在demo文件夹下新建setup.py,内容如下:
from distutils.core import setup
setup(name = ‘demo’,
version = '1.0',
py_modules = ['demo'],
)
在shell执行:
cd demo
python setup.py bdist_wheel
在demo文件夹下,生成dist文件夹,dist文件夹中包含了生成的python模块。
B)、使用python源码编译成.so打包
使用上述例子:在demo文件夹下有一个demo.py,需要将demo.py打包。
首先将python源码转换为c代码:
在demo文件夹下新建generateC.py,内容如下:
from distutils.core import setup
from Cython.Build import cythonize
setup(ext_modules = cythonize(["demo.py"]))
然后将c代码编译打包,过程如下:
在demo文件夹下新建generateWHL.py,内容如下:
from setuptools import setup
from setuptools.dist import Distribution
from distutils.core import Extension
setup(name = 'demo',
version = '1.0',
ext_modules = [Extension("demo",['demo.c'])],
)
将上述两个文件执行,如下:在demo文件夹下新建setup.py,内容如下:
import os
cmd1 = "python generateC.py build_ext"
os.system(cmd1)
cmd2 = "python generateWHL.py bdist_wheel"
os.system(cmd2)
在shell执行:
cd demo
python setup.py
在demo文件夹下,生成dist文件夹,dist文件夹中包含了生成的python模块。
C)、安装卸载
可以使用pip直接安装和卸载生成的python模块。
4、其他
本文主要是针对python源码编译打包做了简单介绍,使用了最简单的例子。对于复杂的情况,比如打包时需要额外的数据文件,依赖包等等,需要具体查看setuptools模块的相关内容。
|