Cython(2)--编译和运行

2024-08-22 03:38
文章标签 编译 运行 cython

本文主要是介绍Cython(2)--编译和运行,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

目录

    • 1 Cython编译流程(pipeline)
      • 安装cython
    • 2 编译方式1 Using distutils with cythonize(标准方式)
      • 2.1 一个pyx文件内
        • 编译生成的文件
      • 2.2 包含c语言文件和pyx文件
      • 2.3 包含预先编译好的动态库

以下全来自于对《Cython:A Guide for Python Programmers》一书的学习

  • 和c、c++一样,Cython代码运行前也是需要编译的;
  • Cython是python的超集,所以python编译器是不能直接import和运行Cython的;
  • 这个编译步骤可以是显式的,也可以是隐式的,即可以自动运行,不需要用户参与(让Cython感觉很像Python),也可以由终端用户在需要更多控制时临时运行,两种都有它的作用;
  • 自动编译Cython的一个很好的特性是,它使使用Cython感觉像是在使用纯Python工作;
  • 几种操作(但是没必要知道所有的编译方法,所有按需学习):
    • Cython代码可以从IPython解释器编译并交互式地运行。
    • 可以在导入时自动编译。
    • 它可以通过Python的distutils等构建工具单独编译
    • 它可以集成到标准构建系统中,如make、CMake或SCons。

1 Cython编译流程(pipeline)

该管道的工作是将Cython代码转换为Python扩展模块(extension module),Python解释器可以导入并使用该模块。

该管道包括两个阶段

  1. 第一阶段由cython编译器处理,它将cython源代码转换为优化的、与平台无关的C或c++。
  2. 第二阶段使用标准的C或c++编译器将生成的C或c++源代码编译成共享库(shared library)。生成的共享库平台相关的。共享库在unix系统上是.so后缀。

我们将这个编译后的模块称为扩展模块(extension module),它可以像用纯Python编写一样导入和使用

cython编译器是一个源代码到源代码的编译器,生成代码经过了高度优化。由Cython生成的C代码比典型的手工编写的C代码要快。所以我们可以看到生成的c文件里面的代码我们都是看不太懂的,而且很长很复杂。Cython生成的C代码也具有高度可移植性,可以同时支持所有常见的C编译器和许多Python版本。

编译的时候确保两个工具安装了:

  1. c或c++编译器; gcc
  2. cython编译器。anaconda自带或 pip install cython -i https://pypi.tuna.tsinghua.edu.cn/simple/安装。

安装cython

  • anaconda自带;
  • pip install cython -i https://pypi.tuna.tsinghua.edu.cn/simple/安装。

2 编译方式1 Using distutils with cythonize(标准方式)

distutils包是用于构建、打包和分发Python项目的,python再带。

2.1 一个pyx文件内

步骤:

  1. cythonize将Cython编译成c/c++语言;
  2. 然后,distutils(distributing utils)将c/c++语言编译成可以执行代码os,即扩展模块。

代码:

# setup.py
# cythonize在.pyx源文件上调用cython编译器,setup将生成的C或c++代码编译成Python扩展模块。
from distutils.core import setup, Extension
from Cython.Build import cythonize# setup(ext_modules=cythonize('fib.pyx')) #这样写的话其实没有显示知道编译以后扩展包的名字
setup(ext_modules = cythonize(Extension(name='warp_fib', sources=["fib.pyx"])) #指定扩展包名

然后命令行执行编译即可:

// build_ext参数是一个命令,指示distutils构建扩展对象或cythonize调用创建的对象。可选的——inplace标志指示distutils将每个扩展模块放在其各自的Cython.pyx源文件旁边。
$ python setup.py build_ext --inplace
编译生成的文件

在这里插入图片描述
这里面 .c .o .so这几个文件都是编译生成的文件。

2.2 包含c语言文件和pyx文件

from distutils.core import setup, Extension from Cython.Build import cythonize# First create an Extension object with the appropriate name and sources. 
ext = Extension(name="wrap_fib", sources=["cfib.c", "wrap_fib.pyx"])# Use cythonize on the extension object. 
setup(ext_modules=cythonize(ext))

2.3 包含预先编译好的动态库

from distutils.core import setup, Extension 
from Cython.Build import cythonizeext = Extension(name="wrap_fib", sources=["wrap_fib.pyx"], library_dirs=["/path/to/libfib.so"], libraries=["fib"])setup(ext_modules=cythonize(ext))

这篇关于Cython(2)--编译和运行的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1095139

相关文章

Python如何精准判断某个进程是否在运行

《Python如何精准判断某个进程是否在运行》这篇文章主要为大家详细介绍了Python如何精准判断某个进程是否在运行,本文为大家整理了3种方法并进行了对比,有需要的小伙伴可以跟随小编一起学习一下... 目录一、为什么需要判断进程是否存在二、方法1:用psutil库(推荐)三、方法2:用os.system调用

Python运行中频繁出现Restart提示的解决办法

《Python运行中频繁出现Restart提示的解决办法》在编程的世界里,遇到各种奇怪的问题是家常便饭,但是,当你的Python程序在运行过程中频繁出现“Restart”提示时,这可能不仅仅是令人头疼... 目录问题描述代码示例无限循环递归调用内存泄漏解决方案1. 检查代码逻辑无限循环递归调用内存泄漏2.

idea maven编译报错Java heap space的解决方法

《ideamaven编译报错Javaheapspace的解决方法》这篇文章主要为大家详细介绍了ideamaven编译报错Javaheapspace的相关解决方法,文中的示例代码讲解详细,感兴趣的... 目录1.增加 Maven 编译的堆内存2. 增加 IntelliJ IDEA 的堆内存3. 优化 Mave

Java编译生成多个.class文件的原理和作用

《Java编译生成多个.class文件的原理和作用》作为一名经验丰富的开发者,在Java项目中执行编译后,可能会发现一个.java源文件有时会产生多个.class文件,从技术实现层面详细剖析这一现象... 目录一、内部类机制与.class文件生成成员内部类(常规内部类)局部内部类(方法内部类)匿名内部类二、

Java终止正在运行的线程的三种方法

《Java终止正在运行的线程的三种方法》停止一个线程意味着在任务处理完任务之前停掉正在做的操作,也就是放弃当前的操作,停止一个线程可以用Thread.stop()方法,但最好不要用它,本文给大家介绍了... 目录前言1. 停止不了的线程2. 判断线程是否停止状态3. 能停止的线程–异常法4. 在沉睡中停止5

在VSCode中本地运行DeepSeek的流程步骤

《在VSCode中本地运行DeepSeek的流程步骤》本文详细介绍了如何在本地VSCode中安装和配置Ollama和CodeGPT,以使用DeepSeek进行AI编码辅助,无需依赖云服务,需要的朋友可... 目录步骤 1:在 VSCode 中安装 Ollama 和 CodeGPT安装Ollama下载Olla

解读docker运行时-itd参数是什么意思

《解读docker运行时-itd参数是什么意思》在Docker中,-itd参数组合用于在后台运行一个交互式容器,同时保持标准输入和分配伪终端,这种方式适合需要在后台运行容器并保持交互能力的场景... 目录docker运行时-itd参数是什么意思1. -i(或 --interactive)2. -t(或 --

pycharm远程连接服务器运行pytorch的过程详解

《pycharm远程连接服务器运行pytorch的过程详解》:本文主要介绍在Linux环境下使用Anaconda管理不同版本的Python环境,并通过PyCharm远程连接服务器来运行PyTorc... 目录linux部署pytorch背景介绍Anaconda安装Linux安装pytorch虚拟环境安装cu

IDEA编译报错“java: 常量字符串过长”的原因及解决方法

《IDEA编译报错“java:常量字符串过长”的原因及解决方法》今天在开发过程中,由于尝试将一个文件的Base64字符串设置为常量,结果导致IDEA编译的时候出现了如下报错java:常量字符串过长,... 目录一、问题描述二、问题原因2.1 理论角度2.2 源码角度三、解决方案解决方案①:StringBui

通过prometheus监控Tomcat运行状态的操作流程

《通过prometheus监控Tomcat运行状态的操作流程》文章介绍了如何安装和配置Tomcat,并使用Prometheus和TomcatExporter来监控Tomcat的运行状态,文章详细讲解了... 目录Tomcat安装配置以及prometheus监控Tomcat一. 安装并配置tomcat1、安装