【Cython】Cython三分钟入门教程

<p style="font-size:14px;font-family:tahoma,arial,'宋体';">我最喜欢的是Python,它的代码优雅而实用,可惜纯粹从速度上来看它比大多数语言都要慢。大多数人也认为的速度和易于使用是两极对立的——编写C代码的确非常痛苦。而 Cython 试图消除这种两重性,并让你同时拥有 Python 的语法和 C 数据类型和函数——它们两个都是世界上最好的。请记住,我绝不是我在这方面的专家,这是我的第一次Cython真实体验的笔记:

<p style="font-size:14px;font-family:tahoma,'宋体';">编辑:根据一些我收到的反馈,大家似乎有点混淆——Cython是用来生成 C 扩展到而不是独立的程序的。所有的加速都是针对一个已经存在的 Python 应用的一个函数进行的。没有使用 C 或 Lisp 重写整个应用程序,也没有手写C扩展 。只是用一个简单的方法来整合C的速度和C数据类型到 Python 函数中去。

<p style="font-size:14px;font-family:tahoma,'宋体';">现在可以说,我们能使下文的 great_circle 函数更快。所谓 great_circle 是计算沿地球表面两点之间的距离的问题:

<p style="font-size:14px;font-family:tahoma,'宋体';">p1.py

<p style="font-size:14px;font-family:tahoma,'宋体';">

<code class="language-python">import math

def great_circle(lon1,lat1,lon2,lat2):
radius = 3956 #miles
x = math.pi/180.0

a = (90.0-lat1)*(x)
b = (90.0-lat2)*(x)
theta = (lon2-lon1)*(x)
c = math.acos((math.cos(a)*math.cos(b)) +
              (math.sin(a)*math.sin(b)*math.cos(theta)))
return radius*c</code></pre><p style="font-size:14px;font-family:tahoma,'宋体';"&gt;让我们<a href="https://www.jb51.cc/tag/diaoyong/" target="_blank" class="keywords">调用</a>它 50 万次并测定它的时间 :</p><p style="font-size:14px;font-family:tahoma,'宋体';"&gt;</p><pre><code class="language-python"&gt;import timeit 

lon1,lat2 = -72.345,34.323,-61.823,54.826
num = 500000

t = timeit.Timer("p1.great_circle(%f,%f,%f)" % (lon1,lat2),"import p1")
print "Pure python function",t.timeit(num),"sec"

<p style="font-size:14px;font-family:tahoma,'宋体';">约2.2秒 。它太慢了!

<p style="font-size:14px;font-family:tahoma,'宋体';">让我们试着快速地用Cython改写它,然后看看是否有差别:
c1.pyx

<p style="font-size:14px;font-family:tahoma,'宋体';">

<code class="language-python">import math

def great_circle(float lon1,float lat1,float lon2,float lat2):
cdef float radius = 3956.0
cdef float pi = 3.14159265
cdef float x = pi/180.0
cdef float a,b,theta,c

a = (90.0-lat1)*(x)
b = (90.0-lat2)*(x)
theta = (lon2-lon1)*(x)
c = math.acos((math.cos(a)*math.cos(b)) + (math.sin(a)*math.sin(b)*math.cos(theta)))
return radius*c</code></pre><p style="font-size:14px;font-family:tahoma,'宋体';"&gt;请注意,我们仍然import math——cython让您在一定程度上混搭Python和C数据类型在。转换是<a href="https://www.jb51.cc/tag/zidong/" target="_blank" class="keywords">自动</a>的,但并非没有代价。<a href="https://www.jb51.cc/tag/zaizhe/" target="_blank" class="keywords">在这</a>个例子中我们所做的就是定义<a href="https://www.jb51.cc/tag/yige/" target="_blank" class="keywords">一个</a>Python<a href="https://www.jb51.cc/tag/hanshu/" target="_blank" class="keywords">函数</a>,声明它的输入参数是浮点数类型,并为所有变量声明类型为C浮点数据类型。计算部分它仍然使用了Python的 math 模块。</p><p style="font-size:14px;font-family:tahoma,'宋体';"&gt;现在我们需要将其转换为C<a href="https://www.jb51.cc/tag/daima/" target="_blank" class="keywords">代码</a>再编译为Python扩展。完成这一部的最好的办法是编写<a href="https://www.jb51.cc/tag/yige/" target="_blank" class="keywords">一个</a>名为setup.py发布脚本。但是,现在我们用手工方式 ,以了解其中的巫术:</p><p style="font-size:14px;font-family:tahoma,'宋体';"&gt;</p><pre><code class="language-objc"&gt;# this will create a c1.c file - the C source code to build a python extension

cython c1.pyx

Compile the object file

gcc -c -fPIC -I/usr/include/python2.5/ c1.c

Link it into a shared library

gcc -shared c1.o -o c1.so


现在你应该有一个c1.so(或.dll)文件,它可以被Python import。现在运行一下:<p style="font-size:14px;font-family:tahoma,'宋体';">

<code class="language-python">    t = timeit.Timer("c1.great_circle(%f,"import c1")
print "Cython function (still using python math)","s
<p style="font-size:14px;font-family:tahoma,'宋体';">约1.8秒 。并没有我们一开始期望的那种大大的性能提升。使用 python 的 match 模块应该是瓶颈。现在让我们使用C标准库替代之:

<p style="font-size:14px;font-family:tahoma,'宋体';">c2.pyx

<p style="font-size:14px;font-family:tahoma,'宋体';">

<code class="language-python">cdef extern from "math.h":
float cosf(float theta)
float sinf(float theta)
float acosf(float theta)

def great_circle(float lon1,c

a = (90.0-lat1)*(x)
b = (90.0-lat2)*(x)
theta = (lon2-lon1)*(x)
c = acosf((cosf(a)*cosf(b)) + (sinf(a)*sinf(b)*cosf(theta)))
return radius*cec"

与 import math 相应,我们使用cdef extern 的方式使用从指定头文件声明函数(在此就是使用C标准库的math.h)。我们替代了代价高昂的的Python函数,然后建立新的共享库,并重新测试:
t = timeit.Timer("c2.great_circle(%f,"import c2")
print "Cython function (using trig function from math.h)",'宋体';">现在有点喜欢它了吧?0.4秒 -比纯Python函数有5倍的速度增长。我们还有什么方法可以再提高速度?c2.great_circle()仍是一个Python函数调用,这意味着它产生Python的API的开销(构建参数元组等),如果我们可以写一个纯粹的C函数的话,我们也许能够加快速度。

<p style="font-size:14px;font-family:tahoma,'宋体';">c3.pyx

<p style="font-size:14px;font-family:tahoma,'宋体';">

<code class="language-python">cdef extern from "math.h":
float cosf(float theta)
float sinf(float theta)
float acosf(float theta)

cdef float _great_circle(float lon1,c

a = (90.0-lat1)*(x)
b = (90.0-lat2)*(x)
theta = (lon2-lon1)*(x)
c = acosf((cosf(a)*cosf(b)) + (sinf(a)*sinf(b)*cosf(theta)))
return radius*c

def great_circle(float lon1,float lat2,int num):
cdef int i
cdef float x
for i from 0 < = i < num:
x = _great_circle(lon1,lat2)
return x

<p style="font-size:14px;font-family:tahoma,'宋体';">请注意,我们仍然有一个Python函数( def ),它接受一个额外的参数 num。这个函数里的循环使用for i from 0 < = i < num: ,而不是更Pythonic,但慢得多的for i in range(num):。真正的计算工作是在C函数(cdef)中进行的,它返回float类型。这个版本只要0.2秒——比原先的Python函数速度提高10倍。

<p style="font-size:14px;font-family:tahoma,'宋体';">为了证明我们所做的已经足够优化,可以用纯C写一个小应用,然后测定时间:

<p style="font-size:14px;font-family:tahoma,'宋体';">

<code class="language-python">#include <math .h>

include <stdio .h>

define NUM 500000

float great_circle(float lon1,float lat2){
float radius = 3956.0;
float pi = 3.14159265;
float x = pi/180.0;
float a,c;

a = (90.0-lat1)*(x);
b = (90.0-lat2)*(x);
theta = (lon2-lon1)*(x);
c = acos((cos(a)*cos(b)) + (sin(a)*sin(b)*cos(theta)));
return radius*c;

}

int main() {
int i;
float x;
for (i=0; i < = NUM; i++)
x = great_circle(-72.345,54.826);
printf("%f",x);
}

<p style="font-size:14px;font-family:tahoma,'宋体';">用gcc -lm -o ctest ctest.c编译它,测试用time ./ctest ...大约0.2秒 。这使我有信心,我Cython扩展相对于我的C代码也极有效率(这并不是说我的C编程能力很弱)。

<p style="font-size:14px;font-family:tahoma,'宋体';">能够用 cython 优化多少性能通常取决于有多少循环,数字运算和Python函数调用,这些都会让程序变慢。已经有一些人报告说在某些案例上 100 至 1000 倍的速度提升。至于其他的任务,可能不会那么有用。在疯狂地用 Cython 重写 Python 代码之前,记住这一点:

<p style="font-size:14px;font-family:tahoma,'宋体';">"我们应该忘记小的效率,过早的优化是一切罪恶的根源,有 97% 的案例如此。"——Donald knuth

<p style="font-size:14px;font-family:tahoma,'宋体';">换句话说,先用 Python 编写程序,然后看它是否能够满足需要。大多数情况下,它的性能已经足够好了……但有时候真的觉得慢了,那就使用分析器找到瓶颈函数,然后用cython重写,很快就能够得到更高的性能

<p style="font-size:14px;font-family:tahoma,'宋体';">外部链接
WorldMill(<a href="http://trac.gispython.org/projects/PCL/wiki/WorldMill" rel="nofollow" style="color:rgb(0,102,153);">http://trac.gispython.org/projects/PCL/wiki/WorldMill)——由Sean Gillies 用 Cython 编写的一个快速的,提供简洁的 python 接口的模块,封装了用以处理矢量地理空间数据的 libgdal 库。

<p style="font-size:14px;font-family:tahoma,'宋体';">编写更快的 Pyrex 代码(<a href="http://www.sagemath.org:9001/WritingFastPyrexCode" rel="nofollow" style="color:rgb(0,153);">http://www.sagemath.org:9001/WritingFastPyrexCode)——Pyrex,是 Cython 的前身,它们有类似的目标和语法。

<p style="font-size:14px;font-family:tahoma,'宋体';">

<p style="font-size:14px;font-family:tahoma,'宋体';">作者:perrygeo

<p style="font-size:14px;font-family:tahoma,'宋体';">译者:赖勇浩(http://laiyonghao.com

<p style="font-size:14px;font-family:tahoma,'宋体';">原文:http://www.perrygeo.net/wordpress/?p=116

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


我最近重新拾起了计算机视觉,借助Python的opencv还有face_recognition库写了个简单的图像识别demo,额外定制了一些内容,原本想打包成exe然后发给朋友,不过在这当中遇到了许多小问题,都解决了,记录一下踩过的坑。 1、Pyinstaller打包过程当中出现warning,跟d
说到Pooling,相信学习过CNN的朋友们都不会感到陌生。Pooling在中文当中的意思是“池化”,在神经网络当中非常常见,通常用的比较多的一种是Max Pooling,具体操作如下图: 结合图像理解,相信你也会大概明白其中的本意。不过Pooling并不是只可以选取2x2的窗口大小,即便是3x3,
记得大一学Python的时候,有一个题目是判断一个数是否是复数。当时觉得比较复杂不好写,就琢磨了一个偷懒的好办法,用异常处理的手段便可以大大程度帮助你简短代码(偷懒)。以下是判断整数和复数的两段小代码: 相信看到这里,你也有所顿悟,能拓展出更多有意思的方法~
文章目录 3 直方图Histogramplot1. 基本直方图的绘制 Basic histogram2. 数据分布与密度信息显示 Control rug and density on seaborn histogram3. 带箱形图的直方图 Histogram with a boxplot on t
文章目录 5 小提琴图Violinplot1. 基础小提琴图绘制 Basic violinplot2. 小提琴图样式自定义 Custom seaborn violinplot3. 小提琴图颜色自定义 Control color of seaborn violinplot4. 分组小提琴图 Group
文章目录 4 核密度图Densityplot1. 基础核密度图绘制 Basic density plot2. 核密度图的区间控制 Control bandwidth of density plot3. 多个变量的核密度图绘制 Density plot of several variables4. 边
首先 import tensorflow as tf tf.argmax(tenso,n)函数会返回tensor中参数指定的维度中的最大值的索引或者向量。当tensor为矩阵返回向量,tensor为向量返回索引号。其中n表示具体参数的维度。 以实际例子为说明: import tensorflow a
seaborn学习笔记章节 seaborn是一个基于matplotlib的Python数据可视化库。seaborn是matplotlib的高级封装,可以绘制有吸引力且信息丰富的统计图形。相对于matplotlib,seaborn语法更简洁,两者关系类似于numpy和pandas之间的关系,seabo
Python ConfigParser教程显示了如何使用ConfigParser在Python中使用配置文件。 文章目录 1 介绍1.1 Python ConfigParser读取文件1.2 Python ConfigParser中的节1.3 Python ConfigParser从字符串中读取数据
1. 处理Excel 电子表格笔记(第12章)(代码下载) 本文主要介绍openpyxl 的2.5.12版处理excel电子表格,原书是2.1.4 版,OpenPyXL 团队会经常发布新版本。不过不用担心,新版本应该在相当长的时间内向后兼容。如果你有新版本,想看看它提供了什么新功能,可以查看Open
1. 发送电子邮件和短信笔记(第16章)(代码下载) 1.1 发送电子邮件 简单邮件传输协议(SMTP)是用于发送电子邮件的协议。SMTP 规定电子邮件应该如何格式化、加密、在邮件服务器之间传递,以及在你点击发送后,计算机要处理的所有其他细节。。但是,你并不需要知道这些技术细节,因为Python 的
文章目录 12 绘图实例(4) Drawing example(4)1. Scatterplot with varying point sizes and hues(relplot)2. Scatterplot with categorical variables(swarmplot)3. Scat
文章目录 10 绘图实例(2) Drawing example(2)1. Grouped violinplots with split violins(violinplot)2. Annotated heatmaps(heatmap)3. Hexbin plot with marginal dist
文章目录 9 绘图实例(1) Drawing example(1)1. Anscombe’s quartet(lmplot)2. Color palette choices(barplot)3. Different cubehelix palettes(kdeplot)4. Distribution
Python装饰器教程展示了如何在Python中使用装饰器基本功能。 文章目录 1 使用教程1.1 Python装饰器简单示例1.2 带@符号的Python装饰器1.3 用参数修饰函数1.4 Python装饰器修改数据1.5 Python多层装饰器1.6 Python装饰器计时示例 2 参考 1 使
1. 用GUI 自动化控制键盘和鼠标第18章 (代码下载) pyautogui模块可以向Windows、OS X 和Linux 发送虚拟按键和鼠标点击。根据使用的操作系统,在安装pyautogui之前,可能需要安装一些其他模块。 Windows: 不需要安装其他模块。OS X: sudo pip3
文章目录 生成文件目录结构多图合并找出文件夹中相似图像 生成文件目录结构 生成文件夹或文件的目录结构,并保存结果。可选是否滤除目录,特定文件以及可以设定最大查找文件结构深度。效果如下: root:[z:/] |--a.py |--image | |--cat1.jpg | |--cat2.jpg |
文章目录 VENN DIAGRAM(维恩图)1. 具有2个分组的基本的维恩图 Venn diagram with 2 groups2. 具有3个组的基本维恩图 Venn diagram with 3 groups3. 自定义维恩图 Custom Venn diagram4. 精致的维恩图 Elabo
mxnet60分钟入门Gluon教程代码下载,适合做过深度学习的人使用。入门教程地址: https://beta.mxnet.io/guide/getting-started/crash-course/index.html mxnet安装方法:pip install mxnet 1 在mxnet中使
文章目录 1 安装2 快速入门2.1 基本用法2.2 输出图像格式2.3 图像style设置2.4 属性2.5 子图和聚类 3 实例4 如何进一步使用python graphviz Graphviz是一款能够自动排版的流程图绘图软件。python graphviz则是graphviz的python实