点击上方“csdn”,选择“置顶公众号”
关键时刻,第一时间送达!
是什么让数据科学如此喜爱python?是语言本身,还是生态系统,或是相关的开发过程?
在许多软件开发领域,包括脚本和进程自动化、网站开发以及通用应用程序等,python越来越受欢迎。而且最近python成为了机器学习的首选语言。在这篇文章中我们将来看一看python成为该领域主宰的四大原因。
▌python让编程更简单
python成功的首要原因是:这门语言让编程变得很简单,而且使之一直保持简单。
python刚刚问世的时候,这门语言一个主要的目标就是易读易写。大家读的代码远比写得多,尤其是当代码从一个团队手中递交到另外一个团队的情况下。如果你继承了由其他开发者开发的机器学习的应用程序,尤其是那些结合了许多第三方组件的程序,或是拥有大量定制业务逻辑的程序,那么在理解程序时编程语言造成的障碍越小越好。优秀的python代码可以做到这一点,甚至远比其他语言出色。
python的语言设计在机器学习中很有帮助的另外一个关键因素是,它提供了高层的、基于对象的任务抽象。机器学习应用程序呈现复杂、多阶段的工作流程。优秀的语言应该让人们把更多的精力放在需要完成的内容上,而对实现细节的关注越少越好。python让你与手头的工作保持了一定的距离,所以你不会一眼望过去就被吓到。
▌python提供了机器学习的代码库
python成为机器学习的主力的第二个主要原因,是因为python提供大量机器学习的代码库和框架。以老牌的scikit-learn为首,每个伟大的机器学习和深度学习的框架,包括tensorflow、cntk、apache spark mllib等,它们要么在python享有一级的待遇,要么含有python api。例如pytorch等一些框架,正如名字的字面含义,是专门用python编写的,而且性能上并没有打折扣。(下面我们会有更多关于性能的讨论。)
python的代码库生态系统可以让你在工作空间内,简单地的通过一行命令安装很多的这些框架。还有一些最近的新进展,在python改变了它的代码库打包机制以后,现在可以更加容易地分发那些依赖于特定平台的文件,而这是许多机器学习框架所必须的。
当然,这个代码系统还有一些不足的地方,因此产生了很多变通方案。例如anaconda等发行版有自己的打包机制,可以很好地处理对不属于python生态系统的可执行文件的依赖。但是,总的来说,python打包生态系统为机器学习提供了一定程度的便利性,这与python一贯坚持的简易性和便利性很相符。
▌python可以处理内存管理
由python等高级语言和使用它们的工作提供的抽象扩展到了很多其他领域。在python中,程序员看不到内存管理的细节,因此他们可以将更多精力放在手边的问题上。
python的内置结构和数据抽象——列表、集合、字典和元组——所使用的内存都由python运行时管理。java的工作方式大致相同,但是一般来说python比java更简洁,在用户和结果之间造成的障碍也更少。
与执行实际的计算工作相比,更多时候机器学习的应用使用python的内存管理结构来组织应用程序的逻辑或数据流。大部分繁重的计算工作都由外部代码库(如numpy)来处理(更多内容请见下文)。但是,语言和运行时提供的抽象意味着这类的内存管理由底层自动处理,用户操作层根本不会觉察。
尽管如此,python内部的内存管理方式很值得我们去了解。python的易用性的代价是效率上的损失,而且这种代价有时并不是很明显。为了获得最佳性能,你最终需要“揭开神秘的面纱”,探索底层的抽象。
有关这方面的一些示例,请参阅theano机器学习代码库的资料“python的内存管理”(),虽然theano已停止开发,但是许多讨论过的原则可以广泛应用。另一种优化性能的方法是cython,这个实用的代码库可以将python代码转换成c。cython可以一些通过python不具有的常见方式,直接访问c的内存管理和数据结构。
▌python的速度不是问题
很多人这样形容python:“很方便,但是不够快。”这句话的大部分是正确的。在使用python的时候,一般你不得不为了简易的开发而放弃部分性能。所以有人可能会问,如果python不是最快的语言,为什么我们用它处理计算密集型的工作,比如机器学习?
简单的答案是:计算密集型的工作并不是由python完成的。
用python编写的机器学习应用程序中,绝大多数的实际计算工作都是由别的代码库执行的,这些代码库通常是由c、c++或java编写的,python只是打包并与之交互。应用程序中在python中运行的部分通常都对性能不是很敏感——一般它们负责安装或删除、命令和控制、协调各个组件、记录日志和报告,等等。
但是,如果应用程序花费大量时间在python和其他快速的代码库之间来来回回,那么在python中使用外部的代码库仍然会导致性能问题。每次环境上下文切换都会导致性能下降,所以开发人员需要将python与外部api的交互次数降到最低。尽管如此,但这不是机器学习特有的问题,这是python与其他语言的常见问题,所以发现这个问题并不难。
根据情况需要,我们还可以通过各种工具加速纯python代码,比如cython(将python转换成c)、numba(用于jit加速以数学为中心的代码)、pypy(用于jit加速python代码)等等。
总的来说,让python在机器学习领域大放异彩的不仅是某个功能,而是python整个语言包:它是一种易学易用的语言,它的生态系统拥有的第三方代码库可以涵盖广泛的机器学习用例和性能,可以帮助你很好地完成手头的工作。
原文:?nsdr=true作者:serdar yegulalp译者:弯月
————— csdn 课程推荐—————
在此,诚意向大家推荐一个由 csdn 学院重磅打造的 python 全栈工程师精品课」,计时 4 个月,已有 1136 位学员加入。python 技术专家张涛、金牌讲师邹义良两位讲师由浅入深地为大家详细讲解 python 整套开发流程,包含 python 基础、python web 开发、python 爬虫技术、python 自动化运维、python 数据挖掘与数据学习五大模块,阶段性项目实战能够让你通过四个月的学习,成就真正的 python 全栈工程师。