谷歌通过使用Go语言创建了一个新的Python运行时,解决了CPython中 全局解释器锁 (Global Interpreter Lock)导致的并发局限。
谷歌的YouTube前端和API使用Python开发,运行在CPython 2.7之上,CPython 2.7是Python解释器的参考实现。这些年来,Python代码已经增长到数百万行了,在经过对运行时进行性能调整之后一般表现良好。但是他们碰到了一个再三出现的问题。 据谷歌透露 :“并发负载在CPython上的表现并不好。”
在研究了许多其他可能的解决方案后,谷歌决定尝试在Go的运行时上面运行Python代码,因为它对并发性的强大支持。于是 Grumpy 项目诞生了。Grumpy可以将Python代码转换为Go源代码,然后将其编译为目标平台的本地代码。Go中间代码是一系列应用在Python对象数据结构上的操作。
因为它使用了编译,Grumpy牺牲了解释型语言所具有的一些的开发自由度和特性。但谷歌声称,静态分析带来了性能上的优化,通过简单的导入就可以使用Go的包,这两项好处弥补了上述的不足。
静态编译的另一个结果是Grumpy不支持并且将“可能永远不支持”CPython中可用的一些动态功能: exec
、 eval
和 compile
,因为支持它们将需要“使用笨重而低效的编译工具链构建Grumpy程序”。虽然理论上可能,但是Grumpy团队表示,他们也不打算支持C扩展模块,因为“Grumpy的API和对象布局与CPython不同”。
Google试图用Grumpy替代CPython 2.7。 有些人希望 看到Grumpy在未来支持Python 3.x。 在回答有关支持Python 3的问题时 ,YouTube的高级软件工程师Dylan Trotter说:“我们有一个大的Python 2.7代码库,所以这是我们一直关注的。我肯定想支持Python 3。”他还在另一个 帖子 中说,“近期没有Python 3的具体计划,但长期来说我肯定想要支持它。”
Google基于Apache 2.0许可 在GitHub上开源Grumpy ,邀请开发人员评论和贡献。 还为此设立了一个 论坛 。
查看英文原文: Google Solves CPython’s Concurrency Issues with Grumpy
感谢薛命灯对本文的审校。
给InfoQ中文站投稿或者参与内容翻译工作,请邮件至editors@cn.infoq.com。也欢迎大家通过新浪微博(@InfoQ,@丁晓昀),微信(微信号: InfoQChina )关注我们。