Python小哥哥

如何加快Python 应用的启动时间

2019-04-23  本文已影响1人  我爱学python

我听说pipenv9.0.2已经发布,启动时间有了很大的改进。

我很快就试了一下,但我觉得并不快。所以我用Python3.7的新特性来研究它。

在本文中,我将介绍该特性以及如何使用它。

启动时间≒导入时间

例如,pipenv -h 的执行时间比显示帮助消息的时间长得多。

一般来说,当应用程序启动时,会有一些启动过程,比如加载环境变量或配置文件。

对于Python应用程序,导入模块占用了大部分启动时间。例如,pipenv --version 花费了大约800ms,而import pipenv 花费了700ms。

显示模块的导入时间

Python 3.7有新的特性来显示导入模块的时间。

这个特性是通过 -X importtime 选项或 PYTHONPROFILEIMPORTTIM 环境变量来启用的。

例如,您可以利用以下命令来测试pipenv的导入时间:

这里是一个pipenv --version输出结果的例子 。

研究导入时间

在输出的最后面,你会看到这些行:

在最后一行,579479表示 import pipenv 需要579479us。

在导入pipenv的同时,还导入了许多其他模块。从上面的示例中,您可以看到 pipenv 导入了pipenv.cli。子导入以2个空格缩进。

再看最后一行。507表示运行pipenv模块时只需要507us。579479-507=578972us用于子导入。

找出缓慢的部分

我们来从输出中找到缓慢子树。我选取了几行。

pkg_resources

如您所见,导入pkg_resources 很缓慢。

但令人惊讶的是,pkg_resources没有进行缩进;它不是pipenv的子导入。

这意味着pkg_resources是由pipenv脚本而不是模块导入的。

坏消息: 导入pkg_resources很慢。这是一个已知的问题,在不破坏向后兼容性的情况下很难修复。

好消息: 您可以避免导入pkg_resources!

在安装了wheel之后,pip会对它进行构建并从构建包进行安装。

从wheel (.whl)和源码包(.tar.gz)安装是不同的过程。

从wheel安装时,脚本中不使用pkg_resources:

IPython

看下面的部分.

pipenv导入dotenv, dotenv再导入 dotenv.ipython,它再导入IPython。

这就是为什么pipenv在我的环境中开始很慢; 我已经安装了IPython。

但是为什么要导入IPython呢?我阅读了dotenv源码,发现它是用于IPython扩展的。

当然,pipenv和许多dotenv用户并不使用IPython扩展。

我向dotenv提交了一个推送请求,建议dotenv根据需要导入IPython。

由于pipenv有自己的dotenv副本,所以我向pipenv提交了完全删除dotenv.ipython的推送请求。

结论

我可以将 pipenv--version 的时间从800ms减少到500ms。

导入时间分析是研究和优化应用程序启动时间的好方法。

英文原文:https://dev.to/methane/how-to-speed-up-python-application-startup-time-nkf

译者:野生大熊猫

上一篇下一篇

猜你喜欢

热点阅读