在 IPython 中重新加载子模块

Question

目前我正在开发一个包含子模块并使用 numpy/scipy 的 python 项目。 Ipython 用作交互式控制台。不幸的是，我对我现在使用的工作流程不太满意，我希望得到一些建议。

在 IPython 中，框架是通过简单的 import 命令加载的。然而，通常需要更改框架子模块之一中的代码。此时模型已加载，我使用 IPython 与其交互。

现在，框架包含许多相互依赖的模块，即，当框架最初加载时，主模块正在导入和配置子模块。仅当使用 reload(main_mod.sub_mod) 重新加载模块时，才会执行对代码的更改。这很麻烦，因为我需要使用完整路径单独重新加载所有更改的模块。如果 reload(main_module) 也能重新加载所有子模块，但无需重新加载 numpy/scipy..

Answer 1

IPython 附带了一些自动重新加载魔法：

%load_ext autoreload
%autoreload 2

它将重新加载所有更改每次执行新行之前都会调用模块。其工作方式与 dreload 略有不同。有些注意事项适用，请输入 %autoreload? 以查看可能出现的问题。

---

如果您想始终启用此设置，请修改您的 IPython 配置文件 ~/.ipython/profile_default/ipython_config.py[1] 并附加：

c.InteractiveShellApp.extensions = ['autoreload']     
c.InteractiveShellApp.exec_lines = ['%autoreload 2']

通过下面的评论感谢 @Kos。< /em>

[1]
如果您没有~/.ipython/profile_default/ipython_config.py文件，则需要先调用ipython profile create。或者该文件可能位于$IPYTHONDIR。

Answer 2

名为 importlib 的模块允许访问导入内部。特别是，它提供了函数 importlib.reload() ：

import importlib
importlib.reload(my_module)

与%autoreload相反，importlib.reload()也会重置模块中设置的全局变量。在大多数情况下，这就是您想要的。

importlib 仅自 Python 3.1 起可用。对于旧版本，您必须使用模块 imp 。

我建议阅读 importlib.reload() 获取此函数的所有注意事项的列表（递归重新加载、保留旧对象定义的情况等）。

Answer 3

在 IPython 0.12（可能更早）中，您可以使用以下命令：

%load_ext autoreload
%autoreload 2

这与 pv. 的答案基本相同，只不过扩展已被重命名并且现在使用 %load_ext 加载。

Answer 4

由于某种原因，当您将代码从一个笔记本导入到另一个笔记本。仅普通 Python reload 有效：

reload(module)

基于 [1]。

Answer 5

IPython 提供 dreload()< /code>递归地重新加载所有子模块。就个人而言，我更喜欢使用 %run() 魔术命令（尽管它不执行深度重新加载，正如 John Salvatier 在评论中指出的那样）。

Answer 6

http://shawnleezx.github。 io/blog/2015/08/03/some-notes-on-ipython-startup-script/

为了避免一次又一次地输入这些神奇的函数，可以将它们放入 ipython 启动脚本中（将其命名为 . .ipython/profile_default/startup 下的 .py 后缀。该文件夹下的所有 python 脚本都会按照词法顺序加载），如下所示：

from IPython import get_ipython
ipython = get_ipython()

ipython.magic("pylab")
ipython.magic("load_ext autoreload")
ipython.magic("autoreload 2")

Answer 7

怎么样：

import inspect

# needs to be primed with an empty set for loaded
def recursively_reload_all_submodules(module, loaded=None):
    for name in dir(module):
        member = getattr(module, name)
        if inspect.ismodule(member) and member not in loaded:
            recursively_reload_all_submodules(member, loaded)
    loaded.add(module)
    reload(module)

import mymodule
recursively_reload_all_submodules(mymodule, set())

这应该有效地重新加载您提供的整个模块和子模块树。您还可以将此函数放在 .ipythonrc 中（我认为），以便每次启动解释器时都会加载它。

Answer 8

我重新加载的标准做法是在首次打开 IPython 后结合使用这两种方法：

from IPython.lib.deepreload import reload
%load_ext autoreload
%autoreload 2

在执行此操作之前加载模块将导致它们无法重新加载，即使使用手动重新加载（模块名称）也是如此>。我仍然很少遇到类方法未重新加载的莫名其妙的问题，而我还没有研究过。

Answer 9

另一种选择：

$ cat << EOF > ~/.ipython/profile_default/startup/50-autoreload.ipy
%load_ext autoreload
%autoreload 2
EOF

在 Ubuntu 14.04 上的 ipython 和 ipython3 v5.1.0 上进行验证。

Answer 10

在模块导入之前包括这些行，其中第一行测试自动重新加载扩展是否已加载：

if 'autoreload' not in get_ipython().extension_manager.loaded:
    %load_ext autoreload
%autoreload 2

import sys
    .
    .
    .

Answer 11

我讨厌在长线程中添加另一个答案，但我找到了一个解决方案，可以在 %run() 其他人可能会觉得有用（无论如何我都有）

del 您希望在 iPython 中的 sys.modules 运行时重新加载的子模块：

In[1]: from sys import modules
In[2]: del modules["mymodule.mysubmodule"] # tab completion can be used like mymodule.<tab>!

现在您的脚本将递归地重新加载此子模块：

In[3]: %run myscript.py

Answer 12

请注意，如果您手动保存更改的文件（例如使用 ctrl+s 或 cmd+s），上面提到的 autoreload 仅适用于 IntelliJ。它似乎不适用于自动保存。

Answer 13

在 Anaconda 上的 Jupyter Notebooks 上，执行以下操作：

%load_ext autoreload
%autoreload 2

生成消息：

自动重新加载扩展已加载。要重新加载它，请使用：
%reload_ext 自动重载

看起来最好这样做：

%reload_ext autoreload
%autoreload 2

版本信息：

笔记本服务器的版本是 5.0.0，运行于：
Python 3.6.2 |Anaconda 公司| （默认，2017 年 9 月 20 日，13:35:58）[MSC v.1900 32 位（英特尔）]

Answer 14

任何子对象都不会被重新加载，我相信你必须使用 IPython 的 deepreload 。