IPythonでサブモジュールをリロードする

現在、私はサブモジュールを含み、numpy / scipyを使用するpythonプロジェクトに取り組んでいます。Ipythonはインタラクティブコンソールとして使用されます。残念ながら、現在使用しているワークフローにはあまり満足していません。アドバイスをいただければ幸いです。

IPythonでは、フレームワークは単純なimportコマンドによってロードされます。ただし、多くの場合、フレームワークのサブモジュールの1つでコードを変更する必要があります。この時点でモデルは既にロードされており、IPythonを使用してモデルと対話します。

現在、フレームワークには相互に依存する多くのモジュールが含まれています。つまり、フレームワークが最初にロードされたとき、メインモジュールはサブモジュールをインポートして構成しています。コードの変更は、モジュールがを使用してリロードされた場合にのみ実行されますreload(main_mod.sub_mod)。フルパスを使用して、変更されたすべてのモジュールを個別にリロードする必要があるため、これは面倒です。reload(main_module)numpy / scipy。を再ロードせずに、すべてのサブモジュールも再ロードする場合は、非常に便利です。

IPythonには、いくつかの自動リロードマジックが付属しています。

%load_ext autoreload
%autoreload 2

新しい行を実行する前に、変更されたすべてのモジュールを毎回リロードします。これが機能する方法は、と少し異なりdreloadます。いくつかの注意事項が適用されます%autoreload?。何が問題かを確認するために入力してください。

この設定を常に有効にする場合は、IPython構成ファイル~/.ipython/profile_default/ipython_config.py[1]を変更して追加します。

c.InteractiveShellApp.extensions = ['autoreload']     
c.InteractiveShellApp.exec_lines = ['%autoreload 2']

下記のコメントを介して@Kosへのクレジット。

[1]ファイルがない場合は、最初~/.ipython/profile_default/ipython_config.pyに呼び出す必要がありますipython profile create。または、ファイルはにあります$IPYTHONDIR。

IPython 0.12（およびおそらくそれ以前）では、これを使用できます。

%load_ext autoreload
%autoreload 2

これは本質的にはpvによる回答と同じです。。ただし、拡張機能の名前が変更され、を使用してロードされるようになりました%load_ext。

何らかの理由で、ノートブックから別のノートブックにコードをインポートする場合、どちら%autoreloadもdreloadこの状況では機能しません。プレーンなPythonのみが機能します。reload

reload(module)

[1]に基づく。

IPythonはdreload()、すべてのサブモジュールを再帰的にリロードすることを提案しています。個人的には、私は%run()magicコマンドを使用することを好みます（ただし、John Salvatierがコメントで指摘したように、ディープリロードは実行しません）。

importlib内部モジュールをインポートするためのアクセスを許可するという名前のモジュール。特に、それは機能を提供しますimportlib.reload()：

import importlib
importlib.reload(my_module)

とは逆に%autoreload、importlib.reload()モジュールに設定されているグローバル変数もリセットします。ほとんどの場合、それで十分です。

importlibPython 3.1以降でのみ使用できます。古いバージョンでは、moduleを使用する必要がありますimp。

http://shawnleezx.github.io/blog/2015/08/03/some-notes-on-ipython-startup-script/

それらの魔法の関数を何度も入力することを避けるために、それらをipython起動スクリプトに入れることができます（.ipython / profile_default / startupの下に.pyサフィックスを付けて名前を付けます。そのフォルダーの下のすべてのpythonスクリプトは字句順に読み込まれます）。次のようになります。

from IPython import get_ipython
ipython = get_ipython()

ipython.magic("pylab")
ipython.magic("load_ext autoreload")
ipython.magic("autoreload 2")

これはどう：

import inspect

# needs to be primed with an empty set for loaded
def recursively_reload_all_submodules(module, loaded=None):
    for name in dir(module):
        member = getattr(module, name)
        if inspect.ismodule(member) and member not in loaded:
            recursively_reload_all_submodules(member, loaded)
    loaded.add(module)
    reload(module)

import mymodule
recursively_reload_all_submodules(mymodule, set())

これにより、指定したモジュールとサブモジュールのツリー全体が効果的にリロードされます。この関数を.ipythonrc（私はそう思う）に置くこともできるので、インタープリターを開始するたびにロードされます。

別のオプション：

$ cat << EOF > ~/.ipython/profile_default/startup/50-autoreload.ipy
%load_ext autoreload
%autoreload 2
EOF

Ubuntu 14.04上のipythonおよびipython3 v5.1.0で検証済み。

リロードの標準的な方法は、を最初に開いた後に両方の方法を組み合わせることですIPython。

from IPython.lib.deepreload import reload
%load_ext autoreload
%autoreload 2

これを行う前にモジュールをロードすると、たとえマニュアルを使用しても、それらは再ロードされませんreload(module_name)。まだ、非常にまれに、まだ調べていないクラスメソッドがリロードされないという不可解な問題が発生します。

上記autoreloadはIntelliJでのみ機能することに注意してください（ctrl + sまたはcmd + sを使用して）変更されたファイルを手動で保存する場合。自動保存では動作しないようです。

AnacondaのJupyter Notebooksでこれを行う：

%load_ext autoreload
%autoreload 2

メッセージを生成しました：

自動再読み込み拡張機能は既に読み込まれています。それをリロードするには、以下を使用します： %reload_ext autoreload

それを行うことが望ましいようです：

%reload_ext autoreload
%autoreload 2

バージョン情報：

ノートブックサーバーのバージョンは5.0.0で、次で実行されています：Python 3.6.2 | Anaconda、Inc. | （デフォルト、2017年9月20日13:35:58）[MSC v.1900 32ビット（Intel）]

これによってサブオブジェクトがリロードされることはありません。そのためにはIPythonのdeepreloadを使用する必要があると思います。