Tải lại các mô hình con trong IPython

Hiện tại tôi đang làm việc trên một dự án python có chứa các mô đun con và sử dụng numpy / scipy. Ipython được sử dụng như bảng điều khiển tương tác. Thật không may, tôi không hài lòng lắm với quy trình làm việc mà tôi đang sử dụng ngay bây giờ, tôi sẽ đánh giá cao một số lời khuyên.

Trong IPython, khung được tải đơn giản import lệnh . Tuy nhiên, thường là cần thiết để thay đổi mã trong một trong các mô hình con của khung. Tại thời điểm này, một mô hình đã được tải và tôi sử dụng IPython để tương tác với nó.

Bây giờ, khung chứa nhiều mô-đun phụ thuộc lẫn nhau, tức là khi khung được tải ban đầu, mô-đun chính đang nhập và định cấu hình các mô hình con. Các thay đổi đối với mã chỉ được thực hiện nếu mô-đun được tải lại bằng cách sử dụng reload(main_mod.sub_mod). Điều này là cồng kềnh vì tôi cần tải lại tất cả các mô-đun đã thay đổi bằng cách sử dụng đường dẫn đầy đủ. Sẽ rất thuận tiện nếu reload(main_module)cũng tải lại tất cả các mô-đun phụ, nhưng không tải lại numpy / scipy ..

IPython đi kèm với một số phép thuật tải lại tự động :

%load_ext autoreload
%autoreload 2

Nó sẽ tải lại tất cả các mô-đun thay đổi mỗi lần trước khi thực hiện một dòng mới. Cách làm việc này hơi khác so với dreload. Một số hãy cẩn thận áp dụng, gõ %autoreload?để xem những gì có thể đi sai.

Nếu bạn muốn luôn bật cài đặt này, hãy sửa đổi tệp cấu hình IPython của bạn ~/.ipython/profile_default/ipython_config.py[1] và nối thêm:

c.InteractiveShellApp.extensions = ['autoreload']     
c.InteractiveShellApp.exec_lines = ['%autoreload 2']

Tín dụng cho @Kos thông qua một bình luận dưới đây.

[1] Nếu bạn không có tệp ~/.ipython/profile_default/ipython_config.py, bạn cần gọi ipython profile createtrước. Hoặc các tập tin có thể được đặt tại $IPYTHONDIR.

Trong IPython 0.12 (và có thể sớm hơn), bạn có thể sử dụng:

%load_ext autoreload
%autoreload 2

Điều này về cơ bản giống như câu trả lời của pv. , ngoại trừ việc tiện ích mở rộng đã được đổi tên và hiện được tải bằng cách sử dụng %load_ext.

Vì một số lý do, dường như không %autoreload, cũng không dreloadhoạt động cho tình huống khi bạn nhập mã từ sổ này sang sổ khác . Chỉ Python đơn giản reloadhoạt động:

reload(module)

Dựa trên [1] .

IPython cung cấp dreload()để tải lại đệ quy tất cả các mô hình con. Cá nhân, tôi thích sử dụng %run()lệnh ma thuật (mặc dù nó không thực hiện tải lại sâu, như được chỉ ra bởi John Salvatier trong các bình luận).

Mô-đun có tên importlibcho phép truy cập để nhập nội bộ. Đặc biệt, nó cung cấp chức năng importlib.reload():

import importlib
importlib.reload(my_module)

Trái ngược với %autoreload,importlib.reload() cũng đặt lại các biến toàn cục được đặt trong mô-đun. Trong hầu hết các trường hợp, đó là những gì bạn muốn.

importlibchỉ khả dụng kể từ Python 3.1. Đối với phiên bản cũ hơn, bạn phải sử dụng mô-đun imp.

http://shawnleezx.github.io/blog/2015/08/03/some-notes-on-ipython-startup-script/

Để tránh gõ các hàm ma thuật đó nhiều lần, chúng có thể được đặt trong tập lệnh khởi động ipython (Đặt tên cho hậu tố .py dưới .ipython / profile_default / startup. Tất cả các tập lệnh python trong thư mục đó sẽ được tải theo thứ tự từ vựng), mà trông giống như sau:

from IPython import get_ipython
ipython = get_ipython()

ipython.magic("pylab")
ipython.magic("load_ext autoreload")
ipython.magic("autoreload 2")

Còn cái này thì sao:

import inspect

# needs to be primed with an empty set for loaded
def recursively_reload_all_submodules(module, loaded=None):
    for name in dir(module):
        member = getattr(module, name)
        if inspect.ismodule(member) and member not in loaded:
            recursively_reload_all_submodules(member, loaded)
    loaded.add(module)
    reload(module)

import mymodule
recursively_reload_all_submodules(mymodule, set())

Điều này sẽ tải lại toàn bộ cây mô-đun và mô hình con mà bạn cung cấp một cách hiệu quả. Bạn cũng có thể đặt chức năng này trong .ipythonrc (tôi nghĩ) để nó được tải mỗi khi bạn khởi động trình thông dịch.

Một lựa chọn khác:

$ cat << EOF > ~/.ipython/profile_default/startup/50-autoreload.ipy
%load_ext autoreload
%autoreload 2
EOF

Đã xác minh trên ipython và ipython3 v5.1.0 trên Ubuntu 14.04.

Thực hành tiêu chuẩn của tôi để tải lại là kết hợp cả hai phương pháp sau lần mở đầu tiên của IPython:

from IPython.lib.deepreload import reload
%load_ext autoreload
%autoreload 2

Tải các mô-đun trước khi làm điều này sẽ khiến chúng không được tải lại, ngay cả với một hướng dẫn reload(module_name). Tôi vẫn, rất hiếm khi gặp các vấn đề không thể giải thích được với các phương thức lớp không tải lại mà tôi chưa xem xét.

Lưu ý rằng các đề cập ở trên autoreloadchỉ hoạt động trong IntelliJ nếu bạn lưu tệp thay đổi theo cách thủ công (ví dụ: sử dụng ctrl + s hoặc cmd + s). Nó dường như không hoạt động với tiết kiệm tự động.

Trên Notebook Jupyter trên Anaconda, thực hiện việc này:

%load_ext autoreload
%autoreload 2

tạo ra thông điệp:

Phần mở rộng tự động tải đã được tải. Để tải lại, sử dụng: %reload_ext autoreload

Có vẻ như nó thích hợp hơn để làm:

%reload_ext autoreload
%autoreload 2

Thông tin phiên bản:

Phiên bản của máy chủ máy tính xách tay là 5.0.0 và đang chạy trên: Python 3.6.2 | Anaconda, Inc. | (mặc định, ngày 20 tháng 9 năm 2017, 13:35:58) [MSC v.1900 32 bit (Intel)]

Bất kỳ tiểu dự án nào sẽ không được tải lại bởi điều này, tôi tin rằng bạn phải sử dụng tải lại sâu của IPython cho điều đó.