Cách tham chiếu đường dẫn tài nguyên tương đối khi làm việc với kho lưu trữ mã

Chúng tôi đang làm việc với một kho lưu trữ mã được triển khai cho cả Windows và Linux - đôi khi trong các thư mục khác nhau. Làm thế nào một trong các mô-đun bên trong dự án đề cập đến một trong các tài nguyên không phải là Python trong dự án (tệp CSV, v.v.)?

Nếu chúng ta làm một cái gì đó như:

thefile=open('test.csv')

hoặc là:

thefile=open('../somedirectory/test.csv')

Nó sẽ chỉ hoạt động khi tập lệnh được chạy từ một thư mục cụ thể hoặc một tập hợp con của các thư mục.

Những gì tôi muốn làm là một cái gì đó như:

path=getBasePathOfProject()+'/somedirectory/test.csv'
thefile=open(path)

Có thể không?

Cố gắng sử dụng tên tệp liên quan đến đường dẫn tệp hiện tại. Ví dụ cho './my_file':

fn = os.path.join(os.path.dirname(__file__), 'my_file')

Trong Python 3.4+, bạn cũng có thể sử dụng pathlib :

fn = pathlib.Path(__file__).parent / 'my_file'

Nếu bạn đang sử dụng các công cụ thiết lập hoặc phân phối (cài đặt setup.py) thì cách "đúng" để truy cập các tài nguyên được đóng gói này dường như đang sử dụng gói_resource.

Trong trường hợp của bạn, ví dụ sẽ là

import pkg_resources
my_data = pkg_resources.resource_string(__name__, "foo.dat")

Tất nhiên những gì đọc tài nguyên và dữ liệu nhị phân đọc sẽ là giá trị của my_data

Nếu bạn chỉ cần tên tệp, bạn cũng có thể sử dụng

resource_filename(package_or_requirement, resource_name)

Thí dụ:

resource_filename("MyPackage","foo.dat")

Ưu điểm là nó được đảm bảo hoạt động ngay cả khi nó là một bản phân phối lưu trữ như một quả trứng.

Xem http://packages.python.org/distribution/pkg_resource.html#resourcemanager-api

Trong Python, các đường dẫn có liên quan đến thư mục làm việc hiện tại , trong hầu hết các trường hợp là thư mục mà bạn chạy chương trình của mình. Thư mục làm việc hiện tại rất có thể không giống với thư mục của tệp mô-đun của bạn, vì vậy sử dụng một đường dẫn liên quan đến tệp mô-đun hiện tại của bạn luôn là một lựa chọn tồi.

Sử dụng đường dẫn tuyệt đối nên là giải pháp tốt nhất:

import os
package_dir = os.path.dirname(os.path.abspath(__file__))
thefile = os.path.join(package_dir,'test.cvs')

Tôi thường sử dụng một cái gì đó tương tự như thế này:

import os
DATA_DIR = os.path.abspath(os.path.join(os.path.dirname(__file__), 'datadir'))

# if you have more paths to set, you might want to shorten this as
here = lambda x: os.path.abspath(os.path.join(os.path.dirname(__file__), x))
DATA_DIR = here('datadir') 

pathjoin = os.path.join
# ...
# later in script
for fn in os.listdir(DATA_DIR):
    f = open(pathjoin(DATA_DIR, fn))
    # ...

Biến

__file__

giữ tên tệp của tập lệnh mà bạn viết mã đó, để bạn có thể tạo các đường dẫn liên quan đến tập lệnh, nhưng vẫn được viết bằng các đường dẫn tuyệt đối. Nó hoạt động khá tốt vì nhiều lý do:

• đường dẫn là tuyệt đối, nhưng vẫn tương đối
• dự án vẫn có thể được triển khai trong một thùng chứa tương đối

Nhưng bạn cần xem khả năng tương thích nền tảng - os.pathsep của Windows khác với UNIX.

import os
cwd = os.getcwd()
path = os.path.join(cwd, "my_file")
f = open(path)

Bạn cũng cố gắng bình thường hóa việc cwdsử dụng của bạn os.path.abspath(os.getcwd()). Thêm thông tin ở đây .

Bạn có thể sử dụng xây dựng trong __file__biến. Nó chứa đường dẫn của tập tin hiện tại. Tôi sẽ triển khai getBaseOfProject trong một mô-đun trong thư mục gốc của dự án của bạn. Ở đó tôi sẽ có được phần đường dẫn __file__và sẽ trả lại điều đó. Phương pháp này sau đó có thể được sử dụng ở mọi nơi trong dự án của bạn.

Tôi đã bối rối ở đây một chút. Muốn gói một số tệp tài nguyên vào một tệp bánh xe và truy cập chúng. Có bao bì sử dụng tệp kê khai, nhưng cài đặt pip không cài đặt nó trừ khi nó là một thư mục con. Hy vọng những bức ảnh sceen này sẽ giúp

├── cnn_client
│   ├── image_preprocessor.py
│   ├── __init__.py
│   ├── resources
│   │   ├── mscoco_complete_label_map.pbtxt
│   │   ├── retinanet_complete_label_map.pbtxt
│   │   └── retinanet_label_map.py
│   ├── tf_client.py

MANIFEST.in

recursive-include cnn_client/resources *

Tạo một weel bằng cách sử dụng thiết lập tiêu chuẩn. Pip cài đặt tập tin bánh xe. Sau khi cài đặt kiểm tra nếu tài nguyên được cài đặt. họ đang

ls /usr/local/lib/python2.7/dist-packages/cnn_client/resources

mscoco_complete_label_map.pbtxt
retinanet_complete_label_map.pbtxt 
 retinanet_label_map.py  

Trong tfclient.py để truy cập các tệp này. từ

templates_dir = os.path.join(os.path.dirname(__file__), 'resources')
 file_path = os.path.join(templates_dir, \
            'mscoco_complete_label_map.pbtxt')
        s = open(file_path, 'r').read()

Và nó hoạt động.

Tôi đã dành một thời gian dài để tìm ra câu trả lời cho điều này, nhưng cuối cùng tôi đã nhận được nó (và nó thực sự rất đơn giản):

import sys
import os
sys.path.append(os.getcwd() + '/your/subfolder/of/choice')

# now import whatever other modules you want, both the standard ones,
# as the ones supplied in your subfolders

Điều này sẽ nối đường dẫn tương đối của thư mục con của bạn vào các thư mục để python tìm trong Nó khá nhanh và bẩn, nhưng nó hoạt động như một bùa mê :)