Verweisen auf relative Ressourcenpfade bei der Arbeit mit einem Code-Repository

Wir arbeiten mit einem Code-Repository, das sowohl unter Windows als auch unter Linux bereitgestellt wird - manchmal in verschiedenen Verzeichnissen. Wie sollte eines der Module im Projekt auf eine der Nicht-Python-Ressourcen im Projekt verweisen (CSV-Dateien usw.)?

Wenn wir so etwas machen wie:

thefile=open('test.csv')

oder:

thefile=open('../somedirectory/test.csv')

Es funktioniert nur, wenn das Skript aus einem bestimmten Verzeichnis oder einer Teilmenge der Verzeichnisse ausgeführt wird.

Was ich gerne machen würde, ist so etwas wie:

path=getBasePathOfProject()+'/somedirectory/test.csv'
thefile=open(path)

Ist es möglich?

Versuchen Sie, einen Dateinamen relativ zum aktuellen Dateipfad zu verwenden. Beispiel für './my_file':

fn = os.path.join(os.path.dirname(__file__), 'my_file')

In Python 3.4+ können Sie auch pathlib verwenden :

fn = pathlib.Path(__file__).parent / 'my_file'

Wenn Sie Setup-Tools verwenden oder verteilen (eine setup.py-Installation), scheint der "richtige" Weg, auf diese gepackten Ressourcen zuzugreifen, package_resources zu verwenden.

In Ihrem Fall wäre das Beispiel

import pkg_resources
my_data = pkg_resources.resource_string(__name__, "foo.dat")

Was natürlich die Ressource und die gelesenen Binärdaten liest, wäre der Wert von my_data

Wenn Sie nur den Dateinamen benötigen, können Sie auch verwenden

resource_filename(package_or_requirement, resource_name)

Beispiel:

resource_filename("MyPackage","foo.dat")

Der Vorteil ist, dass es garantiert funktioniert, auch wenn es sich um eine Archivverteilung wie ein Ei handelt.

Siehe http://packages.python.org/distribute/pkg_resources.html#resourcemanager-api

In Python beziehen sich die Pfade auf das aktuelle Arbeitsverzeichnis , in den meisten Fällen auf das Verzeichnis, in dem Sie Ihr Programm ausführen. Das aktuelle Arbeitsverzeichnis ist sehr wahrscheinlich nicht dasselbe wie das Verzeichnis Ihrer Moduldatei. Daher ist die Verwendung eines Pfads relativ zu Ihrer aktuellen Moduldatei immer eine schlechte Wahl.

Die Verwendung des absoluten Pfades sollte die beste Lösung sein:

import os
package_dir = os.path.dirname(os.path.abspath(__file__))
thefile = os.path.join(package_dir,'test.cvs')

Ich benutze oft etwas Ähnliches:

import os
DATA_DIR = os.path.abspath(os.path.join(os.path.dirname(__file__), 'datadir'))

# if you have more paths to set, you might want to shorten this as
here = lambda x: os.path.abspath(os.path.join(os.path.dirname(__file__), x))
DATA_DIR = here('datadir') 

pathjoin = os.path.join
# ...
# later in script
for fn in os.listdir(DATA_DIR):
    f = open(pathjoin(DATA_DIR, fn))
    # ...

Die Variable

__file__

Enthält den Dateinamen des Skripts, in das Sie diesen Code schreiben, sodass Sie Pfade relativ zum Skript erstellen können, die jedoch weiterhin mit absoluten Pfaden geschrieben sind. Es funktioniert aus mehreren Gründen recht gut:

• Pfad ist absolut, aber immer noch relativ
• Das Projekt kann weiterhin in einem relativen Container bereitgestellt werden

Sie müssen jedoch auf Plattformkompatibilität achten - Windows os.pathsep unterscheidet sich von UNIX.

import os
cwd = os.getcwd()
path = os.path.join(cwd, "my_file")
f = open(path)

Sie versuchen auch, Ihre cwdVerwendung zu normalisieren os.path.abspath(os.getcwd()). Mehr Infos hier .

Sie können die eingebaute __file__Variable verwenden. Es enthält den Pfad der aktuellen Datei. Ich würde getBaseOfProject in einem Modul im Stammverzeichnis Ihres Projekts implementieren. Dort würde ich den Wegteil bekommen __file__und das zurückgeben. Diese Methode kann dann überall in Ihrem Projekt verwendet werden.

Ich war hier ein bisschen ratlos. Wollte einige Ressourcendateien in eine Raddatei packen und darauf zugreifen. Hat die Verpackung die Manifestdatei verwendet, aber pip install hat sie nur installiert, wenn es sich um ein Unterverzeichnis handelt. In der Hoffnung, dass diese Szenenaufnahmen helfen

├── cnn_client
│   ├── image_preprocessor.py
│   ├── __init__.py
│   ├── resources
│   │   ├── mscoco_complete_label_map.pbtxt
│   │   ├── retinanet_complete_label_map.pbtxt
│   │   └── retinanet_label_map.py
│   ├── tf_client.py

MANIFEST.in

recursive-include cnn_client/resources *

Erstellt ein Weel mit Standard setup.py. pip hat die Raddatei installiert. Überprüfen Sie nach der Installation, ob Ressourcen installiert sind. Sie sind

ls /usr/local/lib/python2.7/dist-packages/cnn_client/resources

mscoco_complete_label_map.pbtxt
retinanet_complete_label_map.pbtxt 
 retinanet_label_map.py  

In tfclient.py, um auf diese Dateien zuzugreifen. von

templates_dir = os.path.join(os.path.dirname(__file__), 'resources')
 file_path = os.path.join(templates_dir, \
            'mscoco_complete_label_map.pbtxt')
        s = open(file_path, 'r').read()

Und es funktioniert.

Ich habe lange Zeit damit verbracht, die Antwort darauf herauszufinden, aber ich habe sie endlich verstanden (und es ist eigentlich ganz einfach):

import sys
import os
sys.path.append(os.getcwd() + '/your/subfolder/of/choice')

# now import whatever other modules you want, both the standard ones,
# as the ones supplied in your subfolders

Dadurch wird der relative Pfad Ihres Unterordners an die Verzeichnisse angehängt, in denen Python angezeigt werden soll. Es ist ziemlich schnell und schmutzig, aber es funktioniert wie ein Zauber :)