Geschlossen. Diese Frage entspricht nicht den Richtlinien für Stapelüberlauf . Derzeit werden keine Antworten akzeptiert. Möchten Sie diese Frage verbessern? Aktualisieren Sie die Frage so dass es beim Thema für Stack - Überlauf. Geschlossen vor 2 Jahren . Verbessere diese Frage Ich möchte eine...
Ich muss Code in Python schreiben, der die erforderliche Datei aus einem Amazon S3-Bucket löscht. Ich kann eine Verbindung zum Amazon S3-Bucket herstellen und auch Dateien speichern. Wie kann ich eine Datei löschen?
Ich möchte täglich einige Dateien aus einem Produktions-Bucket in einen Entwicklungs-Bucket kopieren. Beispiel: Kopieren Sie ProductionBucket / Feed / Feedname / Datum in DevelopmentBucket / Feed / Feedname / Datum Da die gewünschten Dateien so tief in der Ordnerstruktur liegen, ist es zu...
Angenommen, ich habe einen Computer, den ich in eine bestimmte Protokolldatei schreiben möchte, die in einem S3-Bucket gespeichert ist. Der Computer muss also über Schreibfähigkeiten für diesen Bucket verfügen, aber ich möchte nicht, dass er Dateien in diesem Bucket überschreiben oder löschen kann...
Ich habe eine Textdatei in S3 gespeichert, die eine tabulatorgetrennte Tabelle ist. Ich möchte es in Pandas laden, kann es aber nicht zuerst speichern, da ich auf einem Heroku-Server laufe. Folgendes habe ich bisher. import io import boto3 import os import pandas as
Ich suche nach Ratschlägen oder bewährten Methoden zum Sichern des S3-Buckets. Der Zweck des Sicherns von Daten aus S3 besteht darin, Datenverlust aus folgenden Gründen zu verhindern: S3 Problem Problem, bei dem ich diese Daten versehentlich aus S3 lösche Nach einigen Nachforschungen sehe...
Gibt es Abhängigkeiten zwischen Spark und Hadoop ? Wenn nicht, gibt es Funktionen, die ich vermissen werde, wenn ich Spark ohne Hadoop ausführe
Ich starte ein Bash-Skript, das einen Pfad in S3 (wie im Befehl ls angegeben ) verwendet und den Inhalt aller Dateiobjekte an speichert stdout. Im Wesentlichen möchte ich mit cat /path/to/files/*Ausnahme von S3 replizieren , z s3cat '/bucket/path/to/files/*'. Meine erste Neigung, die Optionen zu...
Ich habe in s3 einen Ordner mit dem Namen "test" erstellt und "test_1.jpg", "test_2.jpg" in "test" verschoben. Wie kann ich mit boto den Ordner "test" löschen?
Wenn ich eine Million Bilder hätte, wäre es besser, sie in einer Ordner- / Unterordnerhierarchie zu speichern oder sie alle direkt in einen Bucket (ohne Ordner) zu werfen? Würde das Ablegen aller Bilder in einen hierarchielosen Bucket die LIST-Operationen verlangsamen? Gibt es einen erheblichen...
AWS verfügt über mehrere Speicherorte für Speicher- und EC2-Instanzen, die mit unterschiedlichen Preisen ausgeführt werden können. Wie kann ich feststellen, welcher Standort für eine bestimmte Region am besten geeignet ist? Ist es intuitiv (näher an Ihrer Serving-Region ist das Beste) oder gibt es...
Weiß jemand, wie man das macht? Bisher konnte ich über Google nichts Nützliches finden. Ich möchte wirklich ein lokales Repo einrichten und git pushes in S3 veröffentlichen. Die Idee ist, die lokale Versionskontrolle über Assets, aber den Remotespeicher in S3 zu haben. Kann das gemacht werden und...
Ich möchte mit Java überprüfen, ob ein Schlüssel in einem bestimmten Bucket vorhanden ist. Ich habe mir die API angesehen, aber es gibt keine nützlichen Methoden. Ich habe versucht zu verwenden, getObjectaber es warf eine Ausnahme.
Ich verwende derzeit ein node.js-Plugin namens s3-upload-stream, um sehr große Dateien an Amazon S3 zu streamen. Es verwendet die mehrteilige API und funktioniert größtenteils sehr gut. Dieses Modul zeigt jedoch sein Alter an und ich musste bereits Änderungen daran vornehmen (der Autor hat es...
Ich habe die folgende Ordnerstruktur in S3. Gibt es eine Möglichkeit, alle Dateien unter einem bestimmten Ordner rekursiv zu entfernen (z foo/bar1 or foo or foo/bar2/1. B. ..) foo/bar1/1/.. foo/bar1/2/.. foo/bar1/3/.. foo/bar2/1/.. foo/bar2/2/.. foo/bar2/3/..
Mit boto3 kann ich auf meinen AWS S3-Bucket zugreifen: s3 = boto3.resource('s3') bucket = s3.Bucket('my-bucket-name') Jetzt enthält der Bucket einen Ordner first-level, der selbst mehrere Unterordner enthält , die beispielsweise mit einem Zeitstempel benannt sind 1456753904534. Ich muss den Namen...
Weiß jemand, ob die Anzahl der Objekte, die ich in einen S3-Bucket legen kann, begrenzt ist? Kann ich eine Million, 10 Millionen usw. in einen einzigen Eimer geben?
Vielleicht bin ich blind, aber ich kann in der S3-Dokumentation nicht die maximale Dateinamenlänge finden, die in S3 hochgeladen werden kann.
Ich benutze boto3, um Dateien aus dem s3-Bucket zu bekommen. Ich brauche eine ähnliche Funktionalität wieaws s3 sync Mein aktueller Code ist #!/usr/bin/python import boto3 s3=boto3.client('s3') list=s3.list_objects(Bucket='my_bucket_name')['Contents'] for key in list:
Ich lade eine Datei mit Java auf S3 hoch - das habe ich bisher: AmazonS3 s3 = new AmazonS3Client(new BasicAWSCredentials("XX","YY")); List<Bucket> buckets = s3.listBuckets(); s3.putObject(new PutObjectRequest(buckets.get(0).getName(), fileName, stream, new ObjectMetadata())); Die Datei wird...