“Pandas lesen S3 -Objekt im Jupyter -Notizbuch” Code-Antworten

Pandas lesen S3 -Objekt im Jupyter -Notizbuch

import s3fs

# csv file
df = pd.read_csv('s3://{bucket_name}/{path_to_file}')

# parquet file
df = pd.read_parquet('s3://{bucket_name}/{path_to_file}')
Vinoo Palayoor

Pandas lesen S3 -Objekt im Jupyter -Notizbuch

import boto3
s3_resource = boto3.resource('s3')
bucket = s3_resource.Bucket(name='{bucket_name}')
for file in bucket.objects.all():
    # do what you want with the files
    # for example:
    if 'filter' in file.key:
        print(file.key)
        new_df = pd.read_csv('s3:://{bucket_name}/{}'.format(file.key))
Vinoo Palayoor

Ähnliche Antworten wie “Pandas lesen S3 -Objekt im Jupyter -Notizbuch”

Fragen ähnlich wie “Pandas lesen S3 -Objekt im Jupyter -Notizbuch”

Weitere verwandte Antworten zu “Pandas lesen S3 -Objekt im Jupyter -Notizbuch” auf Python

Durchsuchen Sie beliebte Code-Antworten nach Sprache

Durchsuchen Sie andere Codesprachen

Shell/Bash
C#
C++
C
CSS
HTML
Java
JavaScript
Objective-C
PHP
Python
Sql
Swift
Ruby
TypeScript
Go
Kotlin
Assembly
R
VBA
Scala
Rust
Dart
Elixir
Clojure
Haskell
Matlab
Erlang
Cobol
Fortran
Scheme
Perl
Groovy
Lua
Julia
Delphi
Abap
Lisp
Prolog
Pascal
ActionScript
Basic
Solidity
PowerShell
GDScript
Excel