“Leer Parquet de S3 y convertir a DataFrame” Código de respuesta

Pandas DataFrame a Parquet S3

import awswrangler as wr
wr.pandas.to_parquet(
    dataframe=df,
    path="s3://my-bucket/key/my-file.parquet"
)
batman_on_leave

Leer Parquet de S3 y convertir a DataFrame

import pyarrow.parquet as pq
import s3fs

dataset = pq.ParquetDataset('s3://<s3_path_to_folder_or_file>', 
filesystem=s3fs.S3FileSystem(), filters=[('colA', '=', 'some_value'), ('colB', '>=', some_number)])
table = dataset.read()
df = table.to_pandas()
Stupid Snake

Respuestas similares a “Leer Parquet de S3 y convertir a DataFrame”

Preguntas similares a “Leer Parquet de S3 y convertir a DataFrame”

Explore las respuestas de código populares por idioma

Explorar otros lenguajes de código