Using Iceberg tables in Python shell glue job

I want to use iceberg tables in the Python shell job to load data to Target(Redshift tables). Can someone guide how to use iceberg tables in Python Shell glue job?.

Thank you!

Argomenti

Analisi

Tag

AWS Glue

Lingua

English

Duraiaws

posta un anno fa254 visualizzazioni

1 Risposta

Più recenti
Maggior numero di voti
Maggior numero di commenti

Queste risposte sono utili? Dai un voto positivo alla risposta corretta per aiutare la community a trarre vantaggio dalle tue conoscenze.

You need to use a pure Python library to read Iceberg from a Shell, try pyiceberg
See the last option in this blog: https://www.dremio.com/blog/3-ways-to-use-python-with-apache-iceberg/

ESPERTO

Gonzalo Herreros

con risposta un anno fa

Contenuto pertinente

Come posso utilizzare librerie Python esterne nel processo ETL di AWS Glue 2.0?
AWS UFFICIALEAggiornata 2 anni fa
Come posso risolvere l'errore "Unable to import module" che ricevo quando eseguo il codice Lambda in Python?
AWS UFFICIALEAggiornata 4 mesi fa
Come posso utilizzare le librerie Python esterne nel processo ETL di AWS Glue 1.0 o 0.9?
AWS UFFICIALEAggiornata un anno fa
Come posso usare Apache Iceberg con un Catalogo dati AWS Glue multi-account in Spark?
AWS UFFICIALEAggiornata un anno fa