Using Iceberg tables in Python shell glue job

I want to use iceberg tables in the Python shell job to load data to Target(Redshift tables). Can someone guide how to use iceberg tables in Python Shell glue job?.

Thank you!

Themen

Analysen

Tags

AWS Glue

Sprache

English

Duraiaws

gefragt vor einem Jahr254 Aufrufe

1 Antwort

Neueste
Die meisten Stimmen
Die meisten Kommentare

Sind diese Antworten hilfreich? Stimmen Sie der richtigen Antwort zu, damit die Community von Ihrem Wissen profitieren kann.

You need to use a pure Python library to read Iceberg from a Shell, try pyiceberg
See the last option in this blog: https://www.dremio.com/blog/3-ways-to-use-python-with-apache-iceberg/

EXPERTE

Gonzalo Herreros

beantwortet vor einem Jahr

Relevanter Inhalt

Wie verwende ich externe Python-Bibliotheken in meinem AWS-Glue-2.0-ETL-Job?
AWS OFFICIALAktualisiert vor 2 Jahren
Wie kann ich Apache Iceberg mit einem kontoübergreifenden AWS Glue-Datenkatalog in Spark verwenden?
AWS OFFICIALAktualisiert vor einem Jahr
Wie verwende ich externe Python-Bibliotheken in meinem AWS Glue 1.0 oder 0.9 ETL-Job?
AWS OFFICIALAktualisiert vor einem Jahr
Warum fügt meine MSCK REPAIR TABLE-Abfrage keine Partitionen zum AWS Glue Data Catalog hinzu?
AWS OFFICIALAktualisiert vor 2 Jahren