Using Iceberg tables in Python shell glue job

I want to use iceberg tables in the Python shell job to load data to Target(Redshift tables). Can someone guide how to use iceberg tables in Python Shell glue job?.

Thank you!

Sujets

Analytique

Balises

AWS Glue

Langue

English

Duraiaws

demandé il y a un an254 vues

1 réponse

Le plus récent
Le plus de votes
La plupart des commentaires

Ces réponses sont-elles utiles ? Votez pour la bonne réponse pour aider la communauté à bénéficier de vos connaissances.

You need to use a pure Python library to read Iceberg from a Shell, try pyiceberg
See the last option in this blog: https://www.dremio.com/blog/3-ways-to-use-python-with-apache-iceberg/

EXPERT

Gonzalo Herreros

répondu il y a un an

Contenus pertinents

Data labeling sagemaker ground truth
Jose G
demandé il y a 7 mois
[ACTION REQUIRED] Update your TLS connections to 1.2 : quelles applications sont concernées ?
rePost-User-7550145
demandé il y a un an
My account is not recognized
juan ortega
demandé il y a un an
LIghstail Instance in suspens
rePost-User-6587585
demandé il y a un an
Comment puis-je résoudre l’erreur « Unable to import module » qui s’affiche lorsque j’exécute du code Lambda en Python ?
AWS OFFICIELA mis à jour il y a 4 mois
Comment résoudre l'exception « failed to obtain in-memory shard lock » dans Amazon OpenSearch Service ?
AWS OFFICIELA mis à jour il y a un an
Comment résoudre l'erreur « ERROR: 1023 DETAIL: Serializable isolation violation on table in Redshift » (Violation d'isolement sérialisable sur une table dans Redshift) ?
AWS OFFICIELA mis à jour il y a 2 ans
Comment utiliser Apache Iceberg avec un catalogue de données AWS Glue multicomptes dans Spark ?
AWS OFFICIELA mis à jour il y a un an