Using Iceberg tables in Python shell glue job

I want to use iceberg tables in the Python shell job to load data to Target(Redshift tables). Can someone guide how to use iceberg tables in Python Shell glue job?.

Thank you!

Tópicos

Análise

Tags

AWS Glue

Idioma

English

Duraiaws

feita há um ano255 visualizações

1 Resposta

Mais recentes
Mais votos
Mais comentários

Essas respostas são úteis? Vote a favor da resposta correta para ajudar a comunidade a se beneficiar de seu conhecimento.

You need to use a pure Python library to read Iceberg from a Shell, try pyiceberg
See the last option in this blog: https://www.dremio.com/blog/3-ways-to-use-python-with-apache-iceberg/

ESPECIALISTA

Gonzalo Herreros

respondido há um ano

Conteúdo relevante

Como usar bibliotecas Python externas no meu trabalho de ETL do AWS Glue 1.0 ou 0.9?
AWS OFICIALAtualizada há um ano
How do I connect to my WorkSpace with RDP?
AWS OFICIALAtualizada há 2 anos
Como resolvo a exceção “failed to obtain in-memory shard lock” (falha ao obter o bloqueio de fragmento na memória) no Amazon OpenSearch Service?
AWS OFICIALAtualizada há 3 anos
Como eu uso bibliotecas Python externas no meu trabalho de ETL do AWS Glue 2.0?
AWS OFICIALAtualizada há 2 anos