1 Risposta
- Più recenti
- Maggior numero di voti
- Maggior numero di commenti
0
From the looks of it your DynamicFrames are partitioning your files, You can repartition them.
Try the following: https://repost.aws/knowledge-center/glue-job-output-large-files
con risposta un anno fa
Contenuto pertinente
- AWS UFFICIALEAggiornata 3 anni fa
- AWS UFFICIALEAggiornata 3 anni fa
- AWS UFFICIALEAggiornata 2 anni fa
- Come posso risolvere gli errori di connessione di Marketplace AWS nei miei processi ETL in AWS Glue?AWS UFFICIALEAggiornata 3 mesi fa
Inside that "Custom transform", you can just call "repartition(1)" before you return the DF