Glue transform columns limit

0

A customer has a schema with 183 columns, When running a transform job on Glue we are faced with an error:

"Number of columns in schema exceeded the maximum allowed number"

I was able to re-produce.
I can't find in the Glue documentation such a limit.
Is there a way to increase. the limit or a workaround?

AWS
MODERADOR
preguntada hace 4 años1529 visualizaciones
1 Respuesta
0
Respuesta aceptada

As stated here: https://docs.aws.amazon.com/glue/latest/dg/machine-learning.html

The data source table that you choose for the job can't have more than 100 columns.

respondido hace 4 años

No has iniciado sesión. Iniciar sesión para publicar una respuesta.

Una buena respuesta responde claramente a la pregunta, proporciona comentarios constructivos y fomenta el crecimiento profesional en la persona que hace la pregunta.

Pautas para responder preguntas