copy 2TB data from s3 to redshift take more than 2 days is hung

0

the data set is 2 Tera Bytes with 30Billow rows and 80 columns for 20 years history. our redshift cluster is 2 ra3.4xlarge I have successfully loaded 5 years (1/4) of the data set in 6 hours any advice?

Winston
preguntada hace 4 meses135 visualizaciones
1 Respuesta
0
Respuesta aceptada

just talked to AWS Support, they advised to load by chunk by chunk, not all the data in one big load.

Winston
respondido hace 4 meses

No has iniciado sesión. Iniciar sesión para publicar una respuesta.

Una buena respuesta responde claramente a la pregunta, proporciona comentarios constructivos y fomenta el crecimiento profesional en la persona que hace la pregunta.

Pautas para responder preguntas