copy 2TB data from s3 to redshift take more than 2 days is hung

0

the data set is 2 Tera Bytes with 30Billow rows and 80 columns for 20 years history. our redshift cluster is 2 ra3.4xlarge I have successfully loaded 5 years (1/4) of the data set in 6 hours any advice?

Winston
질문됨 6달 전167회 조회
1개 답변
0
수락된 답변

just talked to AWS Support, they advised to load by chunk by chunk, not all the data in one big load.

Winston
답변함 6달 전

로그인하지 않았습니다. 로그인해야 답변을 게시할 수 있습니다.

좋은 답변은 질문에 명확하게 답하고 건설적인 피드백을 제공하며 질문자의 전문적인 성장을 장려합니다.

질문 답변하기에 대한 가이드라인

관련 콘텐츠