New user sign up using AWS Builder ID
New user sign up using AWS Builder ID is currently unavailable on re:Post. To sign up, please use the AWS Management Console instead.
我的 AWS Glue 擷取、轉換和載入 (ETL) 作業失敗,並顯示「容器因超出記憶體限制而被 YARN 刪除」的錯誤訊息。
導致此錯誤的最常見原因如下:
使用下列一或多種解決方法來解決此錯誤:
dynamicFrame.repartition(totalNumberOfExecutorCores) dataframe.repartition(totalNumberOfExecutorCores)
對 OOM 例外和作業異常偵錯
使用 AWS Glue 擴展 Apache Spark 作業和分割資料的最佳作法
最佳化 AWS Glue 中的記憶體管理