Glue 3.0 是否支持 Glue Spark shuffle manager？
0
【以下的问题经过翻译处理】 Glue 3.0 是否支持 Spark shuffle manager？我正在尝试在Glue 3.0 作业中设置 --write-shuffle-files-to-s3 标志，但它似乎不起作用，没有任何文件写入。
如果目前不支持——该特性最终会支持吗？
1 Antwort
- Neueste
- Die meisten Stimmen
- Die meisten Kommentare
0
【以下的回答经过翻译处理】 目前AWS Glue 3.0 版本已经支持AWS Glue Spark Shuffle Manager， 可以参考如下链接：
Managing ETL jobs with AWS Glue Studio - https://docs.aws.amazon.com/glue/latest/ug/managing-jobs-chapter.html
Relevanter Inhalt
- Wie behebe ich den Fehler „java.lang.OutOfMemoryError: Java heap space“ in einem AWS Glue-Spark-Job?
AWS OFFICIALAktualisiert vor 2 Jahren - AWS OFFICIALAktualisiert vor einem Jahr
- AWS OFFICIALAktualisiert vor 3 Jahren
- AWS OFFICIALAktualisiert vor einem Jahr