Glue 3.0 是否支持 Glue Spark shuffle manager?

0

【以下的问题经过翻译处理】 Glue 3.0 是否支持 Spark shuffle manager?我正在尝试在Glue 3.0 作业中设置 --write-shuffle-files-to-s3 标志,但它似乎不起作用,没有任何文件写入。

如果目前不支持——该特性最终会支持吗?

profile picture
エキスパート
質問済み 5ヶ月前26ビュー
1回答
0

【以下的回答经过翻译处理】 目前AWS Glue 3.0 版本已经支持AWS Glue Spark Shuffle Manager, 可以参考如下链接:

Managing ETL jobs with AWS Glue Studio - https://docs.aws.amazon.com/glue/latest/ug/managing-jobs-chapter.html

profile picture
エキスパート
回答済み 5ヶ月前

ログインしていません。 ログイン 回答を投稿する。

優れた回答とは、質問に明確に答え、建設的なフィードバックを提供し、質問者の専門分野におけるスキルの向上を促すものです。

質問に答えるためのガイドライン