如何将SageMaker Batch Transform 中的MaxConcurrentTransforms配置为理想值?

0

【以下的问题经过翻译处理】 根据文档https://docs.aws.amazon.com/sagemaker/latest/dg/batch-transform.html,"MaxConcurrentTransforms的理想值等于batch transform job 中的计算节点数量。"如何确定计算节点数量,我认为这取决于实例类型。此外,我们是否需要考虑设置实例数量的参数?

profile picture
EXPERT
asked 8 months ago62 views
1 Answer
0

【以下的回答经过翻译处理】 MaxConcurrentTransforms的理想值取决于实例类型和你的特定模型。

对于基于CPU的 transforms,将MaxConcurrentTransforms 设置为你正在使用的实例的CPU数量是有意义的,但你也应该考虑你的模型的内存利用率。

我建议你逐渐增加这个数字,从1增加到实例核心数量,同时监测RAM /CPU利用率,以找到最佳值。

profile picture
EXPERT
answered 8 months ago

You are not logged in. Log in to post an answer.

A good answer clearly answers the question and provides constructive feedback and encourages professional growth in the question asker.

Guidelines for Answering Questions