从 S3 到FSx for Lustre 的加载时间是多少?

0

【以下的问题经过翻译处理】 一位客户正在S3之前使用FSx以更有效地与Sagemaker交互。他们将可能使用scratch mode,以便频繁地打开/关闭,但我想了解从S3到Lustre的初始加载需要多长时间,以确定是否仅按照持久路线进行。我在FAQ中看到“当与S3存储桶链接时,FSx for Lustre文件系统会将S3对象透明地呈现为文件,并允许您将更改的数据写回S3。” 我认为这意味着从S3到Lustre存在初始加载时间?加载是一次性完成还是基于对象逐个进行,即只有在第一次请求某个对象时才进行?

我可以为客户提供关于创建文件系统时的初始延迟的什么信息?

profile picture
专家
已提问 6 个月前36 查看次数
1 回答
0

【以下的回答经过翻译处理】 创建S3 Bucket / 前缀的文件系统元数据表示需要几分钟时间。创建文件系统的时间取决于文件系统中对象的数量。一旦文件系统创建完成,数据将根据文件的访问情况在Scratch FSx for Lustre中进行惰性加载,因此第一次访问将具有典型的S3延迟,而后续访问将具有亚毫秒延迟。或者,客户可以在文件系统创建完成后使用Lustre HSM命令预加载数据(或数据的子集):https://docs.aws.amazon.com/fsx/latest/LustreGuide/preload-file-contents-hsm.html

profile picture
专家
已回答 6 个月前

您未登录。 登录 发布回答。

一个好的回答可以清楚地解答问题和提供建设性反馈,并能促进提问者的职业发展。

回答问题的准则