从 S3 到FSx for Lustre 的加载时间是多少？
0
【以下的问题经过翻译处理】 一位客户正在S3之前使用FSx以更有效地与Sagemaker交互。他们将可能使用scratch mode，以便频繁地打开/关闭，但我想了解从S3到Lustre的初始加载需要多长时间，以确定是否仅按照持久路线进行。我在FAQ中看到“当与S3存储桶链接时，FSx for Lustre文件系统会将S3对象透明地呈现为文件，并允许您将更改的数据写回S3。” 我认为这意味着从S3到Lustre存在初始加载时间？加载是一次性完成还是基于对象逐个进行，即只有在第一次请求某个对象时才进行？
我可以为客户提供关于创建文件系统时的初始延迟的什么信息？
1 回答
- 最新
- 投票最多
- 评论最多
0
【以下的回答经过翻译处理】 创建S3 Bucket / 前缀的文件系统元数据表示需要几分钟时间。创建文件系统的时间取决于文件系统中对象的数量。一旦文件系统创建完成，数据将根据文件的访问情况在Scratch FSx for Lustre中进行惰性加载，因此第一次访问将具有典型的S3延迟，而后续访问将具有亚毫秒延迟。或者，客户可以在文件系统创建完成后使用Lustre HSM命令预加载数据（或数据的子集）：https://docs.aws.amazon.com/fsx/latest/LustreGuide/preload-file-contents-hsm.html。
相关内容
AWS 官方已更新 1 年前- AWS 官方已更新 10 个月前
- AWS 官方已更新 2 年前
- AWS 官方已更新 1 年前