从 S3 到FSx for Lustre 的加载时间是多少?

0

【以下的问题经过翻译处理】 一位客户正在S3之前使用FSx以更有效地与Sagemaker交互。他们将可能使用scratch mode,以便频繁地打开/关闭,但我想了解从S3到Lustre的初始加载需要多长时间,以确定是否仅按照持久路线进行。我在FAQ中看到“当与S3存储桶链接时,FSx for Lustre文件系统会将S3对象透明地呈现为文件,并允许您将更改的数据写回S3。” 我认为这意味着从S3到Lustre存在初始加载时间?加载是一次性完成还是基于对象逐个进行,即只有在第一次请求某个对象时才进行?

我可以为客户提供关于创建文件系统时的初始延迟的什么信息?

profile picture
EXPERTE
gefragt vor 5 Monaten34 Aufrufe
1 Antwort
0

【以下的回答经过翻译处理】 创建S3 Bucket / 前缀的文件系统元数据表示需要几分钟时间。创建文件系统的时间取决于文件系统中对象的数量。一旦文件系统创建完成,数据将根据文件的访问情况在Scratch FSx for Lustre中进行惰性加载,因此第一次访问将具有典型的S3延迟,而后续访问将具有亚毫秒延迟。或者,客户可以在文件系统创建完成后使用Lustre HSM命令预加载数据(或数据的子集):https://docs.aws.amazon.com/fsx/latest/LustreGuide/preload-file-contents-hsm.html

profile picture
EXPERTE
beantwortet vor 5 Monaten

Du bist nicht angemeldet. Anmelden um eine Antwort zu veröffentlichen.

Eine gute Antwort beantwortet die Frage klar, gibt konstruktives Feedback und fördert die berufliche Weiterentwicklung des Fragenstellers.

Richtlinien für die Beantwortung von Fragen