当Spark工作负载的数据在不同存储层之间移动时,S3 URI是否会保持不变?

0

【以下的问题经过翻译处理】 我的客户计划使用s3作为数据湖,并使用Spark来处理数据。他们想使用S3 IA将数据移动到S3 glacier。他们想更深入地了解移动到s3 glacier后,Spark是否能够使用s3 uri访问数据,以及访问相同数据的性能影响。

profile picture
EXPERTE
gefragt vor 5 Monaten28 Aufrufe
1 Antwort
0

【以下的回答经过翻译处理】 当S3对象在不同存储类之间移动时,其URI不会改变。随着对象从标准存储类向其他存储类移动,访问延迟将会增加(标准存储为毫秒级,Standard-IA、One-Zone IA和智能分层为几分钟/几小时,glacier为几分钟/几小时,Glacier Deep Archive为几小时。[1]

[1] - https://aws.amazon.com/s3/storage-classes/

profile picture
EXPERTE
beantwortet vor 5 Monaten

Du bist nicht angemeldet. Anmelden um eine Antwort zu veröffentlichen.

Eine gute Antwort beantwortet die Frage klar, gibt konstruktives Feedback und fördert die berufliche Weiterentwicklung des Fragenstellers.

Richtlinien für die Beantwortung von Fragen