EMR无服务器应用磁盘空间?

0

【以下的问题经过翻译处理】 当配置EMR Serverless应用程序时,您可以选择预初始化容量的磁盘大小和应用程序的最大磁盘限制:

磁盘大小

但是,至少对于Hive作业,EMR Serverless将scratch和warehouse目录都存储在S3中。那么这个配置的磁盘空间用于什么?我已经搜索了文档,没有提到如何使用这个空间,或者为什么需要它。

profile picture
EXPERTE
gefragt vor 6 Monaten32 Aufrufe
1 Antwort
0

【以下的回答经过翻译处理】 EMR无服务器使用磁盘大小来进行以下操作:

  1. 存储日志文件(包括 Hive、Tez AM日志、Tez任务日志等);
  2. 将Shuffle数据存储在本地磁盘上;
  3. 存储aux libraries、用户jar等资源。

希望这回答了你的问题。

profile picture
EXPERTE
beantwortet vor 6 Monaten

Du bist nicht angemeldet. Anmelden um eine Antwort zu veröffentlichen.

Eine gute Antwort beantwortet die Frage klar, gibt konstruktives Feedback und fördert die berufliche Weiterentwicklung des Fragenstellers.

Richtlinien für die Beantwortung von Fragen