Quiero configurar el escalamiento automático en Amazon EMR.
Resolución
Para configurar el escalamiento automático en Amazon EMR, siga estos pasos:
Versiones de Amazon EMR 5.30.0, 6.1.0 y posteriores
Si usa Amazon EMR 5.30.0 y versiones posteriores (excepto Amazon EMR versión 6.0.0), utilice uno de los siguientes métodos para configurar el escalamiento automático:
Versiones de Amazon EMR 4.0.0 y posteriores
El escalamiento automático con una política personalizada está disponible con la configuración de los grupos de instancias y no está disponible cuando usa flotas de instancias. Para obtener más información, consulte Uso del escalamiento automático con una política personalizada para grupos de instancias.
Para usar las métricas de Amazon CloudWatch para el escalamiento automático en Amazon EMR, consulte Supervisión de las métricas de Amazon EMR con CloudWatch. Se recomiendan las siguientes métricas para el escalamiento automático:
- YarnMemoryAvailablePercentage: Esta métrica indica el porcentaje de memoria disponible para YARN.
- ContainerPendingRatio: Esta métrica indica la proporción entre los contenedores pendientes y los contenedores asignados. Use esta métrica para escalar un clúster en función del comportamiento de asignación de contenedores para cargas variadas.
Para confirmar que la política de escalamiento está asociada al grupo de instancias, abra la consola de Amazon EMR y, a continuación, seleccione Eventos en el panel de navegación de la izquierda. A continuación, compruebe si hay eventos de la política de escalamiento automático.
Información relacionada
Uso del escalamiento de clústeres de Amazon EMR para adaptarse a las cargas de trabajo cambiantes