Monitoring EMR job status

A customer wants to monitor EMR job status. They want to get a detailed picture of some jobs that runs longer time than normal, which impacts their daily work. Where can they view this information?

Argomenti

Analisi

Tag

Amazon EMR

Lingua

English

AWS-User-0204130

posta 6 anni fa261 visualizzazioni

1 Risposta

Più recenti
Maggior numero di voti
Maggior numero di commenti

Queste risposte sono utili? Dai un voto positivo alla risposta corretta per aiutare la community a trarre vantaggio dalle tue conoscenze.

Risposta accettata

EMR supports enhanced debugging, with logs stored in S3. https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-enhanced-step-debugging.html https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-manage-view-web-log-files.html

Furthermore, if you are also running YARN, you can view application history and metrics. https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-cluster-application-history.html

rabinon

con risposta 6 anni fa

Contenuto pertinente

Come posso risolvere “Exit status: -100. Diagnostica: Errori del container rilasciato su un “nodo *lost*” in Amazon EMR?
AWS UFFICIALEAggiornata 3 anni fa
Come faccio a correggere l'errore "Unable to validate the following destination configurations" in AWS CloudFormation?
AWS UFFICIALEAggiornata 2 anni fa
Come faccio a evitare che la cache dell'utente di un job Hadoop o Spark occupi troppo spazio su disco in Amazon EMR?
AWS UFFICIALEAggiornata 2 anni fa
Come posso risolvere l'errore "The provided key element does not match the schema" durante l'importazione di tabelle DynamoDB utilizzando Hive su Amazon EMR?
AWS UFFICIALEAggiornata 2 anni fa