Quero solucionar o problema da minha aplicação do Amazon Elastic Container Service (Amazon ECS) que demora para responder às solicitações.
Breve descrição
A alta latência nas tarefas do Amazon ECS pode ocorrer pelos seguintes motivos:
- Alta utilização de CPU ou memória (RAM) em tarefas.
- Problemas com as dependências da aplicação que são executadas dentro da aplicação.
- Grande distância de rede entre clientes ou destinos on-premises e a tarefa do ECS.
- Problemas de conectividade de rede, excedentes.
- Controle de utilização do volume do Amazon Elastic Block Store (Amazon EBS).
Para resolver esses problemas, primeiro isole onde o atraso ocorre e, em seguida, conclua as etapas de resolução.
Resolução
Para solucionar problemas de alta latência em sua tarefa do ECS, conclua as seguintes etapas:
-
Execute o comando a seguir para medir a resposta do primeiro byte e verificar se a resolução do DNS está lenta, o que pode causar latência:
% curl -kso /dev/null -w "\n===============
| DNS lookup: %{time_namelookup}
| Connect: %{time_connect}| App connect: %{time_appconnect}
| Pre-transfer: %{time_pretransfer}
| Start transfer: %{time_starttransfer}
| Total: %{time_total}
| HTTP Code: %{http_code}\n===============\n" https://LOAD_BALANCER_DNS_NAME.com
Example output:
| DNS lookup: 0.035596
| Connect: 0.063130
| App connect: 0.159145
| Pre-transfer: 0.159264
| Start transfer: 0.190203
| Total: 0.190722
| HTTP Code: 200
Observação: substitua LOAD_BALANCER_DNS_NAME.com pelo nome DNS do seu balanceador de carga. A saída do exemplo anterior está em intervalos de tempo de milissegundos. Execute os testes iniciais de dentro da VPC para reduzir as variáveis envolvidas em diferentes caminhos de rede.
-
Ignore o balanceador de carga. Use o endereço IP de tarefa de uma tarefa conhecida que esteja em execução para direcionar o curl anterior. Esse processo ajuda a isolar o componente que causa a latência.
-
Se houver um Application Load Balancer, verifique se há valores extrapolantes na estatística média da métrica TargetResponseTime do Amazon CloudWatch.
Se o valor estiver alto, a latência se origina das tarefas ou da dependência de uma aplicação em conexões externas. Para obter mais informações, consulte Como soluciono problemas de aumento na métrica TargetResponseTime para um Application Load Balancer?
Se houver um grande número de tarefas, ative e analise as entradas do log de acesso do seu Application Load Balancer para identificar as instâncias de backend.
-
Para confirmar problemas com o Application Load Balancer, analise os campos request_processing_time e response_processing_time nas entradas do log para ver se há períodos de tempo excepcionalmente altos. Para obter mais informações, consulte Como soluciono problemas de alta latência no meu Application Load Balancer no Elastic Load Balancing? Se você executar o comando curl diretamente no endereço IP da tarefa e receber uma resposta lenta, analise o CloudWatch Container Insights.
-
Se a utilização da CPU e da memória estiver abaixo de 90%, em média, sem picos, verifique se há dependências da aplicação que causam latência. As dependências incluem chamadas para recursos externos, como buckets do Amazon Simple Storage Service (Amazon S3), bancos de dados do Amazon Relational Database Service (Amazon RDS) ou outros serviços remotos da web.
-
Se as chamadas externas fizerem parte do fluxo de trabalho esperado da aplicação, confirme com os desenvolvedores da aplicação se ela está fazendo chamadas síncronas para dependências externas. Ou bloqueie a aplicação até que ela receba respostas a essas chamadas. Para obter mais informações, consulte Gerenciar chamadas assíncronas.
-
Se você hospedar em instâncias de contêiner do EC2, verifique se há sinais de uso excessivo em volumes e interfaces de rede do Amazon EBS. Para obter mais informações, consulte Como soluciono problemas de desempenho de volume do EBS na minha instância do EC2? Se você detectar controle de utilização do EBS, analise e aumente as IOPS provisionadas pelo EBS e o tipo de throughput. Ou use uma opção diferente, como o armazenamento de instância ou o Elastic Fabric Adapter (EFA).
Se você detectar controle de utilização da interface de rede, use um tipo de instância maior com mais largura de banda da rede. Ou use um tipo de instância com rede aprimorada que forneça uma linha de base otimizada. Para obter mais informações, consulte Por que minha instância do Amazon EC2 excede seus limites de rede quando minha utilização média é baixa?
-
Se você hospedar no AWS Fargate, verifique as métricas da interface de rede com um contêiner sidecar de rede do Amazon ECS. Para adicionar um contêiner sidecar, implante uma nova definição de tarefa.