Como soluciono problemas de migração de armazenamento UltraWarm no Amazon OpenSearch Service?

Resolução

Ao migrar um índice para o armazenamento UltraWarm no OpenSearch Service, você pode receber a seguinte mensagem de erro:

{
     "error": {
          "root_cause": [{
               "type": "remote_transport_exception",
               "reason": "[USmz1Ze][x.x.x.x:9300][indices:admin/ultrawarm/migration/warm]"
          }],
          "type": "illegal_argument_exception",
          "reason": "Rejecting migration request for index [index_name] since there isn't enough disk space on hot node [qwertpoiy123lke4woj34n] to perform force merge"
     },
     "status": 400
}

Antes de uma migração de armazenamento UltraWarm, o OpenSearch Service valida a quantidade de espaço disponível em disco quente. O OpenSearch Service executa automaticamente uma operação force merge durante a validação do espaço em disco. Quando pouco espaço em disco é detectado, a solicitação da operação force merge é bloqueada. A solicitação é bloqueada porque a operação force merge processa um fragmento por vez. Além disso, cada shard requer três vezes mais espaço ocupado em disco quente e mais 20 GB de espaço de armazenamento livre por nó.

Para resolver problemas de pouco espaço em disco antes de uma migração de índice, faça o seguinte:

1.    Confira quais nós têm shards existentes no índice:

GET _cat/shards/INDEXNAME?v

2.    Confira o espaço em disco disponível por nó:

GET /_cat/allocation?v

Os nós devem ter espaço de armazenamento livre suficiente para atender ao requisito de espaço em disco para uma migração (três vezes o tamanho do shard mais 20 GB). Para mais informações sobre como calcular o tamanho de um índice no disco, consulte Calcular requisitos de armazenamento.

3.    (Opcional) Caso não haja espaço em disco suficiente, exclua índices antigos ou não utilizados. Essa exclusão libera espaço em disco no nó para que uma operação de mesclagem forçada seja bem-sucedida.

4.    (Opcional) Caso não seja possível excluir índices do nó, aumente o volume do Amazon Elastic Block Store (Amazon EBS). Para mais informações, consulte Como soluciono espaço de armazenamento insuficiente em meu domínio do Amazon OpenSearch Service?

Dicas adicionais:

• Exclua documentos antigos ou não utilizados do índice. Um número excessivo de documentos pode aumentar o tamanho dos fragmentos, o que torna a migração mais lenta.
  Observação: excluir um documento não libera espaço em disco imediatamente. Para mais informações, consulte Por que a métrica Deleted Documents está tão alta em meu cluster do Amazon OpenSearch Service?
• Monitore as métricas de utilização do disco (como FreeStorageSpace) no Amazon CloudWatch. Para mais informações, consulte ClusterBlockException.