Encerramento de um cluster do Amazon EMR em estado iniciando, executando ou aguardando - Amazon EMR
Encerrar a partir do consoleEncerrar a partir da CLIEncerrar a partir da API

Encerramento de um cluster do Amazon EMR em estado iniciando, executando ou aguardando

Atenção

Um cluster do EMR encerrado é irrecuperável. Certifique-se de que o recurso e quaisquer dados nos notebooks HDFS ou Jupyter não sejam mais necessários antes da remoção. Os dados do HDFS são perdidos quando o cluster é encerrado.

Esta seção descreve os métodos de encerramento de um cluster. Para obter informações sobre como habilitar a proteção contra encerramento e encerrar clusters automaticamente, consulte Controlar o encerramento de cluster do Amazon EMR. Você pode encerrar clusters nos estados STARTING, RUNNINGou WAITING. Um cluster no estado WAITING deve ser encerrado ou ele será executado indefinidamente, gerando encargos para sua conta. Você pode encerrar um cluster que não sai do estado STARTING ou que não consegue concluir uma etapa.

Se quiser encerrar um cluster que possui proteção de encerramento, deve primeiro desativar essa proteção antes de encerrar o cluster. Você pode encerrar clusters usando o console, a AWS CLI ou por meio de programação usando a API TerminateJobFlows.

Dependendo da configuração do cluster, pode levar entre 5 a 20 minutos para concluir o encerramento e liberar recursos alocados tais como instâncias do EC2.

nota

Você não pode reiniciar um cluster terminado, mas pode clonar um cluster terminado para reutilizar a configuração dele em um novo cluster. Para obter mais informações, consulte Como clonar um cluster do Amazon EMR usando o console.

Importante

O Amazon EMR usa o perfil de serviço do Amazon EMR e a função AWSServiceRoleForEMRCleanup para limpar recursos de cluster em sua conta que você não usa mais, como instâncias do Amazon EC2. Você deve incluir ações nas políticas de função para excluir ou encerrar os recursos. Caso contrário, o Amazon EMR não poderá realizar essas ações de limpeza, e você poderá ter custos com recursos não utilizados que permanecem no cluster.

Encerrrar um cluster com o console

Você pode terminar um ou mais clusters usando o console do Amazon EMR. As etapas para encerrar um cluster no console variam de acordo com o estado da proteção de encerramento, ou seja, se a proteção está ativada ou não. Para encerrar um cluster protegido, você deve primeiro desativar a proteção de encerramento.

Console
Para encerrar um cluster usando o console

  1. Faça login no Console de gerenciamento da AWS e abra o console do Amazon EMR em https://console.aws.amazon.com/emr.

  2. Escolha Clusters e, em seguida, selecione o cluster que você deseja encerrar.

  3. No menu suspenso Ações, escolha Terminar cluster para abrir o prompt Terminar cluster.

  4. No prompt, escolha Terminar. Dependendo da configuração do cluster, o encerramento pode demorar de cinco a dez minutos. Para obter mais informações sobre os clusters do Amazon EMR, consulte Encerramento de um cluster do Amazon EMR em estado iniciando, executando ou aguardando.

Encerrar um cluster com a AWS CLI

Para encerrar um cluster desprotegido usando a AWS CLI

Para encerrar um cluster desprotegido usando a AWS CLI, use o subcomando terminate-clusters com o parâmetro --cluster-ids.

  • Digite o comando a seguir para encerrar um cluster único e substitua j-3KVXXXXXXX7UG pelo ID do seu cluster.

    aws emr terminate-clusters --cluster-ids j-3KVXXXXXXX7UG

    Para encerrar vários clusters, digite o comando a seguir e substitua j-3KVXXXXXXX7UG e j-WJ2XXXXXX8EU pelos IDs do seu cluster.

    aws emr terminate-clusters --cluster-ids j-3KVXXXXXXX7UG j-WJ2XXXXXX8EU

    Para obter mais informações sobre como usar comandos do Amazon EMR na AWS CLI, consulte https://docs.aws.amazon.com/cli/latest/reference/emr.

Para encerrar um cluster protegido usando a AWS CLI

Para encerrar um cluster protegido usando a AWS CLI, primeiro desative a proteção de encerramento usando o subcomando modify-cluster-attributes com o parâmetro --no-termination-protected. Em seguida, use o subcomando terminate-clusters com o parâmetro --cluster-ids para encerrá-lo.

  1. Digite o comando a seguir para desativar a proteção de encerramento e substitua j-3KVTXXXXXX7UG pelo ID do seu cluster.

    aws emr modify-cluster-attributes --cluster-id j-3KVTXXXXXX7UG --no-termination-protected

  2. Para encerrar o cluster, digite o comando a seguir e substitua j-3KVXXXXXXX7UG pelo ID do seu cluster.

    aws emr terminate-clusters --cluster-ids j-3KVXXXXXXX7UG

    Para encerrar vários clusters, digite o comando a seguir e substitua j-3KVXXXXXXX7UG e j-WJ2XXXXXX8EU pelos IDs do seu cluster.

    aws emr terminate-clusters --cluster-ids j-3KVXXXXXXX7UG j-WJ2XXXXXX8EU

    Para obter mais informações sobre como usar comandos do Amazon EMR na AWS CLI, consulte https://docs.aws.amazon.com/cli/latest/reference/emr.

Encerrrar um cluster com a API

A operação TerminateJobFlows interrompe o processamento da etapa, carrega dados de log do Amazon EC2 para o Amazon S3 (se configurado) e termina o cluster do Hadoop. Um cluster também é encerrado automaticamente se você definir KeepJobAliveWhenNoSteps como False em uma solicitação RunJobFlows.

Você pode usar esta ação para encerrar um único cluster ou uma lista de clusters usando os IDs de clusters.

Para obter mais informações sobre os parâmetros de entrada exclusivos a TerminateJobFlows, consulte TerminateJobFlows. Para obter mais informações sobre os parâmetros genéricos na solicitação, consulte Common request parameters.