Criar um cluster com o Ganglia - Amazon EMR

Criar um cluster com o Ganglia

nota

A última versão do Amazon EMR a incluir o Ganglia foi o Amazon EMR 6.15.0. Para monitorar seu cluster, as versões superiores à 6.15.0 incluem o agente do Amazon CloudWatch.

Para criar um cluster com o Ganglia usando o console

  1. Navegue até o novo console do Amazon EMR e selecione Alternar para o console antigo na navegação lateral. Para obter mais informações sobre o que esperar ao alternar para o console antigo, consulte Usar o console antigo.

  2. Selecione Create cluster (Criar cluster).

  3. Em Software configuration (Configuração do software), escolha All Applications (Todos os aplicativos), Core Hadoop ou Spark.

  4. Prossiga com a criação do cluster usando as configurações apropriadas.

Para adicionar o Ganglia a um cluster usando a AWS CLI

Na AWS CLI, você pode adicionar o Ganglia a um cluster usando create-cluster com o parâmetro --applications. Se você especificar apenas o Ganglia usando o parâmetro --applications, o Ganglia será o único aplicativo instalado.

  • Digite o seguinte comando para adicionar o Ganglia quando você criar um cluster e substitua myKey pelo nome do seu par de chaves do EC2.

    nota

    Os caracteres de continuação de linha do Linux (\) são incluídos para facilitar a leitura. Eles podem ser removidos ou usados ​​em comandos do Linux. No Windows, remova-os ou substitua-os por um sinal de interpolação (^).

    aws emr create-cluster --name "Spark cluster with Ganglia" --release-label emr-6.15.0; \
--applications Name=Spark Name=Ganglia \
--ec2-attributes KeyName=myKey --instance-type m5.xlarge \
--instance-count 3 --use-default-roles

    Quando você especifica a contagem de instâncias sem usar o parâmetro --instance-groups, um único nó principal é executado, e as instâncias restantes são executadas como nós core. Todos os nós usam o tipo de instância especificado no comando.

    nota

    Se você não tiver criado o perfil de serviço padrão do EMR e o perfil de instância do EC2, digite aws emr create-default-roles para criá-los antes de digitar o subcomando create-cluster.

    Para obter mais informações sobre o uso de comandos do Amazon EMR na AWS CLI, consulte https://docs.aws.amazon.com/cli/latest/reference/emr.