Agentes Express do Amazon MSK - Amazon Managed Streaming for Apache Kafka

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Agentes Express do Amazon MSK

Os agentes Express do MSK Provisioned tornam o Apache Kafka mais simples de gerenciar, mais econômico para executar em grande escala e mais elástico graças à baixa latência que você espera. Os corretores incluem pay-as-you-go armazenamento que se expande automaticamente e não requer dimensionamento, provisionamento ou monitoramento proativo. Dependendo do tamanho da instância selecionada, cada nó do agente pode fornecer até 3 vezes mais throughput por agente, escalar até 20 vezes mais rápido e se recuperar 90% mais rápido em comparação com os agentes Standard do Apache Kafka. Os agentes Express são pré-configurados com os padrões de melhores práticas do Amazon MSK e impõem cotas de throughput do cliente para minimizar a contenção de recursos entre os clientes e as operações em segundo plano do Kafka.

Aqui estão alguns dos principais fatores e recursos a serem considerados ao usar agentes Express.

  • Sem gerenciamento de armazenamento: os agentes Express eliminam a necessidade de provisionar ou gerenciar recursos de armazenamento. Você obtém armazenamento elástico pay-as-you-go, virtualmente ilimitado e totalmente gerenciado. Para casos de uso de throughput alto, não é preciso considerar as interações entre instâncias de computação, volumes de armazenamento nem sobre os gargalos de throughput associados. Esses recursos simplificam o gerenciamento de clusters e eliminam a sobrecarga operacional do gerenciamento de armazenamento.

  • Escalonamento mais rápido: os agentes Express permitem escalar clusters e mova partições até 20 vezes mais rápido do que os agentes Standard. Esse recurso é crucial quando você precisa aumentar a escala horizontalmente do cluster para processar picos de carga futuros ou reduzir a escala do cluster para diminuir os custos. Consulte as seções sobre como expandir seu cluster, remover agentes, reatribuir partições e configurar LinkedIn o Cruise Control para rebalanceamento para obter mais detalhes sobre como escalar seu cluster.

  • Maior throughput: os agentes Express oferecem até 3 vezes mais throughput por agente do que os agentes Standard. Por exemplo, você pode gravar com segurança dados de até 500 MBps com cada agente Express de tamanho m7g.16xlarge, em comparação com 153,8 MBps no agente padrão equivalente (ambos os números pressupõem alocação de largura de banda suficiente para operações em segundo plano, como replicação e rebalanceamento).

  • Configurado para alta resiliência: os agentes Express oferecem automaticamente várias melhores práticas para melhorar a resiliência do seu cluster. Isso inclui barreiras em configurações críticas do Apache Kafka, cotas de throughput e reservas de capacidade para operações em segundo plano e manutenção não planejada. Esses recursos tornam mais seguro e fácil executar aplicações do Apache Kafka em grande escala. Confira mais detalhes nas seções Configurações do agente Express e Cota de agentes Express do Amazon MSK.

  • Sem janelas de manutenção: agentes Express não precisam de janelas de manutenção. O Amazon MSK atualiza contínua e automaticamente o hardware do seu cluster. Consulte Aplicação de patches para agentes Express para saber mais.

Informações adicionais sobre agentes Express

  • Os corretores Express trabalham com o Apache Kafka APIs, mas ainda não oferecem suporte total à API. KStreams

  • Os corretores expressos estão disponíveis apenas em uma AZs configuração 3.

  • Os agentes Express estão disponíveis somente em determinados tamanhos de instância. Consulte os preços do Amazon MSK para ver a lista atualizada.

  • Os corretores Express são compatíveis com as seguintes versões do Apache Kafka: 3.6, 3.8 e 3.9.

  • Os corretores expressos podem ser criados com o KRaft modo a partir da versão 3.9 do Apache Kafka.

Confira esses blogs

Para saber mais informações sobre os agentes MSK Express e ver um exemplo real de agentes Express em uso, leia os seguintes blogs: