As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Definição de configurações de fonte para o Amazon MSK
Ao escolher o Amazon MSK para enviar informações para um fluxo do Firehose, será possível escolher entre clusters provisionados pelo MSK e clusters do MSK com tecnologia sem servidor. Em seguida, é possível usar o Firehose para ler dados facilmente de um determinado cluster e tópico Amazon MSK e carregá-los no destino do S3 especificado.
Na seção Configurações da fonte da página, forneça valores para os campos a seguir.
- Conectividade com o cluster do Amazon MSK
-
Escolha a opção Agentes privados de bootstrap (recomendado) ou Agentes públicos de bootstrap de acordo com a configuração do cluster. Os agentes de bootstrap são o que o cliente Apache Kafka usa como ponto de partida para se conectar ao cluster. Os corretores de bootstrap públicos são destinados ao acesso público externo AWS, enquanto os corretores de bootstrap privados são destinados ao acesso interno. AWS Para obter mais informações sobre o Amazon MSK, consulte Amazon Managed Streaming for Apache Kafka.
Para se conectar a um cluster do Amazon MSK provisionado ou sem servidor por meio de agentes privados de bootstrap, o cluster deve atender a todos os requisitos a seguir.
-
O cluster deve estar ativo.
-
O cluster deve ter o IAM como um dos métodos de controle de acesso.
-
A conectividade privada de várias VPCs deve estar habilitada para o método de controle de acesso do IAM.
-
Você deve adicionar a esse cluster uma política baseada em recursos que conceda à entidade principal do serviço do Firehose permissão de invocar a operação de API
CreateVpcConnection
do Amazon MSK.
Para se conectar a um cluster do Amazon MSK provisionado por meio de agentes de bootstrap públicos, o cluster deve atender a todos os requisitos a seguir.
-
O cluster deve estar ativo.
-
O cluster deve ter o IAM como um dos métodos de controle de acesso.
-
O cluster deve ser acessível ao público.
-
- Conta do cluster do MSK
-
É possível escolher a conta em que o cluster do Amazon MSK reside. Ela pode ser uma das opções a seguir.
-
Conta atual — permite que você ingira dados de um cluster MSK na conta atual AWS . Para isso, você deve especificar o ARN do cluster do Amazon MSK no qual o fluxo do Firehose lerá os dados.
-
Conta cruzada — permite que você ingira dados de um cluster MSK em outra conta. AWS Para obter mais informações, consulte Entrega entre contas do Amazon MSK.
-
- Tópico
-
Especifique o tópico do Apache Kafka do qual você deseja que fluxo do Firehose ingira os dados. Você não pode atualizar este tópico após a conclusão da criação do fluxo do Firehose.
nota
O Firehose descompacta automaticamente as mensagens do Apache Kafka.