Manter os dados em uma tabela de destino atualizados com o AWS Glue e o Athena
Este exemplo de projeto demonstra como consultar uma tabela de destino para obter dados atuais com o AWS Glue Catalog e, em seguida, atualizá-los com novos dados de outras fontes usando o Amazon Athena.
Neste projeto, a máquina de estado do Step Functions chama o AWS Glue Catalog para verificar se existe uma tabela de destino em um bucket do Amazon S3. Se nenhuma tabela for encontrada, uma nova tabela será criada. Em seguida, Step Functions executa uma consulta do Athena para adicionar linhas à tabela de destino de uma fonte de dados diferente: primeiro consultando a tabela de destino para obter a data mais recente, depois consultando a tabela de origem em busca de dados mais recentes e inserindo-os na tabela de destino.
Etapa 1: Criar a máquina de estado
-
Abra o console do Step Functions
e clique em Criar máquina de estado. -
Selecione Criar a partir do modelo e encontre o modelo inicial relacionado. Escolha Próximo para continuar.
-
Escolha como usar o modelo:
-
Executar uma demonstração: cria uma máquina de estado somente leitura. Após a revisão, você pode criar o fluxo de trabalho e todos os recursos relacionados.
-
Comece a criar: fornece uma definição de fluxo de trabalho editável que você pode revisar, personalizar e implantar com seus próprios recursos. (Recursos relacionados, como perfis ou filas, não serão criados automaticamente.)
-
-
Escolha Usar modelo para continuar com a seleção.
nota
Cobranças padrão são aplicadas aos serviços implantados na conta.
Etapa 2: Executar a máquina de estado de demonstração
Se você escolher a opção Executar uma demonstração, todos os recursos relacionados serão implantados e estarão prontos para execução. Se você escolheu a opção Comece a criar, talvez seja necessário definir valores de espaço reservado e criar recursos adicionais antes de executar seu fluxo de trabalho personalizado.
Selecione Implantar e executar.
Aguarde até que a pilha do CloudFormation seja implantada. Esse processo pode levar até 10 minutos.
Depois que a opção Iniciar execução for exibida, revise a Entrada e selecione Iniciar execução.
Parabéns!
Agora você deve ter uma demonstração em execução da máquina de estado. Você pode escolher estados na visualização do gráfico para revisar a entrada, a saída, as variáveis, a definição e os eventos.
