Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Commencez à utiliser Amazon Managed Service pour Apache Flink (DataStream API)
Cette section présente les concepts fondamentaux du service géré pour Apache Flink et la mise en œuvre d'une application en Java à l'aide du DataStream API. Elle décrit les options disponibles pour créer et tester vos applications. Elle fournit également des instructions pour installer les outils nécessaires pour suivre les didacticiels de ce guide et pour créer votre première application.
Rubriques
Passez en revue les composants de l'application Managed Service for Apache Flink
Amazon Managed Service pour Apache Flink prend en charge toutes les API Apache Flink et potentiellement tous les langages JVM. Pour plus d'informations, voir Les API de Flink
Selon l'API que vous choisissez, la structure de l'application et son implémentation sont légèrement différentes. Ce didacticiel de démarrage couvre la mise en œuvre des applications à l'aide du DataStream API en Java.
Pour traiter les données, votre application Managed Service for Apache Flink utilise une application Java qui traite les entrées et produit des sorties à l'aide du moteur d'exécution Apache Flink.
Une application Managed Service for Apache Flink classique comporte les éléments suivants :
-
Propriétés d'exécution : Vous pouvez utiliser propriétés d'exécution pour transmettre les paramètres de configuration à votre application afin de les modifier sans modifier ni republier le code.
-
Sources : L'application consomme des données provenant d'un ou de plusieurs sources. Une source utilise un connecteur
pour lire les données d'un système externe, tel qu'un flux de données Kinesis ou un bucket Kafka. Pour plus d’informations, consultez Ajouter des sources de données de streaming. -
Opérateurs : l’application traite les données à l’aide d’un ou de plusieurs opérateurs. Un opérateur peut transformer, enrichir ou agréger des données. Pour plus d’informations, consultez Opérateurs.
-
Éviers : L'application envoie des données à des sources externes via coule. Un évier utilise un connecteur
pour envoyer des données vers un flux de données Kinesis, une rubrique Kafka, Amazon S3 ou une base de données relationnelle. Vous pouvez également utiliser un connecteur spécial pour imprimer la sortie à des fins de développement uniquement. Pour plus d’informations, consultez Écrire des données à l'aide de cuves.
Votre candidature nécessite quelques dépendances externes, tels que les connecteurs Flink utilisés par votre application, ou éventuellement une bibliothèque Java. Pour être exécutée dans Amazon Managed Service pour Apache Flink, l'application doit être empaquetée avec ses dépendances dans un pot à graisse et chargé dans un compartiment Amazon S3. Vous créez ensuite une application de service géré pour Apache Flink. Vous transmettez l'emplacement du package de code, ainsi que tout autre paramètre de configuration d'exécution.
Ce didacticiel explique comment utiliser Apache Maven pour empaqueter l'application et comment exécuter l'application localement dans l'IDE de votre choix.
Remplissez les prérequis pour terminer les exercices
Pour exécuter la procédure indiquée dans ce guide, vous devez disposer des éléments suivants :
-
Client Git
. Installez le client Git, si ce n'est pas déjà fait. -
Kit de développement Java (JDK) version 11
. Installez un Java JDK 11 et définissez le JAVA_HOMEvariable d'environnement pour pointer vers l'emplacement d'installation de votre JDK. Si vous n'avez pas de JDK 11, vous pouvez utiliser Amazon Coretto 11 ou tout autre JDK standard de votre choix.-
Pour vérifier que le JDK est correctement installé, exécutez la commande suivante. La sortie sera différente si vous utilisez un JDK autre qu'Amazon Corretto. Assurez-vous que la version est 11.x.
$ java --version openjdk 11.0.23 2024-04-16 LTS OpenJDK Runtime Environment Corretto-11.0.23.9.1 (build 11.0.23+9-LTS) OpenJDK 64-Bit Server VM Corretto-11.0.23.9.1 (build 11.0.23+9-LTS, mixed mode)
-
-
Apache Maven
. Installez Apache Maven si ce n'est pas déjà fait. Pour savoir comment l'installer, consultez Installation d'Apache Maven . -
Pour tester votre installation Apache Maven, saisissez les informations suivantes :
$ mvn -version -
-
IDE pour le développement local. Nous vous recommandons d'utiliser un environnement de développement tel que Néon Java Eclipse
ou IntelliJ IDEA pour développer et compiler votre application. -
Pour tester votre installation Apache Maven, saisissez les informations suivantes :
$ mvn -version -
Pour démarrer, accédez à Configurez un AWS compte et création d'un utilisateur administrateur.