Apache Oozie - Amazon EMR

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Apache Oozie

Anmerkung

Oozie-Verfall — Da OSS Oozie in den Attic-Modus gewechselt ist, wird es aus einer der kommenden EMR-Versionen entfernt. Wir empfehlen Kunden, MWAA als Alternative zu Oozie zu verwenden. Sie können sich auf das Hilfsprogramm oozie-to-airflow-emrunter beziehen, um bestehende GitHub Oozie-Workflows zu MWAA zu migrieren.

Verwenden Sie den Apache Oozie Workflow Scheduler, um Hadoop-Aufträge zu verwalten und zu koordinieren. Weitere Informationen finden Sie unter https://attic.apache.org/projects/oozie.html.

Die native Weboberfläche von Oozie wird in Amazon EMR nicht unterstützt. Wenn Sie eine Front-End-Oberfläche für Oozie nutzen möchten, können Sie die Hue Oozie-Anwendung verwenden. Weitere Informationen finden Sie unter Hue. Oozie ist in Amazon-EMR-Version 5.0.0 und höher enthalten. Oozie ist als Sandbox-Anwendung in früheren Versionen enthalten. Weitere Informationen finden Sie unter Amazon-EMR-4.x-Versionen.

Wenn Sie ein benutzerdefiniertes Amazon-Linux-AMI verwenden, das auf einem Amazon-Linux-AMI mit einem Erstellungsdatum vom 8.11.2018 basiert, kann der Oozie-Server nicht gestartet werden. Wenn Sie Oozie verwenden, erstellen Sie ein benutzerdefiniertes AMI, das auf einer Amazon-Linux-AMI-ID mit einem anderen Erstellungsdatum basiert. Sie können den folgenden AWS CLI -Befehl verwenden, um eine Liste der Images IDs für alle HVM-Amazon-Linux-Amazon-Linux-AMIs AMIs mit einer Version 2018.03 zusammen mit dem Veröffentlichungsdatum zurückzugeben, sodass Sie ein geeignetes Amazon-Linux-AMI als Basis auswählen können. MyRegion Ersetzen Sie durch Ihre Region-ID, z. B. us-west-2.

aws ec2 --region MyRegion describe-images --owner amazon --query 'Images[?Name!=`null`]|[?starts_with(Name, `amzn-ami-hvm-2018.03`) == `true`].[CreationDate,ImageId,Name]' --output text | sort -rk1

Die folgende Tabelle listet die Version von Oozie auf, die in der neuesten Version der Amazon-EMR-7.x-Serie enthalten ist, zusammen mit den Komponenten, die Amazon EMR mit Oozie installiert.

Die Version der Komponenten, die mit Oozie in dieser Version installiert wurden, finden Sie unter Komponentenversionen der Version 7.9.0.

Oozie-Versionsinformationen für emr-7.9.0
Amazon-EMR-Versionsbezeichnung Oozie-Version Mit Oozie installierte Komponenten

emr-7.9.0

Oozie 5.2.1

emrfs, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, oozie-client, oozie-server, tez-on-yarn, tez-on-worker

Die folgende Tabelle listet die Version von Oozie auf, die in der neuesten Version der Amazon-EMR-6.x-Serie enthalten ist, zusammen mit den Komponenten, die Amazon EMR mit Oozie installiert.

Die Version der Komponenten, die mit Oozie in dieser Version installiert wurden, finden Sie unter Komponentenversionen der Version 6.15.0.

Oozie-Versionsinformationen für emr-6.15.0
Amazon-EMR-Versionsbezeichnung Oozie-Version Mit Oozie installierte Komponenten

emr-6.15.0

Oozie 5.2.1

emrfs, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, oozie-client, oozie-server, tez-on-yarn, tez-on-worker

Die folgende Tabelle listet die Version von Oozie auf, die in der neuesten Version der Amazon-EMR-5.x-Serie enthalten ist, zusammen mit den Komponenten, die Amazon EMR mit Oozie installiert.

Die Version der Komponenten, die mit Oozie in dieser Version installiert wurden, finden Sie unter Komponentenversionen der Version 5.36.2.

Oozie-Versionsinformationen für emr-5.36.2
Amazon-EMR-Versionsbezeichnung Oozie-Version Mit Oozie installierte Komponenten

emr-5.36.2

Oozie 5.2.1

emrfs, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, oozie-client, oozie-server, tez-on-yarn