View a markdown version of this page

Amazon EMR 7.10.0 — Tez-Versionshinweise - Amazon EMR

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Amazon EMR 7.10.0 — Tez-Versionshinweise

Amazon EMR 7.10.0 — Tez-Änderungen

Typ Description
Fehlerbehebung TEZ-4595: Es wurde ein Fehler behoben, bei dem Tez abstürzte, wenn versucht wurde, eine neue DAG zu verarbeiten, während sie sich noch von einem früheren Fehler erholte. Dies führte dazu, dass sich beide gegenseitig störten und eine DAGs INVALID_EVENT-Ausnahme auslösten.

Versionshinweise zu Tez

Hinweise zur Fehlerbehebung — Das Problem trat auf, als Wiederherstellungsdateien vorhanden waren und der Anwendungsmaster in den Status RECOVERING → IDLE → RUNNING → IDLE wechselte, wodurch ein kurzes Fenster entstand, in dem Hive DAGs während des Übergangs IDLE → RUNNING neue Daten einreichen konnte. Die Logik für den Zustandsübergang wurde dahingehend geändert, dass der IDLE-Status übersprungen wird, wenn Wiederherstellungsdateien vorhanden sind. Der AM folgt nun dem Ablauf RECOVERING → RUNNING → IDLE, wodurch sichergestellt wird, dass eine neue DAG-Übertragung erst erfolgt, nachdem die wiederhergestellte DAG vollständig bereinigt wurde.