View a markdown version of this page

Amazon EMR 6.10.0 – Tez-Versionshinweise - Amazon EMR
Tez-Änderungen

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Amazon EMR 6.10.0 – Tez-Versionshinweise

Amazon EMR 6.10.0 – Tez-Änderungen

Typ Description
Feature tez.runtime.transfer.data-via-events.enabled standardmäßig aktivieren
Backport TEZ-4450: Behebung eines Fehlers beim Abrufen von Shuffle-Daten, wenn Shuffle-Daten über Datenverschiebungsereignisse übertragen wurden
Backport TEZ-4460: Der Lese-Timeout-Fehler beim Abrufen von Shuffle-Daten aus dem Tez Shuffle Handler wurde behoben
Backport TEZ-4455: Pipeline für bessere LoggingHandler Debuggbarkeit ShuffleHandler hinzufügen
Fehler Behebt, dass die Tez-Aufgabe zeitweise hängen bleibt, wenn das Preemptive der Aufgabe aktiviert ist

Amazon EMR 6.10.0 — Bekannte Probleme bei Tez

  • Hive-Jobs, die auf Tez ausgeführt werden — In Clustern mit aktiviertem SSL, auf denen EMR Version 6.9.0 ausgeführt wird, gibt es ein bekanntes Problem, bei dem Hive-Jobs, die auf Tez ausgeführt werden, mit Ausnahme fehlschlagen. SSLHandshake Dies steht im Zusammenhang mit dem Open-Source-Problem TEZ-4096, das mit dem Tez-Upgrade auf Version 0.10.2 in EMR 6.9.0 eingeführt wurde. Das Problem erfordert, dass SSL-bezogene Konfigurationen von der Clientseite (Hive) übergeben werden.

    Version korrigieren: — EMR 6.10.0

    Problemumgehung für Version 6.9 — Fügen Sie die folgende SSL-Konfiguration zu tez-site.xml hinzu:

    <property>
    <name>ssl.client.truststore.location</name>
    <value>{SSL_TRUSTSTORE_LOCATION}</value>
</property>

  • Pig-Jobs, die auf Tez ausgeführt werden — In Clustern mit aktiviertem SSL, auf denen EMR-Versionen 6.9.0 bis 7.0.0 ausgeführt werden, gibt es ein bekanntes Problem, bei dem Pig-Jobs, die auf Tez ausgeführt werden, mit Exception fehlschlagen. SSLHandshake Dies steht im Zusammenhang mit dem Open-Source-Problem TEZ-4096, das mit dem Tez-Upgrade auf Version 0.10.2 in EMR 6.9.0 eingeführt wurde. Das Problem erfordert, dass SSL-bezogene Konfigurationen von der Clientseite (Pig) übergeben werden.

    Version korrigieren: — EMR 7.1.0

    Problemumgehung — Fügen Sie die folgende SSL-Konfiguration zu tez-site.xml hinzu:

    <property>
    <name>ssl.client.truststore.location</name>
    <value>{SSL_TRUSTSTORE_LOCATION}</value>
</property>