View a markdown version of this page

Amazon EMR 6.10.0 - Notes de mise à jour de Tez - Amazon EMR

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Amazon EMR 6.10.0 - Notes de mise à jour de Tez

Amazon EMR 6.10.0 - Modifications de Tez

Type Description
Fonctionnalité Activation de tez.runtime.transfer.data-via-events.enabled par défaut
Rétroportage TEZ-4450 : Correction d'un échec de récupération des données de shuffle lorsque les données de shuffle sont transférées via des événements de déplacement de données
Rétroportage TEZ-4460 : correction d'une erreur de délai de lecture lors de la récupération des données de shuffle depuis le gestionnaire Tez Shuffle
Rétroportage TEZ-4455 : Ajout d'un ShuffleHandler pipeline pour une meilleure LoggingHandler débuggabilité
Bogue Corrige le blocage de la tâche Tez par intermittence lorsque la préemption de la tâche est activée

Amazon EMR 6.10.0 - Quelques problèmes connus

  • Jobs Hive exécutés sur Tez — Dans les clusters où le protocole SSL est activé et qui exécutent la version 6.9.0 d'EMR, il existe un problème connu selon lequel les tâches Hive exécutées sur Tez échouent avec une exception. SSLHandshake Cela est lié au problème open source TEZ-4096, qui a été introduit lors de la mise à niveau de Tez vers la version 0.10.2 dans EMR 6.9.0. Le problème nécessite que les configurations liées au SSL soient transmises du côté client (Hive).

    Version corrigée : — EMR 6.10.0

    Solution pour la version 6.9 : ajoutez la configuration SSL suivante au fichier tez-site.xml :

    <property> <name>ssl.client.truststore.location</name> <value>{SSL_TRUSTSTORE_LOCATION}</value> </property>
  • Tâches Pig exécutées sur Tez — Dans les clusters où le protocole SSL est activé et qui exécutent les versions EMR 6.9.0 à 7.0.0, il existe un problème connu selon lequel les tâches Pig exécutées sur Tez échouent avec une exception. SSLHandshake Cela est lié au problème open source TEZ-4096, qui a été introduit lors de la mise à niveau de Tez vers la version 0.10.2 dans EMR 6.9.0. Le problème nécessite que les configurations liées au SSL soient transmises du côté client (Pig).

    Version corrigée : — EMR 7.1.0

    Solution : ajoutez la configuration SSL suivante au fichier tez-site.xml :

    <property> <name>ssl.client.truststore.location</name> <value>{SSL_TRUSTSTORE_LOCATION}</value> </property>