View a markdown version of this page

Amazon EMR 7.2.0 — Hadoop-Versionshinweise - Amazon EMR

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Amazon EMR 7.2.0 — Hadoop-Versionshinweise

Amazon EMR 7.2.0 — Hadoop-Änderungen

Typ Description

Neues Feature

HADOOP-18850: S3A: Aktivieren Sie die serverseitige Dual-Layer-Verschlüsselung mit Schlüsseln AWS KMS

Neues Feature

Support S3 Glacier beim Lesen wiederhergestellter Objekte

Verbesserung

Dynamische Skalierung der maximalen S3A-Verbindungen basierend auf den Kernen bei der Ausführung von Spark-Jobs

Verbesserung

HADOOP-18797: Support gleichzeitige Schreibvorgänge mit S3A Magic Committer

Verbesserung

HADOOP-19047: Support das InMemory Tracking von S3A Magic Commits

Verbesserung

Fügen Sie die Methoden „Exportieren“, „Veröffentlichen“ und „AbortPublish" in MagicV2 Committer hinzu

Verbesserung

Implementieren Sie die API ReadFullyIntoBuffers FileSystem in S3A

Fehlerbehebung

HADOOP-18793: S3A bereinigt das Verzeichnis der Staging-Uploads StagingCommitter nicht

Upgrade

HADOOP-19008: S3A: Aktualisieren Sie die AWS-SDK-Version auf 2.21.41

Upgrade

HADOOP-18613: Upgrade auf Version 3.8.3 ZooKeeper

Amazon EMR 7.2.0 — Hadoop-Funktionen

In der folgenden Liste finden Sie neue Hadoop-Funktionen in Amazon EMR 7.2.0.

  • S3-Gletscherunterstützung zum Lesen wiederhergestellter Objekte — Mit Amazon EMR Version 7.2.0 und höher können Sie wiederhergestellte Glacier-Objekte vom S3-Speicherort der Tabelle mit dem S3A Protokoll lesen. Bei diesem Lesevorgang werden archivierte Glacier-Dateien ignoriert, wenn sie noch wiederhergestellt werden.

  • Support gleichzeitiger Schreibvorgänge mit dem S3A Magic Committer — Amazon EMR 7.2.0 bietet Unterstützung für gleichzeitige Schreibvorgänge mit dem S3A Magic Committer. Diese Funktion wurde der OSS Hadoop-Community als Teil von hinzugefügt. HADOOP-18797