View a markdown version of this page

Amazon EMR 7.5.0 — Versionshinweise zu Hadoop - Amazon EMR

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Amazon EMR 7.5.0 — Versionshinweise zu Hadoop

Amazon EMR 7.5.0 — Änderungen an Hadoop

Typ Description

Fehlerbehebung

Fs.file.impl zu einem leeren Wert auskommentiert.

Backport

HADOOP-19286: Unterstützt den regionsübergreifenden S3A-Zugriff, wenn S3 eingestellt ist region/endpoint

Verbesserung

Automatische S3-Regionskonfigurationseinstellung für den S3A-Anschluss EMR-EC2

Verbesserung

Reduzieren Sie die Anzahl der HeadObject Anrufe in S3A

Mit der Veröffentlichung von Amazon EMR 7.5 weist der S3A-Connector von Spark eine Leseleistung auf, die mit EMRFS vergleichbar ist, wie Benchmarks anhand eines 3-TB-Parquet-Datensatzes belegen. TPC-DS

Amazon EMR 7.5.0 — Hadoop-Funktionen

  • Die S3-Regionskonfiguration fs.s3a.endpoint.region wird automatisch auf die Region festgelegt, in der der EMR-Cluster mit dem S3A-Connector für die Bereitstellung gestartet wird. EMR-EC2

  • Der Bucket-übergreifende Amazon S3-Zugriff ist standardmäßig für den S3A-Connector aktiviert. Er kann durch Einstellung geändert werden. fs.s3a.cross.region.access.enabled=true or false