View a markdown version of this page

Amazon EMR 7.5.0 — Hadoop-Versionshinweise - Amazon EMR

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Amazon EMR 7.5.0 — Hadoop-Versionshinweise

Amazon EMR 7.5.0 — Hadoop-Änderungen

Typ Description

Fehlerbehebung

fs.file.impl wurde auf einen leeren Wert auskommentiert.

Backport

HADOOP-19286: Support den regionsübergreifenden S3A-Zugriff, wenn S3 eingestellt region/endpoint ist

Verbesserung

Automatische Einstellung der S3-Regionskonfiguration für eingeschalteten S3A-Anschluss EMR-EC2

Verbesserung

Reduzieren Sie die Anzahl der HeadObject Anrufe in S3A

Mit der Veröffentlichung von Amazon EMR 7.5 weist der S3A-Konnektor von Spark eine mit EMRFS vergleichbare Leseleistung auf, wie Benchmarks anhand eines 3-TB-Parkettdatensatzes belegen. TPC-DS

Amazon EMR 7.5.0 — Hadoop-Funktionen

  • Die S3-Regionskonfiguration fs.s3a.endpoint.region wird automatisch auf die Region festgelegt, in der der EMR-Cluster mit dem S3A-Connector für EMR-EC2 die Bereitstellung gestartet wird.

  • Der bereichsübergreifende Amazon S3 S3-Zugriff ist standardmäßig für den S3A-Connector aktiviert. Er kann durch eine Einstellung geändert werden. fs.s3a.cross.region.access.enabled=true or false