View a markdown version of this page

Amazon EMR 7.5.0 - Note sulla versione di Hadoop - Amazon EMR

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Amazon EMR 7.5.0 - Note sulla versione di Hadoop

Amazon EMR 7.5.0 - Modifiche ad Hadoop

Tipo Description

Correzioni di bug

Ha commentato fs.file.impl con un valore vuoto.

Backport

HADOOP-19286: Supporta l'accesso interregionale S3A quando region/endpoint S3 è impostato

Miglioramenti

Impostazione automatica della configurazione della regione S3 per il connettore S3A acceso EMR-EC2

Miglioramenti

Riduci il numero di chiamate in S3A HeadObject

Con il rilascio di Amazon EMR 7.5, il connettore S3A di Spark dimostra prestazioni di lettura paragonabili a EMRFS, come evidenziato dai benchmark che utilizzano un set di dati parquet da 3 TB. TPC-DS

Amazon EMR 7.5.0 - Caratteristiche di Hadoop

  • fs.s3a.endpoint.regionLa configurazione della regione S3 viene impostata automaticamente sulla regione in cui viene avviato il cluster EMR con il connettore S3A per l'implementazione. EMR-EC2

  • L'accesso alla regione cross-bucket di Amazon S3 è abilitato per impostazione predefinita per il connettore S3A. Può essere modificato tramite impostazione. fs.s3a.cross.region.access.enabled=true or false