Amazon EMR 7.6.0 - Note sulla versione di Hadoop

Amazon EMR 7.6.0 - Modifiche ad Hadoop

Tipo	Description
Nuova caratteristica	Struttura della vendita di credenziali S3A
Nuova caratteristica	Supporto S3A Magic Committer per Hive
Backport	HADOOP-19309: S3A: l' CopyFromLocalFile operazione fallisce quando il file sorgente non contiene uno schema di file
Backport	HADOOP-19050 S3A:Support Sovvenzioni di accesso S3
Backport	HADOOP-18708S3A: Supporta la crittografia lato client (CSE) S3

Le impostazioni di configurazione predefinite per yarn.scheduler.increment-allocation-mb e yarn.scheduler.minimum-allocation-mb sono state modificate da 32 a 1, il che disabilita efficacemente la normalizzazione delle risorse del contenitore in YARN.
Il filesystem S3A in Hadoop è stato migliorato per supportare la vendita di credenziali a livello di richiesta. Con questa funzionalità, ogni richiesta Amazon S3 effettuata utilizzerà un. AwsCredentialsProvider Ciò garantisce una maggiore flessibilità e sicurezza fornendo in modo dinamico le credenziali per ogni richiesta.
Il file system S3A in Hadoop supporta la crittografia lato client S3.

Avvertimento JavaScript è disabilitato o non è disponibile nel tuo browser.

Per usare la documentazione AWS, JavaScript deve essere abilitato. Consulta le pagine della guida del browser per le istruzioni.

Amazon EMR 7.7.0 - Note sulla versione di Hadoop

Amazon EMR 7.5.0 - Note sulla versione di Hadoop