View a markdown version of this page

Amazon EMR 7.4.0 - Note sulla versione di Hadoop - Amazon EMR

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Amazon EMR 7.4.0 - Note sulla versione di Hadoop

Amazon EMR 7.4.0 - Modifiche ad Hadoop

Tipo Description

Upgrade

La versione Hadoop è stata aggiornata alla 3.4.0, consulta le note di rilascio OSS.

Correzioni di bug

Correggi le metriche negative di Pending e Allocated Yarn per FairScheduler

Correzioni di bug

YARN-11702 : Risolve Yarn sull'allocazione dei contenitori

Correzioni di bug

Migliora la gestione delle condizioni di gara durante il downscaling dei nodi

Miglioramenti

HADOOP-18679 : Aggiungi API per l'eliminazione dei file bulk/paged

Miglioramenti

HADOOP-19203: BulkDelete API WrappEdio per generare iOS come UncheckedIOExceptions

Miglioramenti

HADOOP-19205: initialization/close S3A: più lento rispetto all'SDK v1

Miglioramenti

HADOOP-19161: S3A: opzione fs.s3a.performance.flags per prendere l'elenco dei flag di prestazione

Miglioramenti

HADOOP-19072: S3A: espandi le ottimizzazioni sui negozi con fs.s3a.performance.flags per mkdir

Amazon EMR 7.4.0 - Caratteristiche di Hadoop

Consulta l'elenco seguente per le nuove funzionalità Hadoop in Amazon EMR 7.4.0.

  • I valori di configurazione predefiniti sono stati ottimizzati per prestazioni ottimali:

    • mapreduce.input.fileinputformat.list-status.num-threads=10 — Risale a 1.

    • fs.s3a.block.size=64M — Risale a 32M.

    • fs.s3a.multipart.size=128M — Risale a 64M.

  • Out-of-the-box ottimizzazioni per il miglioramento delle prestazioni per accelerare i lavori con il file system MapReduce S3A.