View a markdown version of this page

Amazon EMR 7.4.0 - Catatan rilis Hadoop - Amazon EMR
Amazon EMR 7.4.0 - Perubahan HadoopAmazon EMR 7.4.0 - Fitur Hadoop

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Amazon EMR 7.4.0 - Catatan rilis Hadoop

Amazon EMR 7.4.0 - Perubahan Hadoop

Tipe Deskripsi

Peningkatan

Versi Hadoop ditingkatkan ke 3.4.0, lihat catatan rilis OSS.

Perbaikan Bug

Perbaiki metrik Benang Tertunda dan Teralokasi negatif untuk FairScheduler

Perbaikan Bug

YARN-11702 : Perbaiki Benang di atas mengalokasikan wadah

Perbaikan Bug

Tingkatkan penanganan kondisi balapan saat menurunkan skala node

Peningkatan

HADOOP-18679 : Tambahkan API untuk bulk/paged menghapus file

Peningkatan

HADOOP-19203: WRAPpedio BulkDelete API untuk meningkatkan IOE sebagai UncheckEdioExceptions

Peningkatan

HADOOP-19205: S3A: initialization/close lebih lambat dari dengan v1 SDK

Peningkatan

HADOOP-19161: S3A: opsi fs.s3a.performance.flags untuk mengambil daftar flag kinerja

Peningkatan

HADOOP-19072: S3A: memperluas pengoptimalan di toko dengan f s.s3a.performance.flags untuk mkdir

Amazon EMR 7.4.0 - Fitur Hadoop

Lihat daftar berikut untuk fitur Hadoop baru di Amazon EMR 7.4.0.

  • Nilai konfigurasi default telah disesuaikan untuk kinerja optimal:

    • mapreduce.input.fileinputformat.list-status.num -threads=10 - Ini naik dari 1.

    • fs.s3a.block.siz e=64m — Ini naik dari 32M.

    • fs.s3a.multipart. size=128m - Ini naik dari 64M.

  • Out-of-the-box optimasi peningkatan kinerja untuk mempercepat MapReduce pekerjaan dengan sistem file S3A.