View a markdown version of this page

Amazon EMR 7.2.0 - Catatan rilis Tez - Amazon EMR

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Amazon EMR 7.2.0 - Catatan rilis Tez

Amazon EMR 7.2.0 - Perubahan ini

Tipe Deskripsi
Peningkatan Opsi yang disediakan untuk menonaktifkan kendala lokalitas saat meminta kontainer untuk tugas.
Perbaikan Bug Jadikan TaskDependencies# addTaskDependency thread aman
Peningkatan Tingkatkan versi TLS ke 1.3 untuk Tez.

Amazon EMR 7.2.0 - Konfigurasi baru

Klasifikasi Nama Default Deskripsi

tez-site

tez.task.relaxed.locality

false

Saat diaktifkan, batasan lokalitas rak dan simpul tidak dipertimbangkan saat meminta wadah untuk tugas.

Amazon EMR 7.2.0 - Masalah yang diketahui

Masalah pembersihan DAG Tez (EMR 6.11.0 - EMR 7.2.0) - Dalam cluster dengan SSL diaktifkan menjalankan EMR versi 6.11.0 hingga 7.2.0, ada masalah yang diketahui di mana Pengecualian terjadi di TEZ Application Master (AM) selama fase pembersihan DAG. SSLHandshake Ini terjadi ketika mencoba menghapus data shuffle perantara dari node jarak jauh melalui HTTPS setelah kueri selesai, bukan selama eksekusi kueri. Masalah terjadi karena Tez AM tidak dapat membaca konfigurasi TrustStore yang relevan saat memanggil titik akhir layanan shuffle handler. Namun ini hanya memengaruhi pembersihan data shuffle selama pembersihan DAG, pembersihan level aplikasi (AM) tetap terjadi dan membersihkan data shuffle yang tersisa. Jadi ini tidak menyebabkan akumulasi data acak.

Perbaiki versi: - EMR 7.3.0

Solusi - Tambahkan konfigurasi SSL berikut ke tez-site.xml:

<property> <name>ssl.client.truststore.location</name> <value>{SSL_TRUSTSTORE_LOCATION}</value> </property>