Amazon EMR pada rilis EKS 7.11.0 - Amazon EMR
RilisCatatan rilisPerubahan dan fitur

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Amazon EMR pada rilis EKS 7.11.0

Halaman ini menjelaskan fungsionalitas baru dan yang diperbarui untuk Amazon EMR yang khusus untuk EMR Amazon pada penerapan EKS. Untuk detail tentang Amazon EMR yang berjalan di Amazon EC2 dan tentang rilis Amazon EMR 7.11.0 secara umum, lihat Amazon EMR 7.11.0 di Panduan Rilis Amazon EMR.

Amazon EMR pada rilis EKS 7.11

Rilis Amazon EMR 7.11.0 berikut tersedia untuk Amazon EMR di EKS. Pilih rilis EMR-7.11.0-XXXX tertentu untuk melihat detail selengkapnya seperti tag gambar kontainer terkait.

Flink releases

Rilis Amazon EMR 7.11.0 berikut tersedia untuk Amazon EMR di EKS saat Anda menjalankan aplikasi Flink.

Spark releases

Rilis Amazon EMR 7.11.0 berikut tersedia untuk Amazon EMR di EKS saat Anda menjalankan aplikasi Spark.

  • emr-7.11.0-terbaru

  • emr-7.11.0-20251020

  • emr-7.11.0-spark-rapids-latest

  • emr-7.11.0-spark-rapids-20251020

  • emr-7.11.0-java11-latest

  • emr-7.11.0-java11-20251020

  • emr-7.11.0-java8-latest

  • emr-7.11.0-java8-20251020

  • emr-7.11.0-spark-rapids-java8-latest

  • emr-7.11.0-spark-rapids-java8-20251020

  • notebook-spark/emr-7.11.0-latest

  • notebook-spark/emr-7.11.0-20251020

  • notebook-spark/emr-7.11.0-spark-rapids-latest

  • notebook-spark/emr-7.11.0-spark-rapids-20251020

  • notebook-spark/emr-7.11.0-java11-latest

  • notebook-spark/emr-7.11.0-java11-20251020

  • notebook-spark/emr-7.11.0-java8-latest

  • notebook-spark/emr-7.11.0-java8-20251020

  • notebook-spark/emr-7.11.0-spark-rapids-java8-latest

  • notebook-spark/emr-7.11.0-spark-rapids-java8-20251020

  • notebook-python/emr-7.11.0-latest

  • notebook-python/emr-7.11.0-20251020

  • notebook-python/emr-7.11.0-spark-rapids-latest

  • notebook-python/emr-7.11.0-spark-rapids-20251020

  • notebook-python/emr-7.11.0-java11-latest

  • notebook-python/emr-7.11.0-java11-20251020

  • notebook-python/emr-7.11.0-java8-latest

  • notebook-python/emr-7.11.0-java8-20251020

  • notebook-python/emr-7.11.0-spark-rapids-java8-latest

  • notebook-python/emr-7.11.0-spark-rapids-java8-20251020

  • livy/emr-7.11.0-latest

  • livy/emr-7.11.0-20251020

  • livy/emr-7.11.0-java11-latest

  • livy/emr-7.11.0-java11-20251020

  • livy/emr-7.11.0-java8-latest

  • livy/emr-7.11.0-java8-20251020

Catatan rilis

Catatan rilis untuk Amazon EMR di EKS 7.11.0:

  • Aplikasi yang didukung - AWS SDK untuk Java 2.35.5 and 1.12.792, Apache Spark 3.5.6-amzn-0, Apache Hudi 1.0.2-amzn-0, Apache Iceberg 1.9.1-amzn-0, Delta 3.3.2-amzn-0, Apache Spark RAPIDS 25.04.0-amzn-0, Apache Flink 1.20.0-amzn-5

  • Komponen yang didukung - emr-ddbemr-goodies,emr-s3-select,,emrfs,hadoop-client,hudi,hudi-spark,iceberg,spark-kubernetes.

  • Klasifikasi konfigurasi yang didukung

    Untuk digunakan dengan StartJobRundan CreateManagedEndpoint APIs:

    Klasifikasi Deskripsi

    core-site

    Ubah nilai dalam file core-site.xml Hadoop.

    emrfs-site

    Ubah pengaturan EMRFS.

    spark-metrics

    Ubah nilai dalam file metrics.properties Spark.

    spark-defaults

    Ubah nilai dalam file spark-defaults.conf Spark.

    spark-env

    Ubah nilai di lingkungan Spark.

    spark-hive-site

    Ubah nilai dalam file hive-site.xml Spark.

    spark-log4j2

    Ubah nilai dalam file log4j2.properties Spark.

    emr-job-submitter

    Konfigurasi untuk pod pengirim pekerjaan.

    Untuk digunakan secara khusus dengan CreateManagedEndpoint APIs:

    Klasifikasi Deskripsi

    jeg-config

    Ubah nilai dalam file Jupyter Enterprise Gatewayjupyter_enterprise_gateway_config.py.

    jupyter-kernel-overrides

    Ubah nilai untuk Gambar Kernel di file Spesifikasi Kernel Jupyter.

    Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti spark-hive-site.xml. Untuk informasi selengkapnya, lihat Mengkonfigurasi Aplikasi.

Perubahan dan fitur

Perubahan berikut disertakan dengan rilis 7.11.0 Amazon EMR di EKS:

Amazon EMR di EKS sekarang mendukung integrasi dengan SageMaker Unified Studio melalui solusi Livy terkelola termasuk:

  • Sesi Terkelola: Jenis sumber daya sesi interaktif baru yang menyediakan titik akhir HTTPS khusus untuk menjalankan sesi Spark di cluster EKS Anda melalui SageMaker Unified Studio

  • Integrasi Lake Formation: Mendukung kontrol akses data dengan dua mode a) Kontrol Akses Berbutir Halus b) Akses Tabel Penuh (Mode Kompatibilitas)

  • Manajemen Identitas: Opsi otentikasi fleksibel a) Kontrol akses berbasis peran IAM b) kontrol akses berbasis.

  • Sesi Latar Belakang Pengguna dengan integrasi: Mendukung beban kerja Spark yang berjalan lama untuk terus berjalan bahkan setelah pengguna log off dari SageMaker Unified Studio, mendukung sesi hingga 90 hari