Rilasci 6.12.0 di Amazon EMR su EKS - Amazon EMR
RilasciNote di rilascioCaratteristiche

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Rilasci 6.12.0 di Amazon EMR su EKS

Questa pagina descrive la funzionalità nuova e aggiornata di Amazon EMR specifica per l'implementazione di Amazon EMR su EKS. Per dettagli su Amazon EMR in esecuzione su Amazon EC2 e sulla versione Amazon EMR 6.12.0 in generale, consulta Amazon EMR 6.12.0 nella Amazon EMR Release Guide.

Rilasci 6.12 di Amazon EMR su EKS

I seguenti rilasci 6.12.0 di Amazon EMR sono disponibili per Amazon EMR su EKS. Seleziona un rilascio emr-6.12.0-XXXX specifico per visualizzare ulteriori dettagli, come il relativo tag dell'immagine di container.

  • emr-6.12.0-latest

  • emr-6.12.0-20240321

  • emr-6.12.0-20230701

  • emr-6.12.0- spark-rapids-latest

  • emr-6.12.0-spark-rapids-20230701

  • emr-6.12.0-java11-latest

  • emr-6.12.0-java11-20230701

  • emr-6.12.0-java17-latest

  • emr-6.12.0-java17-20230701

  • emr-6.12.0- spark-rapids-java 17 - più recente

  • emr-6.12.0- spark-rapids-java 17-20230701

  • notebook-spark/emr-6.12.0-latest

  • notebook-spark/emr-6.12.0-20230701

  • taccuino - spark/emr-6.12.0- spark-rapids-latest

  • notebook-spark/emr-6.12.0-spark-rapids-20230701

  • notebook-python/emr-6.12.0-latest

  • notebook-python/emr-6.12.0-20230701

  • notebook-python/emr-6.12.0- spark-rapids-latest

  • notebook-python/emr-6.12.0-spark-rapids-20230701

Note di rilascio

Note di rilascio di Amazon EMR su EKS 6.12.0

  • Applicazioni supportate ‐ AWS SDK per Java 1.12.490, Apache Spark 3.4.0-amzn-0, Apache Hudi 0.13.1-amzn-0, Apache Iceberg 1.3.0-amzn-0, Delta 2.4.0, Apache Spark RAPIDS 23.06.0-amzn-0, Jupyter Enterprise Gateway 2.6.0

  • Componenti supportati: aws-sagemaker-spark-sdk, emr-ddb, emr-goodies, emr-s3-select, emrfs, hadoop-client, hudi, hudi-spark, iceberg, spark-kubernetes.

  • Classificazioni di configurazione supportate

    CreateManagedEndpoint APIsDa utilizzare con e: StartJobRun

    Classificazioni Descrizioni

    core-site

    Modifica i valori nel file Hadoop core-site.xml.

    emrfs-site

    Modifica le impostazioni EMRFS.

    spark-metrics

    Modifica i valori nel file Spark metrics.properties.

    spark-defaults

    Modifica i valori nel file Spark spark-defaults.conf.

    spark-env

    Modifica i valori nell'ambiente Spark.

    spark-hive-site

    Modifica i valori nel file Spark hive-site.xml.

    spark-log4j

    Modifica i valori nel file Spark log4j2.properties.

    emr-job-submitter

    Configurazione per il pod del mittente di processi.

    Da utilizzare specificamente con CreateManagedEndpoint APIs:

    Classificazioni Descrizioni

    jeg-config

    Modifica i valori nel file jupyter_enterprise_gateway_config.py Jupyter Enterprise Gateway.

    jupyter-kernel-overrides

    Modifica il valore per l'immagine del kernel nel file Jupyter Kernel Spec.

    Le classificazioni di configurazione consentono di personalizzare le applicazioni. Spesso corrispondono a un file XML di configurazione per l'applicazione, ad esempio spark-hive-site.xml. Per ulteriori informazioni, consulta la sezione Configurazione delle applicazioni.

Funzionalità significative

Nel rilascio 6.12 di Amazon EMR su EKS sono incluse le funzionalità elencate di seguito.

  • Java 17: con Amazon EMR su EKS 6.12 e versioni successive, puoi avviare Spark con il runtime di Java 17. Per farlo, trasmetti emr-6.12.0-java17-latest come etichetta di rilascio. Consigliamo di convalidare ed eseguire test delle prestazioni prima di trasferire i carichi di lavoro di produzione da versioni precedenti dell'immagine Java all'immagine Java 17.