Versiones de Amazon EMR en EKS 6.6.0 - Amazon EMR

Versiones de Amazon EMR en EKS 6.6.0

Las siguientes versiones de Amazon EMR 6.6.0 están disponibles para Amazon EMR en EKS. Seleccione una versión específica de emr-6.6.0-XXXX para ver más detalles, como la etiqueta de imagen de contenedor relacionada.

Notas de la versión de Amazon EMR 6.6.0

  • Aplicaciones compatibles: Spark 3.2.0-amzn-0, Jupyter Enterprise Gateway (puntos de conexión, versión preliminar pública), Hudi 0.10.1-amzn-0, Iceberg 0.13.1.

  • Componentes compatibles: aws-hm-client (conector de Glue), aws-sagemaker-spark-sdk, emr-s3-select, emrfs, emr-ddb, hudi-spark.

  • Clasificaciones de configuración compatibles:

    Clasificaciones Descripciones

    core-site

    Cambia los valores en el archivo core-site.xml de Hadoop.

    emrfs-site

    Cambiar la configuración de EMRFS.

    spark-metrics

    Cambiar los valores en el archivo metrics.properties de Spark.

    spark-defaults

    Cambiar los valores en el archivo spark-defaults.conf de Spark.

    spark-env

    Cambiar los valores en el entorno de Spark.

    spark-hive-site

    Cambia los valores en el archivo hive-site.xml de Spark.

    spark-log4j

    Cambiar los valores en el archivo log4j.properties de Spark.

    Las clasificaciones de configuración le permiten personalizar las aplicaciones. Suelen corresponder a un archivo de configuración XML de la aplicación, como spark-hive-site.xml. Para obtener más información, consulte Configuración de aplicaciones.

Problema conocido

  • La funcionalidad de la plantilla de pod de Spark con puntos de conexión interactivos no funciona en las versiones 6.4, 6.5 y 6.6 de Amazon EMR en EKS.

Problema resuelto

  • Los registros interactivos de los puntos de conexión se cargan en CloudWatch y S3.