Amazon EMR on EKS 7.12.0 릴리스 - Amazon EMR
출시릴리스 노트변경 사항 및 기능

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

Amazon EMR on EKS 7.12.0 릴리스

이 페이지에서는 Amazon EMR on EKS 배포에 특정한 Amazon EMR의 신규 기능 및 업데이트된 기능을 설명합니다. Amazon EC2에서 실행되는 Amazon EMR 및 Amazon EMR 7.12.0 릴리스에 대한 일반적인 자세한 내용은 Amazon EMR 릴리스 안내서의 Amazon EMR 7.12.0을 참조하세요.

Amazon EMR on EKS 7.12 릴리스

Amazon EMR on EKS에는 다음 Amazon EMR 7.12.0 릴리스를 사용할 수 있습니다. 관련 컨테이너 이미지 태그와 같은 세부 정보를 보려면 특정 emr-7.12.0-XXXX 릴리스를 선택합니다.

Flink releases

Flink 애플리케이션을 실행할 때 Amazon EMR on EKS에 대해 다음 Amazon EMR 7.12.0 릴리스를 사용할 수 있습니다.

Spark releases

Spark 애플리케이션을 실행할 때 Amazon EMR on EKS에 대해 다음 Amazon EMR 7.12.0 릴리스를 사용할 수 있습니다.

  • emr-7.12.0-latest

  • emr-7.12.0-20251111

  • emr-7.12.0-spark-rapids-latest

  • emr-7.12.0-spark-rapids-20251111

  • emr-7.12.0-java11-latest

  • emr-7.12.0-java11-20251111

  • emr-7.12.0-java8-latest

  • emr-7.12.0-java8-20251111

  • emr-7.12.0-spark-rapids-java8-latest

  • emr-7.12.0-spark-rapids-java8-20251111

  • notebook-spark/emr-7.12.0-latest

  • notebook-spark/emr-7.12.0-20251111

  • notebook-spark/emr-7.12.0-spark-rapids-latest

  • notebook-spark/emr-7.12.0-spark-rapids-20251111

  • notebook-spark/emr-7.12.0-java11-latest

  • notebook-spark/emr-7.12.0-java11-20251111

  • notebook-spark/emr-7.12.0-java8-latest

  • notebook-spark/emr-7.12.0-java8-20251111

  • notebook-spark/emr-7.12.0-spark-rapids-java8-latest

  • notebook-spark/emr-7.12.0-spark-rapids-java8-20251111

  • notebook-python/emr-7.12.0-latest

  • notebook-python/emr-7.12.0-20251111

  • notebook-python/emr-7.12.0-spark-rapids-latest

  • notebook-python/emr-7.12.0-spark-rapids-20251111

  • notebook-python/emr-7.12.0-java11-latest

  • notebook-python/emr-7.12.0-java11-20251111

  • notebook-python/emr-7.12.0-java8-latest

  • notebook-python/emr-7.12.0-java8-20251111

  • notebook-python/emr-7.12.0-spark-rapids-java8-latest

  • notebook-python/emr-7.12.0-spark-rapids-java8-20251111

  • livy/emr-7.12.0-latest

  • livy/emr-7.12.0-20251111

  • livy/emr-7.12.0-java11-latest

  • livy/emr-7.12.0-java11-20251111

  • livy/emr-7.12.0-java8-latest

  • livy/emr-7.12.0-java8-20251111

릴리스 노트

Amazon EMR on EKS 7.12.0 릴리스 정보:

  • 지원되는 애플리케이션 ‐ AWS SDK for Java 2.35.5 and 1.12.792, Apache Spark 3.5.6-amzn-1, Apache Hudi 1.0.2-amzn-1, Apache Iceberg 1.10.0-amzn-0, Delta 3.3.2-amzn-1, Apache Spark RAPIDS 25.04.0-amzn-0, Apache Flink 1.20.0-amzn-6

  • 지원되는 구성 요소 ‐emr-ddb, emr-goodies, emr-s3-select, emrfs, hadoop-client, hudi, hudi-spark, iceberg, spark-kubernetes.

  • 지원되는 구성 분류

    StartJobRun 및 CreateManagedEndpoint API와 함께 사용하는 경우:

    분류 설명

    core-site

    Hadoop core-site.xml 파일에서 값을 변경합니다.

    emrfs-site

    EMRFS 설정을 변경합니다.

    spark-metrics

    Spark metrics.properties 파일에서 값을 변경합니다.

    spark-defaults

    Spark spark-defaults.conf 파일에서 값을 변경합니다.

    spark-env

    Spark 환경에서 값을 변경합니다.

    spark-hive-site

    Spark hive-site.xml 파일에서 값을 변경합니다.

    spark-log4j2

    Spark log4j2.properties 파일에서 값을 변경합니다.

    emr-job-submitter

    작업 제출자 포드 구성.

    특별히 CreateManagedEndpoint API와 함께 사용하는 경우:

    분류 설명

    jeg-config

    Jupyter Enterprise Gateway jupyter_enterprise_gateway_config.py 파일에서 값을 변경합니다.

    jupyter-kernel-overrides

    Jupyter 커널 사양 파일에서 커널 이미지 값을 변경합니다.

    구성 분류를 사용하면 애플리케이션을 사용자 지정할 수 있습니다. 이는 종종 spark-hive-site.xml과 같이 애플리케이션의 구성 XML 파일에 해당합니다. 자세한 내용은 애플리케이션 구성을 참조하세요.

변경 사항 및 기능

Amazon EMR on EKS의 7.12.0 릴리스에는 다음 기능이 포함되어 있습니다.

  • Iceberg 구체화된 뷰 - EMR 7.12.0부터 EMR Spark는 Iceberg 구체화된 뷰(MV)의 생성 및 관리를 지원합니다.

  • Hudi 전체 테이블 액세스 - EMR 7.12.0부터 EMR은 이제 Lake Formation에 정의된 정책을 기반으로 Apache Spark의 Apache Hudi에 대한 전체 테이블 액세스(FTA) 제어를 지원합니다. 이 기능을 사용하면 작업 역할에 전체 테이블 액세스 권한이 있을 때 Lake Formation 등록 테이블의 Amazon EMR Spark 작업에서 읽기 및 쓰기 작업을 수행할 수 있습니다.

  • Iceberg 버전 업그레이드 - EMR 7.12.0은 Apache Iceberg 버전 1.10을 지원합니다.

  • Livy 대화형 워크로드 로깅 - EMR 7.12.0부터 EMR은 Livy Spark 작업 실패에 대한 문제 해결을 개선하기 위해 주요 시스템 구성 요소에 대한 광범위한 로깅을 지원합니다. 이 기능은 EMR 서비스에 추가 Livy 및 SecretAgent 로그에 대한 액세스 권한을 제공하여 문제 해결을 간소화합니다.