View a markdown version of this page

Amazon EMR 7.6.0: notas de la versión de Hadoop - Amazon EMR

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Amazon EMR 7.6.0: notas de la versión de Hadoop

Amazon EMR 7.6.0: cambios en Hadoop

Tipo Description (Descripción)

Nueva característica

Estructura de la expedición de credenciales de S3A

Nueva característica

Compatibilidad de S3A Magic Committer con Hive

Portabilidad con versiones anteriores

HADOOP-19309: S3A: la CopyFromLocalFile operación falla cuando el archivo fuente no contiene el esquema de archivos

Portabilidad con versiones anteriores

HADOOP-19050 S3A:Support Concesiones de acceso a S3

Portabilidad con versiones anteriores

HADOOP-18708S3A: Support S3 Client Side Encryption (CSE)

Amazon EMR 7.6.0: Características de Hadoop

  • La configuración predeterminada de yarn.scheduler.increment-allocation-mb y yarn.scheduler.minimum-allocation-mb se modificó de 32 a 1, lo que deshabilita de forma efectiva la normalización de los recursos de los contenedores en YARN.

  • Se mejoró el sistema de archivos de S3A en Hadoop para admitir la expedición de credenciales al nivel de la solicitud. Con esta característica, cada solicitud de Amazon S3 utilizará AwsCredentialsProvider. Esto garantiza una mayor flexibilidad y seguridad, ya que se proporcionan credenciales de forma dinámica para cada solicitud.

  • El sistema de archivos de S3A en Hadoop admite cifrado del cliente de S3.