View a markdown version of this page

Amazon EMR 7.2.0: notas de la versión de Hadoop - Amazon EMR

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Amazon EMR 7.2.0: notas de la versión de Hadoop

Amazon EMR 7.2.0: cambios en Hadoop

Tipo Description (Descripción)

Nueva característica

HADOOP-18850: S3A: Habilite el cifrado de doble capa del lado del servidor con claves AWS KMS

Nueva característica

La compatibilidad de S3 Glacier lee objetos restaurados

Mejora

Escalar dinámicamente el máximo de conexiones del S3A en función de los núcleos al ejecutar los trabajos de Spark

Mejora

HADOOP-18797: Support concurrente escrituras con S3A Magic Committer

Mejora

HADOOP-19047: Support InMemory Tracking of S3A Magic Commits

Mejora

Agregue los métodos «Exportar», «Publicar» y «» en AbortPublish MagicV2 Committer

Mejora

Implemente la API en ReadFullyIntoBuffers FileSystem S3A

Corrección de errores

HADOOP-18793: El S3A StagingCommitter no limpia el directorio staging-uploads

Upgrade

HADOOP-19008: S3A: actualice la versión aws-sdk a la 2.21.41

Upgrade

HADOOP-18613: Actualización a la versión 3.8.3 ZooKeeper

Amazon EMR 7.2.0: características de Hadoop

Consulte la siguiente lista para ver las nuevas funciones de Hadoop en Amazon EMR 7.2.0.

  • Compatibilidad con S3 Glacier para leer objetos restaurados. Con Amazon EMR versión 7.2.0 y versiones posteriores, puede leer los objetos Glacier restaurados desde la ubicación S3 de la tabla con el protocolo S3A. Esta operación de lectura ignora los archivos de Glacier archivados si aún se están restaurando.

  • Admite escrituras simultáneas con el confirmador S3A Magic: Amazon EMR 7.2.0 incorpora la compatibilidad para escrituras simultáneas con el confirmador S3A Magic. Esta función se agregó a la comunidad Hadoop de OSS como parte de. HADOOP-18797