View a markdown version of this page

Amazon EMR 7.6.0 - Notas de lançamento do Hadoop - Amazon EMR

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Amazon EMR 7.6.0 - Notas de lançamento do Hadoop

Amazon EMR 7.6.0 - Alterações no Hadoop

Tipo Description

Novo recurso

Estrutura do fornecimento de credenciais S3A

Novo recurso

Suporte do S3A Magic Committer para Hive

Backport

HADOOP-19309: S3A: a CopyFromLocalFile operação falha quando o arquivo de origem não contém o esquema de arquivo

Backport

HADOOP-19050 S3A:Support Concessões de acesso ao S3

Backport

HADOOP-18708S3A: Support S3 Client Side Encryption (CSE)

Amazon EMR 7.6.0 - Recursos do Hadoop

  • As configurações padrão para yarn.scheduler.increment-allocation-mb e yarn.scheduler.minimum-allocation-mb foram modificadas de 32 para 1, o que efetivamente desabilita a normalização de recursos do contêiner no YARN.

  • O sistema de arquivos S3A no Hadoop foi aprimorado para oferecer suporte ao fornecimento de credenciais no nível da solicitação. Com esse recurso, cada solicitação do Amazon S3 feita utilizará um AwsCredentialsProvider. Isso garante maior flexibilidade e segurança ao fornecer dinamicamente as credenciais para cada solicitação.

  • O sistema de arquivos S3A no Hadoop oferece suporte à criptografia do lado do cliente do S3.