Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.
# Versioni di rilascio di Amazon EMR Serverless
Una versione di Amazon EMR è un insieme di applicazioni open source dell'ecosistema dei big data. Ogni versione include applicazioni, componenti e funzionalità per big data selezionati per consentire la distribuzione e la configurazione di Amazon EMR Serverless durante l'esecuzione del lavoro.
Con Amazon EMR 6.6.0 e versioni successive, implementa EMR Serverless. Questa opzione di distribuzione non è disponibile con le versioni precedenti di Amazon EMR. Quando invii il lavoro, specifica una delle seguenti versioni supportate.
**Topics**
+ [`AWS runtime for Apache Spark`(emr-spark-8.0-preview)](release-version-emr-spark-8.0-preview.md)
+ [EMR Serverless7.12.0](release-version-7120.md)
+ [EMR Serverless7.11.0](release-version-7110.md)
+ [EMR Serverless7.10.0](release-version-7100.md)
+ [EMR Serverless7.9.0](release-version-790.md)
+ [EMR Serverless7,80](release-version-780.md)
+ [EMR Serverless7,7,0](release-version-770.md)
+ [EMR Serverless7,6,0](release-version-760.md)
+ [EMR Serverless7,5,0](release-version-750.md)
+ [EMR Serverless7,40](release-version-740.md)
+ [EMR Serverless7,3,0](release-version-730.md)
+ [EMR Serverless7.2.0](release-version-720.md)
+ [EMR Serverless7.1.0](release-version-710.md)
+ [EMR Serverless7,0,0](release-version-700.md)
+ [EMR Serverless6,15,0](release-version-6150.md)
+ [EMR Serverless6.14.0](release-version-6140.md)
+ [EMR Serverless6,13,0](release-version-6130.md)
+ [EMR Serverless6,12,0](release-version-6120.md)
+ [EMR Serverless6.11,0](release-version-6110.md)
+ [EMR Serverless6.10.0](release-version-6100.md)
+ [EMR Serverless6.9.0](release-version-690.md)
+ [EMR Serverless6.8.0](release-version-680.md)
+ [EMR Serverless6.7.0](release-version-670.md)
+ [EMR Serverless6.6.0](release-version-660.md)
# `AWS runtime for Apache Spark`(emr-spark-8.0-preview)
La tabella seguente elenca le versioni dell'applicazione disponibili con (emr-spark-8.0-preview). `AWS runtime for Apache Spark`
**Informazioni sulla versione dell'applicazione**
| Applicazione | Versione |
| --- | --- |
| Spark | 4.0.1-amzn-0 |
****`AWS runtime for Apache Spark`Note di rilascio (emr-spark-8.0-preview)****
+ Versione di **anteprima: questa è una versione** di anteprima di Apache Spark 4.0.1. `AWS runtime for Apache Spark` Questa anteprima è disponibile solo su EMR Serverless.
+ **Disponibilità regionale**: questa versione di anteprima è disponibile in tutte le AWS regioni in cui è disponibile EMR Serverless, ad eccezione della Cina e delle regioni AWS GovCloud (Stati Uniti).
+ **Informazioni sulla versione dell'applicazione**: questa versione viene fornita con le seguenti versioni dell'applicazione:
+ AWS SDK per Java 2.35.5, 1.12.792
+ Python **3.9**, 3.11, 3.12
+ Scala 2.13.16
+ AmazonCloudWatchAgent 1.300034.0-amzn-0
+ Delta 4.0.0-amzn-0-spark
+ Iceberg 1.10.0-amzn-spark-0
+ Questa versione viene fornita con Amazon Corretto **17** (basato su OpenJDK) per impostazione predefinita per le applicazioni che supportano Corretto 17 (JDK 17).
+ **Limitazioni dell'anteprima**: le seguenti funzionalità non sono disponibili in questa versione di anteprima:
+ **Funzionalità interattive e di integrazione**: SageMaker Unified Studio, integrazione con EMR Studio, Spark Connect, Livy e non sono supportate. JupyterEnterpriseGateway
+ **Formati di tabelle e controllo degli accessi**: Hudi, Delta Universal Format e il controllo degli accessi a grana fine (FGAC) con filtri e operatori a livello di riga o colonna non sono supportati. DDL/DML
+ **Connettori dati: i connettori emr-dynamodb** e spark-redshift non sono disponibili. spark-sql-kinesis
+ **History Server**: Il Persistent Spark History Server non è disponibile in questa versione di anteprima. Gli utenti possono comunque accedere all'interfaccia utente live di Spark per monitorare ed eseguire il debug dei job serverless attivi in tempo reale.
+ **Funzionalità specializzate: le** viste materializzate non sono disponibili.
+ **Funzionalità di anteprima**: è possibile testare le seguenti funzionalità in questa versione di anteprima. Questa versione di anteprima non è consigliata per i carichi di lavoro di produzione:
+ **Caratteristiche SQL**: modalità ANSI SQL con gestione dei tipi più rigorosa, sintassi SQL PIPE (\$1>) per le operazioni di concatenamento, tipo di dati VARIANT per dati JSON semistrutturati, script SQL con istruzioni di flusso di controllo e variabili di sessione e funzioni SQL definite dall'utente.
+ **Miglioramenti allo streaming**: Arbitrary Stateful Processing API v2 con transformWithState operatore, State Data Source Reader per lo stato di streaming interrogabile (sperimentale) e archivio di stato avanzato con checkpoint migliorato del changelog RockSDB.
+ **Supporto per formati di tabella**: Apache Iceberg v3 con supporto del tipo di dati VARIANT, integrazione con AWS S3 Tables e Full Table Access (FTA) AWS Lake Formation per le tabelle Iceberg, Delta Lake e Hive.
+ **Documentazione aggiuntiva - Per la documentazione aggiuntiva** [di Apache Spark, consulta la documentazione di rilascio di Apache Spark 4.0.1.](https://spark.apache.org/releases/spark-release-4-0-1.html)
Per iniziare con l'anteprima di Apache Spark 4.0.1, crea un'applicazione EMR Serverless utilizzando la CLI: AWS
```
aws emr-serverless create-application --type spark \
--release-label emr-spark-8.0-preview \
--region us-east-1 --name spark4-preview
```
# EMR Serverless7.12.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.12.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.6 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0,10,2 |
**Note di rilascio di EMR Serverless 7.12.0**
+ **Nuove funzionalità**
+ **Storage serverless per EMR Serverless: Amazon EMR** serverless introduce lo storage serverless, con EMR versione 7.12 e successive, che elimina il provisioning locale del disco per i carichi di lavoro Apache Spark. EMR Serverless gestisce automaticamente operazioni di dati intermedi come lo shuffle senza costi di archiviazione. Lo storage serverless separa lo storage dall'elaborazione, permettendo a Spark di rilasciare immediatamente i dipendenti quando sono inattivi anziché mantenerli attivi per conservare i dati temporanei. Per ulteriori informazioni, consulta [aws.amazon.com/serverless-storage-for-emr-serverless](aws.amazon.com/serverless-storage-for-emr-serverless).
+ **Iceberg Materialized Views** - A partire da Amazon EMR 7.12.0, Amazon EMR Spark supporta la creazione e la gestione di Iceberg Materialized Views (MV)
+ **Hudi Full Table Access** - A partire da Amazon EMR 7.12.0, Amazon EMR supporta ora il controllo Full Table Access (FTA) per Apache Hudi in Apache Spark in base alle politiche definite in Lake Formation. Questa funzionalità consente le operazioni di lettura e scrittura dai job di Amazon EMR Spark sulle tabelle registrate di Lake Formation quando il ruolo lavorativo ha accesso completo alla tabella.
+ **Aggiornamento della versione Iceberg**: Amazon EMR 7.12.0 supporta la versione 1.10 di Apache Iceberg
# EMR Serverless7.11.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.11.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.6 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0,10,2 |
**Note di rilascio di EMR Serverless 7.11.0**
+ **Tempo massimo di esecuzione del Job**: il valore massimo per `executionTimeoutMinutes` in `StartJobRun` azione per i job BATCH è di 7 giorni a partire da questa versione. `executionTimeoutMinutes`non può più essere impostato su nessun timeout, ad `0` esempio su nessun timeout, per le esecuzioni di processi in batch.
# EMR Serverless7.10.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.10.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.5 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0,10,2 |
**Note di rilascio di EMR Serverless 7.10.0**
+ **Metriche per EMR** Serverless: le metriche di monitoraggio vengono ristrutturate per concentrarsi sulle dimensioni e. `ApplicationName` `JobName` Le metriche precedenti non verranno più aggiornate d'ora in avanti. Per ulteriori informazioni, fare riferimento a [Monitoraggio delle applicazioni e dei job EMR Serverless](app-job-metrics.html).
# EMR Serverless7.9.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless la versione 7.9.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.5 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0,10,2 |
# EMR Serverless7,80
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.8.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.4 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0,10,2 |
# EMR Serverless7,7,0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.7.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.3 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0,10,2 |
# EMR Serverless7,6,0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.6.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.3 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0,10,2 |
# EMR Serverless7,5,0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.5.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.2 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
# EMR Serverless7,40
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.4.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.2 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
# EMR Serverless7,3,0
La tabella seguente elenca le versioni delle applicazioni disponibili con la versione EMR Serverless 7.3.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.1 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0,10,2 |
**Note di rilascio di EMR Serverless 7.3.0**
+ **Concorrenza e accodamento dei lavori con EMR Serverless**: la concorrenza e l'accodamento dei lavori sono abilitati per impostazione predefinita quando crei una nuova applicazione EMR Serverless su Amazon EMR versione 7.3.0 o successiva. Per ulteriori informazioni, consulta[Concorrenza dei job e accodamento per un'applicazione EMR Serverless](applications-concurrency-queuing.md), che descrive in dettaglio come iniziare con la concorrenza e l'accodamento e contiene anche un elenco di considerazioni sulle funzionalità.
# EMR Serverless7.2.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.2.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.1 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0,10,2 |
**Note di rilascio di EMR Serverless 7.2.0**
+ **Lake Formation con EMR Serverless**: ora puoi utilizzarlo AWS Lake Formation per applicare controlli di accesso granulari alle tabelle del Data Catalog supportate da S3. Questa funzionalità consente di configurare i controlli di accesso a livello di tabella, riga, colonna e cella per le query di lettura all'interno dei job EMR Serverless Spark. Per ulteriori informazioni, consulta [Utilizzo di EMR Serverless per un controllo granulare degli AWS Lake Formation accessi](emr-serverless-lf-enable.md) e [Considerazioni e limitazioni](emr-serverless-lf-enable-considerations.md).
# EMR Serverless7.1.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.1.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.0 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
# EMR Serverless7,0,0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 7.0.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.5.0 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
# EMR Serverless6,15,0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 6.15.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.4.1 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
**Note di rilascio di EMR Serverless 6.15.0**
+ **Supporto TLS**: con le versioni 6.15.0 e successive di Amazon EMR Serverless, abilita la comunicazione crittografata Mutual-TLS tra i lavoratori durante le esecuzioni dei job Spark. Se abilitato, EMR Serverless genera automaticamente un certificato univoco per ogni lavoratore che fornisce nell'ambito di un job run che i lavoratori utilizzano durante l'handshake TLS per autenticarsi a vicenda e stabilire un canale crittografato per elaborare i dati in modo sicuro. [Per ulteriori informazioni sulla crittografia Mutual-TLS, fare riferimento alla crittografia tra lavoratori.](https://docs.aws.amazon.com/emr/latest/EMR-Serverless-UserGuide/interworker-encryption.html)
# EMR Serverless6.14.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 6.14.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.4.1 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
# EMR Serverless6,13,0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 6.13.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.4.1 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
# EMR Serverless6,12,0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 6.12.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.4.0 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
# EMR Serverless6.11,0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 6.11.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.3.2 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
**Note di rilascio di EMR Serverless 6.11.0**
+ **[Accedi alle risorse S3 da altri account](jobs-s3-access.md#jobs-s3-access-how-to-assumed-role-multiple)** - Con le versioni 6.11.0 e successive, puoi configurare più ruoli IAM da assumere quando accedi ai bucket Amazon S3 in account diversi da EMR Serverless. AWS
# EMR Serverless6.10.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless 6.10.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.3.1 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
**Note di rilascio di EMR Serverless 6.10.0**
+ Per le applicazioni EMR Serverless con release 6.10.0 o superiore, il valore predefinito per la proprietà è. `spark.dynamicAllocation.maxExecutors` `infinity` Le versioni precedenti hanno come impostazione predefinita. `100` Per ulteriori informazioni, vedi [Proprietà del lavoro Spark](jobs-spark.md#spark-defaults).
# EMR Serverless6.9.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless la versione 6.9.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.3.0 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.10.2 |
**Note di rilascio di EMR Serverless 6.9.0**
+ L'integrazione di Amazon Redshift per Apache Spark è inclusa in Amazon EMR rilascio 6.9.0 e successivi. In precedenza uno strumento open source, l'integrazione nativa è un connettore Spark che è possibile utilizzare per creare applicazioni Apache Spark in grado di leggere e scrivere dati in Amazon Redshift e Amazon Redshift Serverless. Per ulteriori informazioni, consulta [Utilizzo dell'integrazione di Amazon Redshift per Apache Spark su Amazon EMR Serverless](emr-spark-redshift.md).
+ La release 6.9.0 di EMR Serverless aggiunge il supporto per l'architettura AWS Graviton2 (arm64). È possibile utilizzare il `architecture` parametro per e per scegliere l'architettura arm64. `create-application` `update-application` APIs Per ulteriori informazioni, vedi [Opzioni di architettura Serverless Amazon EMR](architecture.md).
+ Ora puoi esportare, importare, interrogare e unire tabelle Amazon DynamoDB direttamente dalle tue applicazioni EMR Serverless Spark e Hive. Per ulteriori informazioni, vedi [Connessione a DynamoDB con Amazon EMR Serverless](using-ddb-connector.md).
**Problemi noti**
+ Se utilizzi l'integrazione Amazon Redshift per Apache Spark e disponi di un orario, timetz, timestamp o timestamptz con precisione al microsecondo in formato Parquet, il connettore arrotonda i valori temporali al valore in millisecondi più vicino. Come soluzione alternativa, utilizza il parametro `unload_s3_format` del formato di scaricamento del testo.
# EMR Serverless6.8.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless la versione 6.8.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.3.0 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.9.2 |
# EMR Serverless6.7.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless la versione 6.7.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.2.1 |
| Apache Hive | 3.1.3 |
| Apache Tez | 0.9.2 |
## Modifiche, miglioramenti e problemi risolti specifici del motore
La tabella seguente elenca una nuova funzionalità specifica del motore.
| Modifica | Description |
| --- | --- |
| Funzionalità | Tez scheduler ora supporta la priorità dell'attività Tez anziché la priorità del contenitore |
# EMR Serverless6.6.0
La tabella seguente elenca le versioni delle applicazioni disponibili con EMR Serverless la versione 6.6.0.
| Applicazione | Versione |
| --- | --- |
| Apache Spark | 3.2.0 |
| Apache Hive | 3.1.2 |
| Apache Tez | 0.9.2 |
**Note di rilascio iniziali di EMR Serverless**
+ EMR Serverless supporta la classificazione della configurazione Spark. `spark-defaults` Questa classificazione modifica i valori nel file XML di Spark. `spark-defaults.conf` Le classificazioni di configurazione consentono di personalizzare le applicazioni. Per maggiori informazioni, consulta [Configurare le applicazioni](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-configure-apps.html).
+ EMR Serverless supporta le classificazioni `hive-site` di configurazione Hive,, e. `tez-site` `emrfs-site` `core-site` Questa classificazione può modificare rispettivamente i valori nel file di Hive, nel `hive-site.xml` file di Tez, nelle impostazioni EMRFS di Amazon EMR o nel `tez-site.xml` file di Hadoop. `core-site.xml` Le classificazioni di configurazione consentono di personalizzare le applicazioni. [Per ulteriori informazioni, consulta Configurare le applicazioni.](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-configure-apps.html)
**Modifiche, miglioramenti e problemi risolti specifici del motore**
+ La tabella seguente elenca i backport di Hive e Tez.
**Modifiche a Hive e Tez**
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/EMR-Serverless-UserGuide/release-version-660.html)