Utilizzate il committer EMRFS S3-optimized

Il S3-optimized committer EMRFS è un'OutputCommitterimplementazione alternativa ottimizzata per la scrittura di file su Amazon S3 quando si utilizza EMRFS. Il S3-optimized committer EMRFS migliora le prestazioni delle applicazioni evitando le operazioni di elenco e ridenominazione eseguite in Amazon S3 durante le fasi di invio di lavori e attività. Il committer è disponibile in Amazon EMR rilascio 5.19.0 e successivi ed è abilitato per impostazione predefinita in Amazon EMR rilascio 5.20.0 e successivi. Il committer viene utilizzato per i job Spark che utilizzano Spark o Datasets. DataFrames A partire da Amazon EMR 6.4.0, questo committer può essere utilizzato per tutti i formati comuni, tra cui Parquet, ORC e formati testuali (inclusi CSV e JSON). Per i rilasci precedenti ad Amazon EMR 6.4.0, è supportato solo il formato Parquet. Vi sono circostanze in cui il committer non viene utilizzato. Per ulteriori informazioni, consulta Requisiti per il committer EMRFS S3-optimized.