View a markdown version of this page

EMR sans serveur 7,14.0 - Amazon EMR

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

EMR sans serveur 7,14.0

Le tableau suivant répertorie les versions de l'application disponibles avec la version EMR Serverless 7.14.0.

Application Version
Apache Spark 3.5.8
Apache Hive 3.1.3
Apache Tez 0,1,2
Notes de mise à jour d'EMR Serverless 7.14.0

  • Changements et améliorations

    • Validation de la version de publication d'une image personnalisée : lorsque vous utilisez une image personnalisée, EMR Serverless vérifie que son image de base utilise la même version d'Amazon EMR. Si la version de publication de l'image ne correspond pas à la version de publication de l'application, ou si l'image n'a pas de version de publication, la demande est rejetée. Un message indique la version de l'image de base à utiliser. Reconstruisez votre image personnalisée à partir de l'image de base EMR Serverless correspondante.

    • Augmentation de la limite de données de stockage sans serveur pour les tâches Spark : cette version augmente la limite de données de stockage sans serveur pour les tâches Spark de 200 GiB à 1 TiB.

    • Fine-grained contrôle d'accès pour les sessions Spark Connect : AWS Lake Formation le contrôle d'accès détaillé est désormais pris en charge pour les PySpark sessions interactives que vous exécutez via Apache Spark Connect. Les autorisations au niveau des tables, des lignes, des colonnes et des cellules que vous définissez dans Lake Formation sont appliquées à vos requêtes de session. Pour plus d’informations, consultez Fine-grained contrôle d'accès avec AWS Lake Formation pour les sessions Spark Connect.

    • Contrôle d'accès détaillé amélioré : cette version améliore les filtres de données, les requêtes de voyage dans le temps et les opérations des tables Delta Lake sur les tables à accès contrôlé. Il prend également en charge les VACUUM opérations sur les tables Delta Lake qui utilisent un contrôle d'accès précis.

    • Configuration Spark fusionnée — En commençant paremr-7.14.0, EMR Serverless fusionne la configuration Spark au lieu de la remplacer. Il combine la configuration définie au niveau de l'application avec la configuration définie pour une tâche ou une session individuelle. Lorsque la même configuration est définie aux deux niveaux, la valeur de la tâche ou de la session est prioritaire. Dans les versions précédentes, la configuration de la tâche ou de la session remplace entièrement la configuration au niveau de l'application.