Utiliser SelectFields pour supprimer la plupart des clés de propriété de données - AWS Glue

Utiliser SelectFields pour supprimer la plupart des clés de propriété de données

Vous pouvez créer un sous-ensemble de clés de propriété de données à partir du jeu de données à l'aide la transformation SelectFields. Vous indiquez quelles clés de propriété de données vous souhaitez conserver et les autres sont supprimées du jeu de données.

Note

La transformation SelectFields est sensible à la casse. Utilisez ApplyMapping si vous avez besoin d'une méthode insensible à la casse pour sélectionner des champs.

Pour ajouter un nœud de transformation SelectFields à votre diagramme de tâche
  1. (Facultatif) Ouvrez le panneau Ressources, puis choisissez SelectFields pour ajouter une nouvelle transformation à votre diagramme de tâches, si nécessaire.

  2. Sur la page Node properties (Propriétés de nœud) au cours de la tâche, saisissez un nom pour le nœud dans le diagramme de tâche. Si aucun parent de nœud n'est déjà sélectionné, choisissez un nœud dans la liste Node parents (Parents de nœud) à utiliser comme source pour la transformation.

  3. Choisissez l'onglet Transformation dans le volet de détails du nœud.

  4. Sous l'en-tête SelectFields, choisissez les clés de propriété de données dans le jeu de données que vous souhaitez conserver. Toutes autres clés de propriété de données non sélectionnées sont supprimées du jeu de données.

    Vous pouvez également cocher la case en regard de l'en-tête de colonne Field (Champ) pour choisir automatiquement toutes les clés de propriété de données dans le jeu de données. Vous pouvez ensuite désélectionner des clés de propriété de données individuelles pour les supprimer du jeu de données.

  5. (Facultatif) Après avoir configuré les propriétés du nœud de transformation, vous pouvez afficher le schéma modifié pour vos données en sélectionnant l'onglet Output Schema (Schéma de sortie) dans le volet de détails du nœud. La première fois que vous choisissez cet onglet pour un nœud de votre tâche, vous êtes invité à fournir un rôle IAM pour accéder aux données. Si vous n'avez pas spécifié de rôle IAM dans le Job détails (Détails de la tâche), vous y êtes invité à ce stade.

  6. (Facultatif) Après avoir configuré les propriétés du nœud et les propriétés de transformation, vous pouvez prévisualiser le jeu de données modifié en sélectionnant l'onglet Prévisualisation des données dans le volet de détails du nœud. La première fois que vous choisissez cet onglet pour un nœud de votre tâche, vous êtes invité à fournir un rôle IAM pour accéder aux données. Il y a un coût associé à l'utilisation de cette fonction, et la facturation commence dès que vous fournissez le rôle IAM.