View a markdown version of this page

RESCALE_OUTLIERS_WITH_Z_SCORE - AWS Glue DataBrew Guide du développeur

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

RESCALE_OUTLIERS_WITH_Z_SCORE

Renvoie une nouvelle colonne avec une valeur aberrante redimensionnée dans chaque ligne, en fonction des paramètres définis. Cette action applique également une Z-score normalisation aux valeurs de données d'échelle linéaire pour qu'elles aient une moyenne (μ) de 0 et un écart type (σ) de 1. Nous recommandons cette action pour gérer les valeurs aberrantes.

Parameters
  • sourceColumn— Spécifie le nom d'une colonne numérique existante susceptible de contenir des valeurs aberrantes.

  • targetColumn— Spécifie le nom d'une colonne numérique existante susceptible de contenir des valeurs aberrantes.

  • outlierStrategy— Spécifie l'approche à utiliser pour détecter les valeurs aberrantes. Les valeurs valides sont les suivantes :

    • Z_SCORE— Identifie une valeur comme valeur aberrante lorsqu'elle s'écarte de la moyenne d'un écart supérieur au seuil d'écart type.

    • MODIFIED_Z_SCORE— Identifie une valeur comme valeur aberrante lorsqu'elle s'écarte de la médiane d'une valeur supérieure au seuil d'écart absolu médian.

    • IQR— Identifie une valeur comme une valeur aberrante lorsqu'elle se situe au-delà du premier et du dernier quartile des données de colonne. L'intervalle interquartile (IQR) mesure où se situent les 50 % intermédiaires des points de données.

  • threshold— La valeur seuil à utiliser lors de la détection des valeurs aberrantes. La sourceColumn valeur est identifiée comme une valeur aberrante si le score calculé avec le outlierStrategy dépasse ce nombre. La valeur par défaut est 3.

Les exemples suivants montrent la syntaxe d'une seule RecipeActionopération. Une recette contient au moins une RecipeStepopération et une étape de recette contient au moins une action de recette. Une action de recette exécute la transformation des données que vous spécifiez. Un groupe d'actions de recette s'exécute dans un ordre séquentiel pour créer le jeu de données final.

JSON

Voici un exemple RecipeAction à utiliser en tant que membre d'un RecipeStep exemple d'opération DataBrew Recipe, en utilisant la syntaxe JSON. Pour des exemples de syntaxe présentant une liste d'actions de recette, voirDéfinition de la structure d'une recette.

Exemple Exemple en JSON
{ "Action": { "Operation": "RESCALE_OUTLIERS_WITH_Z_SCORE", "Parameters": { "sourceColumn": "name-of-existing-column", "targetColumn": "name-of-new-column", "outlierStrategy": "Z_SCORE", "threshold": "3" } } }

Pour plus d'informations sur l'utilisation de cette action de recette dans une opération d'API, consultez CreateRecipeou UpdateRecipe. Vous pouvez utiliser ces opérations d'API ainsi que d'autres dans votre propre code.

YAML

Voici un exemple RecipeAction à utiliser en tant que membre d'un RecipeStep exemple d'opération DataBrew Recipe, en utilisant la syntaxe YAML. Pour des exemples de syntaxe présentant une liste d'actions de recette, voirDéfinition de la structure d'une recette.

Exemple Exemple en YAML
- Action: Operation: REMOVE_OUTLIERS Parameters: sourceColumn: name-of-existing-column targetColumn: name-of-new-column outlierStrategy: Z_SCORE threshold: '3'

Pour plus d'informations sur l'utilisation de cette action de recette dans une opération d'API, consultez CreateRecipeou UpdateRecipe. Vous pouvez utiliser ces opérations d'API ainsi que d'autres dans votre propre code.