View a markdown version of this page

AUSREISSER ERSETZEN - AWS Glue DataBrew Entwicklerhandbuch

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

AUSREISSER ERSETZEN

Aktualisiert die Datenpunktwerte, die als Ausreißer klassifiziert werden, auf der Grundlage der Einstellungen in den Parametern.

Parameters
  • sourceColumn— Gibt den Namen einer vorhandenen numerischen Spalte an, die Ausreißer enthalten könnte.

  • outlierStrategy— Gibt den Ansatz an, der bei der Erkennung von Ausreißern verwendet werden soll. Gültige Werte sind z. B. die Folgenden:

    • Z_SCORE— Identifiziert einen Wert als Ausreißer, wenn er um mehr als den Schwellenwert für die Standardabweichung vom Mittelwert abweicht.

    • MODIFIED_Z_SCORE— Identifiziert einen Wert als Ausreißer, wenn er um mehr als den Schwellenwert für die absolute Abweichung vom Median abweicht.

    • IQR— Identifiziert einen Wert als Ausreißer, wenn er über das erste und letzte Quartil der Spaltendaten hinausgeht. Der Interquartilsbereich (IQR) gibt an, wo sich die mittleren 50% der Datenpunkte befinden.

  • threshold— Gibt den Schwellenwert an, der bei der Erkennung von Ausreißern verwendet werden soll. Der sourceColumn Wert wird als Ausreißer identifiziert, wenn der Wert, der mit dem berechnet wird, diese Zahl outlierStrategy überschreitet. Die Voreinstellung ist 3.

  • replaceType— Gibt die Methode an, die beim Ersetzen von Ausreißern verwendet werden soll. Gültige Werte sind z. B. die Folgenden:

    • WINSORIZE_VALUES— Gibt an, dass das minimale und das maximale Perzentil zur Obergrenze der Werte verwendet werden.

    • REPLACE_WITH_CUSTOM

    • REPLACE_WITH_EMPTY

    • REPLACE_WITH_NULL

    • REPLACE_WITH_MODE

    • REPLACE_WITH_AVERAGE

    • REPLACE_WITH_MEDIAN

    • REPLACE_WITH_SUM

    • REPLACE_WITH_MAX

  • modeType— Gibt den Typ der Modalfunktion an, die verwendet werden soll, wenn sie ist. replaceType REPLACE_WITH_MODE Zu den gültigen Werten gehören die folgenden: MINMAX, undAVERAGE.

  • minValue— Gibt den minimalen Perzentilwert für den Ausreißerbereich an, der angewendet werden soll, wenn er verwendet wird. trimValue Der gültige Bereich liegt zwischen 0 und 100.

  • maxValue— Gibt den maximalen Perzentilwert für den Ausreißerbereich an, der angewendet werden soll, wenn er verwendet wird. trimValue Der gültige Bereich liegt zwischen 0 und 100.

  • value— Gibt den Wert an, der bei Verwendung eingefügt werden soll. REPLACE_WITH_CUSTOM

  • trimValue— Gibt an, ob alle oder einige Ausreißer entfernt werden sollen. Dieser boolesche Wert ist auf TRUE when is,REPLACE_WITH_NULL, replaceType REPLACE_WITH_MODE or gesetzt. WINSORIZE_VALUES Für alle anderen ist er standardmäßig FALSE auf.

    • FALSE— Entfernt alle Ausreißer

    • TRUE— Entfernt Ausreißer, deren Rang außerhalb des in und angegebenen Schwellenwerts für die Perzentilobergrenze liegt. minValue maxValue

Die folgenden Beispiele zeigen die Syntax für einen einzelnen Vorgang. RecipeAction Ein Rezept enthält mindestens eine RecipeStepOperation, und ein Rezeptschritt enthält mindestens eine Rezeptaktion. Eine Rezeptaktion führt die von Ihnen angegebene Datentransformation aus. Eine Gruppe von Rezeptaktionen wird nacheinander ausgeführt, um den endgültigen Datensatz zu erstellen.

JSON

Im Folgenden wird ein Beispiel gezeigtRecipeAction, das als Mitglied eines Beispiels RecipeStep für ein DataBrew Rezept verwendet werden kann, wobei die JSON-Syntax verwendet wird. Syntaxbeispiele mit einer Liste von Rezeptaktionen finden Sie unterDefinition einer Rezeptstruktur.

Beispiel Beispiel in JSON
{ "Action": { "Operation": "REPLACE_OUTLIERS", "Parameters": { "maxValue": "95", "minValue": "5", "modeType": "AVERAGE", "outlierStrategy": "Z_SCORE", "replaceType": "REPLACE_WITH_MODE", "sourceColumn": "name-of-existing-column", "threshold": "3", "trimValue": "TRUE" } } }

Weitere Informationen zur Verwendung dieser Rezeptaktion in einer API-Operation finden Sie unter CreateRecipeoder UpdateRecipe. Sie können diese und andere API-Operationen in Ihrem eigenen Code verwenden.

YAML

Das Folgende zeigt ein BeispielRecipeAction, das als Teil eines Beispiels RecipeStep für ein DataBrew Rezept verwendet werden kann, wobei die YAML-Syntax verwendet wird. Syntaxbeispiele mit einer Liste von Rezeptaktionen finden Sie unterDefinition einer Rezeptstruktur.

Beispiel Beispiel in YAML
- Action: Operation: REMOVE_OUTLIERS Parameters: sourceColumn: name-of-existing-column outlierStrategy: Z_SCORE threshold: '3' replaceType: REPLACE_WITH_MODE modeType: AVERAGE minValue: '5' maxValue: '95' trimValue: 'TRUE'

Weitere Informationen zur Verwendung dieser Rezeptaktion in einer API-Operation finden Sie unter CreateRecipeoder UpdateRecipe. Sie können diese und andere API-Operationen in Ihrem eigenen Code verwenden.