View a markdown version of this page

REPLACE_OUTLIERS - AWS Glue DataBrew Guida per gli sviluppatori

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

REPLACE_OUTLIERS

Aggiorna i valori dei punti dati che vengono classificati come valori anomali, in base alle impostazioni dei parametri.

Parameters
  • sourceColumn— specifica il nome di una colonna numerica esistente che potrebbe contenere valori anomali.

  • outlierStrategy— Speciifica l'approccio da utilizzare per il rilevamento dei valori anomali. I valori validi includono quanto segue:

    • Z_SCORE— Identifica un valore come valore anomalo quando si discosta dalla media di oltre la soglia di deviazione standard.

    • MODIFIED_Z_SCORE— Identifica un valore come valore anomalo quando si discosta dalla mediana di oltre la soglia di deviazione assoluta mediana.

    • IQR— Identifica un valore come valore anomalo quando supera il primo e l'ultimo quartile dei dati della colonna. L'intervallo interquartile (IQR) misura dove si trova il 50% medio dei punti dati.

  • threshold— Speciifica il valore di soglia da utilizzare per il rilevamento dei valori anomali. Il sourceColumn valore viene identificato come valore anomalo se il punteggio calcolato con il supera questo numero. outlierStrategy L'impostazione predefinita è 3.

  • replaceType— specifica il metodo da utilizzare per la sostituzione dei valori anomali. I valori validi includono quanto segue:

    • WINSORIZE_VALUES— specifica l'utilizzo del percentile minimo e massimo per limitare i valori.

    • REPLACE_WITH_CUSTOM

    • REPLACE_WITH_EMPTY

    • REPLACE_WITH_NULL

    • REPLACE_WITH_MODE

    • REPLACE_WITH_AVERAGE

    • REPLACE_WITH_MEDIAN

    • REPLACE_WITH_SUM

    • REPLACE_WITH_MAX

  • modeType— Indica il tipo di funzione modale da utilizzare quando è. replaceType REPLACE_WITH_MODE I valori validi includono i seguenti: MINMAX, eAVERAGE.

  • minValue— Indica il valore percentile minimo per l'intervallo di valori anomali da applicare quando trimValue viene utilizzato. L'intervallo valido è compreso tra 0 e 100.

  • maxValue— Indica il valore percentile massimo per l'intervallo di valori anomali da applicare quando viene utilizzato. trimValue L'intervallo valido è compreso tra 0 e 100.

  • value— Speciifica il valore da inserire durante l'utilizzo. REPLACE_WITH_CUSTOM

  • trimValue— Speciifica se rimuovere tutti o alcuni dei valori anomali. Questo valore booleano è impostato su TRUE quando replaceType è, o. REPLACE_WITH_NULL REPLACE_WITH_MODE WINSORIZE_VALUES L'impostazione predefinita è per FALSE tutti gli altri.

    • FALSE— Rimuove tutti i valori anomali

    • TRUE— Rimuove i valori anomali che si collocano al di fuori della soglia massima percentile specificata in and. minValue maxValue

Negli esempi seguenti viene visualizzata la sintassi per una singola operazione. RecipeAction Una ricetta contiene almeno RecipeStepun'operazione e una fase della ricetta contiene almeno un'azione di ricetta. Un'azione di ricetta esegue la trasformazione dei dati specificata. Un gruppo di azioni di ricetta viene eseguito in ordine sequenziale per creare il set di dati finale.

JSON

Di seguito viene mostrato un esempio RecipeAction da utilizzare come membro di un esempio RecipeStep per una DataBrew ricetta, utilizzando la sintassi JSON. Per esempi di sintassi che mostrano un elenco di azioni relative alle ricette, vedere. Definizione della struttura di una ricetta

Esempio Esempio in JSON
{ "Action": { "Operation": "REPLACE_OUTLIERS", "Parameters": { "maxValue": "95", "minValue": "5", "modeType": "AVERAGE", "outlierStrategy": "Z_SCORE", "replaceType": "REPLACE_WITH_MODE", "sourceColumn": "name-of-existing-column", "threshold": "3", "trimValue": "TRUE" } } }

Per ulteriori informazioni sull'utilizzo di questa azione di ricetta in un'operazione API, consulta CreateRecipeo UpdateRecipe. Puoi utilizzare queste e altre operazioni API nel tuo codice.

YAML

Di seguito viene mostrato un esempio RecipeAction da utilizzare come membro di un esempio RecipeStep per una DataBrew ricetta, utilizzando la sintassi YAML. Per esempi di sintassi che mostrano un elenco di azioni relative alle ricette, vedere. Definizione della struttura di una ricetta

Esempio Esempio in YAML
- Action: Operation: REMOVE_OUTLIERS Parameters: sourceColumn: name-of-existing-column outlierStrategy: Z_SCORE threshold: '3' replaceType: REPLACE_WITH_MODE modeType: AVERAGE minValue: '5' maxValue: '95' trimValue: 'TRUE'

Per ulteriori informazioni sull'utilizzo di questa azione di ricetta in un'operazione API, consulta CreateRecipeo. UpdateRecipe Puoi utilizzare queste e altre operazioni API nel tuo codice.