REMOVE_OUTLIERS

Parameters

• sourceColumn— specifica il nome di una colonna numerica esistente che potrebbe contenere valori anomali.

• outlierStrategy— Speciifica l'approccio da utilizzare per il rilevamento dei valori anomali. I valori validi includono quanto segue:

  • Z_SCORE— Identifica un valore come valore anomalo quando si discosta dalla media di oltre la soglia di deviazione standard.

  • MODIFIED_Z_SCORE— Identifica un valore come valore anomalo quando si discosta dalla mediana di oltre la soglia di deviazione assoluta mediana.

  • IQR— Identifica un valore come valore anomalo quando supera il primo e l'ultimo quartile dei dati della colonna. L'intervallo interquartile (IQR) misura dove si trova il 50% medio dei punti dati.

• threshold— Speciifica il valore di soglia da utilizzare per il rilevamento dei valori anomali. Il sourceColumn valore viene identificato come valore anomalo se il punteggio calcolato con il supera questo numero. outlierStrategy L'impostazione predefinita è 3.

• removeType— Speciifica il modo di rimuovere i dati. I valori validi includono DELETE_ROWS e CLEAR.

• trimValue— Speciifica se rimuovere tutti o alcuni dei valori anomali. Il valore booleano predefinito è. FALSE

  • FALSE— Rimuove tutti i valori anomali

  • TRUE— Rimuove i valori anomali che si collocano al di fuori della soglia percentile specificata in and. minValue maxValue

• minValue— Indica il valore percentile minimo per l'intervallo dei valori anomali. L'intervallo valido è compreso tra 0 e 100.

• maxValue— Indica il valore percentile massimo per l'intervallo dei valori anomali. L'intervallo valido è compreso tra 0 e 100.