完整度 - AWS Glue

完整度

根據指定運算式檢查欄中完整 (非空) 值的百分比。

語法

Completeness <COL_NAME> <EXPRESSION>

  • COL_NAME – 您要評估資料品質規則的欄名稱。

    支援的欄類型：任何欄類型

  • EXPRESSION – 針對規則類型回應執行的運算式，以產生布林值。如需更多詳細資訊，請參閱 Expressions。

範例：空值百分比

下列範例規則會檢查欄中 95% 以上的值是否已完成。

Completeness "First_Name" > 0.95
Completeness "First_Name" > 0.95 where "weightinkgs > 10"

動態規則範例

  • Completeness "colA" between min(last(5)) - 1 and max(last(5)) + 1

  • Completeness "colA" <= avg(last(10))

Null 行為

CSV 資料格式注意事項：CSV 資料欄上的空白資料列可以顯示多種行為。

  • 如果資料欄是 String 類型，則空白資料列將辨識為空白字串，並且不會使 Completeness 規則失敗。

  • 如果資料欄屬於其他資料類型 (例如 Int)，則空白資料列會辨識為 NULL，且會使 Completeness 規則失敗。