Mudanças no comportamento de ingestão - Amazon Quick Suite

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Mudanças no comportamento de ingestão

A nova experiência de preparação de dados introduz uma mudança importante na forma como os problemas de qualidade dos dados são tratados durante a ingestão do SPICE. Essa alteração afeta significativamente a integridade e a transparência dos dados em seus conjuntos de dados.

Na experiência antiga, ao encontrar inconsistências de tipo de dados (como formatos de data incorretos ou problemas semelhantes), a linha inteira contendo células problemáticas é ignorada durante a ingestão. Essa abordagem resulta em menos linhas no conjunto de dados final, potencialmente obscurecendo os problemas de qualidade dos dados.

A nova experiência adota uma abordagem mais granular às inconsistências de dados. Ao encontrar células problemáticas, somente os valores inconsistentes são convertidos em valores nulos, mantendo a linha inteira. Essa preservação garante que os dados relacionados em outras colunas permaneçam acessíveis para análise.

Impacto na qualidade do conjunto de dados

Os conjuntos de dados criados na nova experiência normalmente contêm mais linhas do que seus equivalentes antigos quando os dados de origem contêm inconsistências. Essa abordagem aprimorada oferece vários benefícios:

  • Melhoria na integridade dos dados ao manter todas as linhas

  • Maior transparência na identificação de problemas de qualidade de dados

  • Melhor visibilidade dos valores problemáticos para remediação

  • Preservação de dados relacionados em colunas não afetadas

Essa mudança permite que os analistas identifiquem e resolvam problemas de qualidade de dados com mais eficiência, em vez de omitir silenciosamente as linhas problemáticas do conjunto de dados.