DATA QUALITY

A QUALIDADE DOS DADOS (DATA QUALITY)

É estimada por meio dos fatores e suas respectivas atualizações de integridade, confiabilidade, consistência e precisão dos dados. Sendo estes dados seccionados em níveis de qualidade que contribuem para reduzir erros e verificar se os sistemas estão alinhados com a finalidade do projeto.

Esta evidência é impulsionada pela adoção do processamento de dados para a tomada de decisão de negócios, cujo objetivo é minimizar ações com base na intuição dos gestores. Desse modo, visa-se aumentar a probabilidade de obtenção de êxito por meio dos indicadores estatísticos, sendo necessário esforços no gerenciamento de qualidade e dos programas de governança dos dados utilizados.

A ação de negligenciar a qualidade dos dados pode gerar análises imprecisas e estratégias de vendas perdidas. Existem estimativas dos custos associados a má qualidade dos dados sendo da ordem de trilhões de dólares anuais, o que pode representar entre 15% e 25% da receita anual. 

A utilização de dados por analistas de dados, cientista de dados entre outros necessitam do atributo precisão dos dados para evitar processamento, análise e transações deficientes e baixa assertividade.

Nos aspectos de qualidade dos dados pode-se listar:

1. Consistência (nos valores dos dados não há conflito)
2. Identificação e remoção (para valores duplicados)
3. Atualização de dados (em estrutura de formato definido)

Adotando estes fatores os dados apresentaram maior confiabilidade.

Para determinar o Data Quality

A elaboração de inventários dos dados com base em um grupo de regras que segmenta os níveis de qualidade são necessários para documentar erros e problemas existentes nas séries de dados. Existem diferentes metodologias para estimar a qualidade do conjunto de dados, a formalização deste processo é dada pelo Data Quality Assessment Framework (DQAF) que apresenta as diretrizes a serem seguidas, esta tarefa é conduzida comumente pelo Arquiteto de Dados.

Para aprofundamento consulte:

https://www.compact.nl/en/articles/data-quality-assessment/