Profilazione dei dati, il primo passo nella qualità dei dati

Profili dei dati è l'atto di analizzare il contenuto dei tuoi dati. Insieme alla creazione di profili dei dati, abbiamo altri due componenti che integrerebbero la qualità dei dati. Si tratta di correzione dei dati e monitoraggio dei dati.

Crediti fotografici: Eskemar

Correzione dei dati È l'atto di correggere i tuoi dati quando non soddisfano gli standard. Al secondo posto, Monitoraggio dei dati è l'atto continuo di determinare standard di qualità dei dati su un insieme di metriche significative per il business, rivedere periodicamente i risultati e intraprendere azioni correttive che possano superare le soglie di qualità accettabili.

Ma oggi ci concentriamo solo su profilo dei dati. Ciò che fornisce alle istituzioni la capacità di analizzare rapidamente grandi quantità di dati in una procedura sistematica e ripetibile.

L'analisi effettuata dalla profilazione dei dati

Uno strumento di profilazione dei dati consente di eseguire diversi tipi di analisi, la cui combinazione permette di ottenere una prospettiva molto più completa di questo asset. Tra questi ci sono:

• Analisi di completezza: Alla luce dei suoi risultati, scoprirà con quale frequenza viene completato un determinato attributo e con quale frequenza viene lasciato vuoto o nullo.

• Analisi della distribuzione dei valori: le permette di scoprire quale sia la distribuzione dei record attraverso diversi valori per un dato attributo.

• Analisi di unicità: es la forma más rápida de saber cuántos valores únicos (distintos) se encuentran para un atributo dado en todos los registros. Por medio de esta analiticoL'analisi si riferisce al processo di raccolta, Misura e analizza i dati per ottenere informazioni preziose che facilitano il processo decisionale. In vari campi, come business, Salute e sport, L'analisi può identificare modelli e tendenze, Ottimizza i processi e migliora i risultati. L'utilizzo di strumenti avanzati e tecniche statistiche è fondamentale per trasformare i dati in conoscenze applicabili e strategiche...., identificará fácilmente los duplicados.

• Análisis de patrones: es el medio a través del cual profilo dei dati posibilita saber qué formatos se encontraron para un atributo dado y cuál es la distribución de registros por medio de ese u otros formatos.

• Análisis de rango: se utiliza para averiguar cuáles son los valores mínimo, máximo y promedio que se dan para un atributo dado.

In pratica, il La elaboración de perfiles de datos puede agregar valor en una ampia variedad de situaciones., algo que probablemente ya sepa si lo utiliza regularmente en su organización. Algunos de los escenarios donde su contribución es más enriquecedora figlio:

un) Iniciativas de calidad de datos del sistema de origen. Uno de los objetivos de un proyecto de este tipo es intentar corregir los problemas existentes y evitar que aparezcan otros en el futuro. La elaboración de perfiles de datos puede ayudar a maximizar el ROI del proyecto. A través de la creación de perfiles de datos, se pueden identificar las areas dentro del sistema que sufren los problemas de calidad de datos más graves y / o numerosos. La creación de perfiles además facilitaría la detección de problemas de calidad relacionados con entradas manuales incorrectas o interfaces de sistema defectuosas.

B) Proyectos de migración de datos. La creazione di profili dei dati può aiutare a ridurre il rischio di trasferire dati da un sistema legacy al nuovo sistema di destinazione. Qui, La creazione di profili dei dati permetterebbe di individuare i problemi di qualità esistenti prima di migrare i dati.. Perché, si potrebbe intervenire sul codice o apportando le modifiche necessarie nel sistema di destinazione.

C) Iniziative di Data Warehousing e business intelligence. L'elemento comune a entrambi i tipi di progetti è la necessità di raccogliere dati da sistemi disparati. Per questo caso, La creazione di profili può aiutare a garantire il successo del progetto identificando tre tipi di problemi:

• Quelli legati alla qualità dei dati alla sorgente, per essere corretti lì.

• Coloro i cui attributi di qualità possono essere corretti nel processo ETL.

• Coloro che riguardano la scoperta di regole attività commerciale che potrebbe portare alla revoca del progetto.

In ogni caso, tutti questi benefici si moltiplicano quando la profilazione dei dati viene eseguita automaticamente, invece di farla manualmente. Il strumenti di profilazione dei dati Ti aiuteranno a guadagnare velocità, completezza dell'analisi, permettendo, in più occasioni, godere inoltre di un archivio centralizzato per il magazzino dei dati e dei metadati che facilita lo scambio di informazioni tra diversi utenti aziendali.