Para confiar en Big Data es necesario comprender su Linaje de datos. Sin Data Lineage, Big Data se convierte en la última frase del juego de teléfono roto. Los datos originales cambian a lo largo del camino para convertirse en algo totalmente distinto cuando llegan al final. Y muy pocos entienden cómo llegaron a ser tan diferentes de la versión original.
Más del noventa por ciento de los datos del mundo atual se han creado en los últimos años. Esta explosión de datos es el resultado del número creciente de sistemas y la automatización en todos los niveles y en instituciones de todos los tamaños. Aunque esta información facilita el acceso a la data en el mundo del trabajo, além disso contribuiu a criar um novo conjunto de problemas..
¿Qué es el linaje de datos?
Linaje de datos describe el origen, los movimientos, las características y la calidad de los datos. Podría dizer que Data Lineage regularmente ha descrito dónde começa cada dato y como se transforma para conseguir resultados en diferentes projetos comerciais.
El linaje de datos se pode comparar con una tabla y un mapa de combinación, lo que le possibilita orientar qué SQL use para elegir, resumir o agrupar los datos. Aún cuando esto Es un enfoque muy tradicional que, en la actualidad, no es suficiente para explicar el alcance de Linaje de datos.
Na realidade, aplicar solo el enfoque tradicional al linaje de datos encuentra bloqueos, especialmente con respecto a las líneas de datos. dados mestres, como informação sobre personas, processos e itens que formam o núcleo do negócio.
Para obter uma visão mais realista e uma linhagem mais significativa, é necessário incluir aspectos adicionais do Linaje de datoscomo quem utiliza quais dados, o que significam, quando se acede aos dados, porque os dados são armazenados e como os itens de dados se relacionam. Ter esta perspetiva mais integral ajuda a mitigar os obstáculos nos projetos de dados, reduzindo o período de tempo para desenvolvimento e testes.
Entre os dimensões de Linaje de datos que não devem faltar são:
- por uma simples razão
- Esse
- Onde
- Por que
- Quão
Por que realizar um acompanhamento da linhagem dos dados?
o A linhagem de dados está relacionada com inúmeros benefícios comerciais, que incluem o seguinte:
- Governança de dados mais eficaz. A governação de dados necessita da gestão de metadados. Isto é necessário para garantir que o Big Data cumpra os padrões comerciais. Uma solução de linhagem de dados une os metadados e fornece compreensão e validação do uso ótimo dos dados e dos riscos da informação que devem ser mitigados.
- Maior capacidade de conformidade. A Linhagem de Dados fornece evidências de que os relatórios refletem adequadamente os dados, Algo essencial para permitir que os utilizadores comerciais, clientes ou auditores confiem nos dados reportados enquanto a organização responde rapidamente às oportunidades que surgem e enfrenta desafios regulatórios.
- Um impulso à qualidade dos dados. Os desafios para a qualidade dos dados incluem o movimento, a transformação, a interpretação e a seleção de dados por meio de pessoas e processos. A pressão para demonstrar de forma confiável a origem e a transformação dos dados em toda a organização só pode ser gerida por meio de uma solução de Rastreabilidade de Dados, que fornece visibilidade de ponta a ponta.
