o Processos ETL são uma definição padrão que se utiliza para se referir a movimento e transformação de dados. É o procedimento que possibilita às instituições mover dados de múltiplas fontes, reformular e carregar noutro base de dadosUm banco de dados é um conjunto organizado de informações que permite armazenar, Gerencie e recupere dados com eficiência. Usado em várias aplicações, De sistemas corporativos a plataformas online, Os bancos de dados podem ser relacionais ou não relacionais. O design adequado é fundamental para otimizar o desempenho e garantir a integridade das informações, facilitando assim a tomada de decisão informada em diferentes contextos.... (chamado data mart o Armazem de dados) para os analisar. Além disso, podem ser enviados para outro sistema operativo para apoiar um processo empresarial.
Em resumo, o principal objetivo deste procedimento é facilitar o movimento e a transformação de dados, integrando os diferentes sistemas e fontes na organização moderna.
O termo ETL corresponde às siglas em inglês de:
-
Eextrair: extrair.
-
Ttransformar: transformar.
-
eucarregar: carga.
Fases de um procedimento ETL
As diferentes fases ou sequências de um procedimento ETL são as seguintes:
-
Extração de dados de um ou mais sistemas de origem.
-
Transformação desses dados, Em outras palavras, la oportunidad de reformatear y limpiar estos datos cuando sea necesario.
-
Carga de dichos datos en otro lugar o base de datos, uma data mart ou um Armazem de dados, para analizarlos o dar soporte a un procedimiento empresarial.
Limpieza de datos como una etapa separada de los procesos ETL
Aunque podría entenderse como una acción integrada en la etapa de transformación de datos, hoy en día la tendencia es considerar la limpeza de dados como una etapa separada del procedimiento ETL.
Esta visión corresponde a una concepción más moderna y práctica del procedimiento. Para ahorrar tiempo y ser más eficaz, conviene unificar criterios, a modo de ejemplo introduciendo “av” ao invés de “avenue” en todos los registros de una base de datos de direcciones postales, ANTES de iniciar el procedimiento ETL en sí.
Tan importante es tener la información consolidada como que todos los datos sean correctos y con una visión única para todos los usuarios. Solo así se podrán obtener circuitos de trabajo y análisis verdaderamente óptimos y eficaces de dichos datos.
¿Qué sistemas se pueden integrar en un procedimiento ETL?
Los procesos ETL pueden incluir:
-
Sistemas legado. Em outras palavras, legado, heredado o antiguo.
-
Nuevos sistemas. Basado en Windows, Linux y además en redes sociales modernas: Facebook, Twitter, Linkedin, etc.
o sistemas legado o heredado se caracterizan de forma general por: estar cerrados, no permitir cambios y tener difícil acceso (de forma general algún tipo de condutor especial). Son sistemas que procesan hacia adentro y, por isso, no posibilitan la adición de una computadora que funcione en paralelo.
Caso contrário, sistemas nuevos o modernos (basados en Windows o Linux) son abiertos, completos e interconectados. Un ejemplo sería una granja de servidores Linux, que posibilita que los diferentes nodos se interconecten entre sí.
Beneficios de los procesos ETL
Cualquier compañía u organización se beneficia de poner en práctica un procedimiento ETL para mover y transformar los datos que maneja por las siguientes razones:
-
Ser capaz de crear un Administração de dados mestres, Em outras palavras, un repositorio central estandarizado de todos los datos de la organización. Como um exemplo, si tenemos un objeto de cliente en una base de datos de crédito y otro objeto de cliente en la base de datos de tarjetas de crédito, ¿cuál sería el Maestría Sería establecer, de forma concreta e inequívoca, un registro de cliente único con tu nombre y apellidos para la organización.
-
Posibilita a los gerentes tomar decisões estratégicas basado en el análisis de los datos cargados en las bases de datos nuevas y actualizadas: a lady mart o almacén de datos.
-
Sirve para integrar sistemas. Las instituciones crecen orgánicamente y cada vez se agregan más fuentes de datos. Esto hace que comiencen a surgir nuevas necesidades, O que integrar los datos de un banca en línea con datos antiguos de un sistema legado.
-
lata tener una visión global de todos los datos consolidados en un Armazem de dados. Como um exemplo, cree una estrategia de marketing basada en el análisis de los datos anteriores.
Procedimiento ETL: un sistema eficaz, pero con desafíos y problemas que solucionar
Como nós vimos, os processos ETL são muito úteis e benéficos para as instituições devido à sua capacidade de integrar grandes bases de dados, alcançando assim uma visão global única que permita aos analistas e gestores tomar as decisões estratégicas adequadas.
A implementação de um sistema ETL bem definido é um desafio dado que, para ser verdadeiramente eficaz, deve permitir a integração dos sistemas. legado (alguns já muito obsoletos) com os mais modernos. Ao mesmo tempo, o acesso a todos estes sistemas deve ocorrer não apenas em modo leitura, mas também em modo escrita.
Postagens Relacionadas:
