Please enable JavaScript.
Coggle requires JavaScript to display documents.
Data Intergration, ETL, ELT, Terms - Coggle Diagram
Data Intergration
Integrar dados de várias fontes de dados dentro de uma Data Warehouse para obter uma visão única e integrada para vários propósitos.
o que acontece: Discobertas, Limpeza, monitoramente e transformação, leva dados de várias fontes
Porque: Com o aumento em volume, variedade e velocidade da integração tem tornado passo crucial para muitos enterprises ter sucesso.
Como ajuda: Limpeza e monitoramento da qualidade dos dados
Entender sua informação e ajudar trabalhar em colaboração entre TI e Negócio
Transformar dados de muitos estilos e muitos sistemas
ETL
Transform
As regras de negócio que definem como as agregações são alcançadas e o relacionamento entre várias entidades nas duas fontes são direcionadas e projetadas e codificadas nas rotinas que implementam o processo ideal
Necessário previamente a modelagem dos dados para se ter uma ideia de como será o estado final de destino depois dai, volte ao estado de extração e vejo o que será necessário adequar para atingir o estado final - DW.
Load
DataWarehouse: Deve incorporar todos os fatos e dimensões necessárias para apresentar os níveis de agregação necessários pra o relatório e quaisquer possiveis novos requisitos
-
ELT
Transform
A etapa de transformação em um DW fornece uma cópia validada e limpa do dados de origem. Uma vez bi DW, as transformações são realizadas para remodelar os dados no formato de saída de destino
O processo de extração em carga pode ser isolado do processo de transformação, que leva a vários beneficios
Isolar o processo de carregamento do processo de transformação remove uma dependência de herança entre estágios
-
-
-
-
Load
DataWarehouse: Deve incorporar todos os fatos e dimensões necessárias para apresentar os níveis de agregação necessários pra o relatório e quaisquer possiveis novos requisitos
Extract
Os dados de origem são extraídos de diferentes fontes para o Staging [área de preparação], que mantém o conteúdo bruto sem tantas alterações.
Depois de extraídos as verificações de integridade e de regra de negócio podem ser aplicadas e correções relevantes podem ser feitas [mas não é obrigatório]. A área de Staging pode ser removida de sua arquitetura mas isso depende do tipo de estrutura que você deseja e requisitos de negócio. Podendo assim ser carregados diretamente do DW [assumido como área de transformação]
-