Please enable JavaScript.
Coggle requires JavaScript to display documents.
ETL / ELT - Coggle Diagram
ETL / ELT
Proceso
1.- Extraer datos de un sistema de origen
2.- Analizar los datos extraídos
3.- Validar estructura de datos extraídos
4.- Convertir los datos a un formato específico antes de la fase de transformación
Herramientas
Logstash
Categorías
Open Source
Apache Hop
Conceptos
Workflow (.hfl)
Pipeline (.hpl)
http://blog.jortilles.com/hola-mundo-apache-hop/
:warning:
n8n.io
Talend Open Studio
Pentaho Data Integration (PDI) -ex Kettle–
Hadoop (en específico Pig, MapReduce y Spark
Singer
Apache Kafka
Enterprise
Informatica PowerCenter
IBM Infosphere Datastage
Oracle Data Integrator
Microsoft SQL Server Integration Services
-SSIS-
SAP Data Services
SAS Data Manager
Cloud
Azure Data Factory ADF
AWS EMR
AWS Glue
Google Cloud Dataflow
Personalizadas
Python
Java
Spark y Hadoop
https://github.com/pawl/awesome-etl
https://www.stitchdata.com/etldatabase/etl-transform/