Please enable JavaScript.
Coggle requires JavaScript to display documents.
ADF - Coggle Diagram
ADF
Ejemplo práctico
Crear un nuevo grupo de recursos :red_flag:
Definir nombre, suscripción y zona
Agregar componentes
al grupo de recursos
Agregar Storage Account (SQL Database)
Instalar Azure Storage Explorer en windows
Conectar al recurso Storage
Configurar acceso
Ingresar a implementación de db
Ingresar a datos del servidor
Ingresar a firewall para definir permiso de acceso
Subir datos o archivo de texto (origen de datos)
Crear tabla que almacenará información (destino de datafactory)
Crear servicio de datafactory :star:
Ir a pantalla info. gral. de resource group
Crear recurso y escoger "data factory"
Agregar nombre, suscripción, Resource Group y localización
Crear proceso ETL
Agregando propiedades, Source, Destino
Desplegar pipeline ADF
Proceso Azure Data Factory
Definir el diseño
Definir objetivos y flujo
Definir las fuentes de datos, requisitos de procesamiento y de salida, también de gestión y seguimiento
Data sets (ADF)
Activity(adf)
Pipeline (adf)
Data Sources
Ingest
Transform and analyze
Publish
Crear el servicio
de Data Factory
Mediante Portal PowerShell, Visual Studio
New -> Data Analytics-> Data Factory
Crear Linked Services
Conexiones a datos, o a recursos de cómputo
Blob,table, sql database, etc
Crear Datasets
(conjunto de datos)
Referencia con nombre o un puntero de datos
Crear Pipeline
Crear actividades
Actividad de transformación, Hive, Pig, MapReduce, Hadoop Streaming, Machine Learning activities, Stored Procedure, Data Lake Analytics U-SQL, DotNet
Administracion y monitoreo
Portal o Powershell, aletras y métricas
Localización de fallas de un pipeline
Componentes
Pipeline
Activities
Data Set
Linked Service (conectores para origen o destino de datos)
Fuentes
https://www.youtube.com/watch?v=xlUIHft17QI
https://portal.azure.com/#home
asdfsocialj@hotmail.cl
https://www.youtube.com/c/SpanishPASSVC/playlists
:red_cross:
Servicio de integración de datos que implementa procesos ELT a gran escala, puede ser de forma visual o por código, ejecutado en la nube Azure
