Automatizaré etl pipeline utilizando data factory y databricks

Hola,

Espero que estés bien.

Tengo más de 4 años de experiencia trabajando como ingeniero de datos en diferentes ámbitos, con experiencia práctica en el desarrollo de pipelines de ETL altamente complejos.

Mis servicios incluyen:

• Construcción de la solución completa en Azure Data Factory con copia de datos / flujo de datos de mapeo.
• Optimización de consultas complejas
• Carga de datos, transformación y orquestación (proceso ETL)
• Migración de datos desde sistemas On-Prem o APIs de aplicaciones a ADLS, Blob storage
• Desarrollo de transformaciones complejas usando DataBricks en Python/PySpark/SparkSQL
• Transferir los datos procesados a Delta Lake, Data Warehouse, Azure SQL Database (SSMS), MSSQL
• Uso de Azure KeyVault
• Crear Procedimientos almacenados SQL, funciones, vistas y consultas
• Soporte para múltiples fuentes y destinos como FTP, base de datos, Datawarehouse, DataLake
• Notificación basada en eventos de fallo o éxito del pipeline usando Azure Logic Apps
• Desarrollar y mantener la arquitectura de Delta live table en databricks
• Crear dashboard en Databricks
• Aplicar seguridad y mejores prácticas en el código y los entornos
• Programación de pipelines

¿Por qué elegirme?

1. Satisfacción total del cliente
2. Código ordenado y limpio
3. Buen comunicador
4. Entrega a tiempo.

¡POR FAVOR, CONTACTA ANTES DE PEDIR UN GIG!