Construiré soluciones de ingeniería de datos usando azure
Scraper web e ingeniero de datos
Nivel 2
Ha cumplido con los criterios de alto rendimiento y tiene un historial comprobado de cumplimiento de las expectativas de los clientes.
Acerca de este Servicio
¿Buscas un ingeniero de datos para construir pipelines ETL confiables en Azure? Diseño e implemento soluciones de datos de extremo a extremo usando Azure Data Factory (ADF), Azure Databricks y Medallion Architecture para ingerir, transformar y gestionar tus datos de manera eficiente.
Servicios que ofrezco:
- Ingesta de datos: APIs, CSV, Excel, bases de datos, almacenamiento en la nube
- Transformación de datos: Databricks (PySpark/SQL), Flujos de datos de ADF (filtrar, agregar, seleccionar, columna derivada, modificar fila, uniones)
- ETL pipelines con Medallion Architecture (Bronze, Silver, Gold)
- Actividades de ADF: Copiar datos, ForEach, Lookup, Web, Procedimientos almacenados
- Programación y disparadores: basados en tiempo, almacenamiento y eventos
¿Por qué elegirme?
- Amplia experiencia en ADF y Azure Databricks
- ETL pipelines optimizados y escalables
Herramientas y plataformas:
Azure Data Factory
•
Otros
Mi porfolio
FAQ
Traducción automática
¿Qué necesitas de mí para empezar?
Necesitaré acceso a tu suscripción de Azure (o un grupo de recursos dedicado), detalles sobre tus fuentes de datos (APIs, bases de datos, archivos, etc.) y tus requisitos para transformaciones y almacenamiento.
¿Puedes configurar pipelines ETL simples y complejos?
¡Sí! Puedo construir desde un pipeline básico de ADF con disparadores programados hasta flujos de trabajo avanzados de ETL en Azure Databricks usando Medallion Architecture (Bronze, Silver, Gold).
¿También manejas transformaciones de datos?
Por supuesto. Uso Flujos de datos de ADF (filtrar, agregar, uniones, columnas derivadas, modificar filas, etc.) y Databricks (PySpark/SQL) para transformaciones personalizadas.
¿Puedes integrar con mis bases de datos o APIs existentes?
Sí. Puedo ingerir datos desde APIs, CSV, Excel, bases de datos SQL y almacenamiento en la nube en Azure, asegurando una integración fluida con tus sistemas existentes.
