Construiré pipelines ETL automatizadas usando apache airflow que consolidan datos

Parte de la información se ha traducido automáticamente.

India

Hablo Inglés

científico de datos

Soy Senthil, ingeniero de ETL Pipeline y Machine Learning con 1 año de experiencia, especializado en Apache Airflow y Python. Construyo pipelines de ETL escalables y listos para producción que automat...
Acerca de este Servicio

Construyo pipelines ETL (Extract, Transform, Load) de nivel de producción usando Apache Airflow para automatizar tu flujo de datos y consolidar información de múltiples fuentes en tu almacén en la nube.


LO QUE OBTIENES


Configuración y puesta en marcha de Apache Airflow

- DAGs de Airflow listos para producción

- Programación y automatización de tareas

- Manejo de errores y lógica de reintentos


Integración de fuentes de datos

- Conexión a cualquier API o base de datos

- Soporte: Shopify, Stripe, HubSpot, Google Analytics, etc.

- Conectores personalizados según sea necesario


Transformaciones de datos

- Limpieza y validación de datos en bruto

- Modelado de datos con dbt

- Implementación de lógica de negocio


Puesta en marcha del almacén en la nube

- BigQuery, Snowflake o Redshift

- Esquemas optimizados

- Estrategias de partición


Calidad y validación de datos

- Chequeos automáticos de calidad

- Detección de anomalías

- Alertas por Slack/Email


Documentación y soporte

- Diagramas de arquitectura

- Instrucciones de configuración

- Asistencia post-entrega

Plataforma de destino:

Postgresql

mySQL

Herramientas y plataformas:

Otros