Crearé, actualizaré dags de airflow, soporte completo en proyectos en configuración docker, dags
Ingeniero de datos: dbt, BigQuery, PySpark, Python, SQL, GCP, AWS
Nivel 1
Ha cumplido determinados criterios de rendimiento y muestra un gran potencial en la plataforma.
Acerca de este Servicio
Crearé, actualizaré y optimizaré Apache Airflow DAGs y ofreceré soporte completo en proyectos. Ya sea que necesites nuevos pipelines, mejoras en DAGs existentes o una configuración completa de Airflow en Docker, te ayudaré a construir flujos de trabajo escalables, eficientes y listos para producción adaptados a tus necesidades.
Puedo ayudarte con pipelines ETL/ELT, orquestación de datos, automatización de workflows, configuración de Airflow en Docker, integraciones API/base de datos y optimización del rendimiento para que tus pipelines funcionen más rápido, de manera más suave y con menos fallos.
Lo que incluye:
- Creación de nuevos DAGs de Airflow desde cero
- Actualización y refactorización de DAGs existentes
- Configuración de Airflow en Docker con configuraciones
- Diseño de pipelines ETL/ELT de extremo a extremo
- Integración de APIs, bases de datos y fuentes de datos externas
- Depuración, corrección de errores y resolución de fallos en tareas
- Optimización del rendimiento de DAGs para una ejecución más rápida
- Configuración de programación, dependencias y orquestación
- Implementación de monitoreo, registro y manejo de errores
- Soporte continuo para escalar y mantener pipelines
Solo envíame un DM y te responderé de inmediato para discutir las necesidades de tu proyecto.
