Haré pipelines de ETL con Airflow, Python y AWS

Parte de la información se ha traducido automáticamente.

Pakistán

Hablo Urdu, Inglés

Ingeniero de Datos Senior Airflow, Spark, AWS

Soy Ingeniero de Datos Senior con más de 4 años de experiencia diseñando pipelines de datos de producción. Diseño y ejecuto flujos ETL/ELT, sistemas de streaming en tiempo real y la ingestión de datos...
Acerca de este Servicio

¿Necesitas mover, limpiar y entregar datos de forma fiable? Construyo pipelines de producción que se ejecutan según lo programado, se reintentan ante fallos y te avisan cuando algo falla.

Lo que entrego:

  • Ingestión desde APIs, bases de datos, archivos o sitios web
  • Transformación y limpieza en Python o Spark
  • Carga en PostgreSQL, S3, MongoDB o TimescaleDB
  • DAGs de Airflow con programación, reintentos y alertas
  • Configuração dockerizada, documentación y entrega

Encaja bien para startups y equipos que tengan fuentes de datos desordenadas, scripts lentos o rotos, o aún sin orquestación. Envíame un mensaje antes de pedir con tu fuente de datos, destino y volumen.

Idioma:

Inglés

•

Urdu

Experiencia técnica:

Apache Airflow

•

apache spark

•

Apache Flink

Experiencia:

Canalización de datos

•

Desarrollo ETL

industria:

Audio y video

•

Crypto y Blockchain

•

Ciberseguridad