arreglaré y optimizaré pipelines de datos etl con airflow o nifi

Parte de la información se ha traducido automáticamente.

Pakistán

Hablo Inglés, Urdu, Punjabí, Alemán

Ingeniero de Big Data

Ingeniero de datos senior con más de 7 años creando pipelines de datos y lakehouses de nivel producción para clientes empresariales. Me especializo en Apache NiFi, Airflow, Spark ETL y diseño de data ...
Acerca de este Servicio

¿Tu pipeline de datos es poco confiable, lento o simplemente aún no está construido? Diseñaré y entregaré un pipeline listo para producción, adaptado a tu arquitectura.

Lo que ofrezco:

  • Diseño y despliegue de pipelines en Apache NiFi (Docker o Kubernetes)
  • Desarrollo de DAGs en Airflow, programación, reintentos, alertas, dependencias
  • Jobs ETL en PySpark y Spark SQL para transformación de datos a gran escala
  • Ingesta desde REST APIs, SAP OData, S3/MinIO, bases de datos y archivos planos
  • Procesadores personalizados en NiFi en Java para lógica de negocio compleja

Por qué trabajar conmigo:

  • Más de 7 años de experiencia en empresas construyendo pipelines para clientes corporativos alemanes
  • He creado pipelines que manejan millones de registros en arquitecturas complejas de múltiples fuentes
  • Cada entrega incluye manejo de errores, registros y documentación, no solo código funcional

NO hago:

  • Soluciones rápidas de copiar y pegar
  • Tutoriales reempaquetados como entregables

¿No estás seguro de lo que necesitas? Envíame un mensaje para una consulta gratuita de arquitectura de 15 minutos.

Plataforma de destino:

Postgresql

Base de datos Oracle/Exadata

Herramientas y plataformas:

Kafka Connect

Oracle GoldenGate

Mi porfolio