Construiré pipelines de datos ETL escalables en AWS, Azure y Apache Spark
Ingeniero de datos senior: AWS, Azure, Spark, pipelines ETL y arquitectura de datos
Acerca de este Servicio
¿Tienes problemas con pipelines de datos lentos o poco confiables? Diseño y construyo pipelines ETL de nivel de producción en AWS y Azure que son rápidos, escalables y duraderos.
Lo que obtendrás:
- Diseño e implementación de pipelines ETL de extremo a extremo
- Optimización del rendimiento de Apache Spark (PySpark, Scala)
- Configuración en AWS: Glue, Lambda, Step Functions, S3, Redshift
- Configuración en Azure: Databricks, Data Factory, Azure Data Lake Gen2
- Validación de datos, manejo de errores y monitoreo
- Documentación completa y entrega
Ideal para:
- Empresas con pipelines de datos lentos o que fallan
- Equipos que migran de on-prem a AWS o Azure
- Proyectos que necesitan optimización y ajuste de Spark
- Desarrollo de ETL en tiempo real o por lotes
Por qué elegirme:
Más de 5 años creando pipelines de datos empresariales en retail, IoT y finanzas. He manejado pipelines que procesan millones de registros diarios y aportaré esa misma experiencia a tu proyecto.
Plataforma de destino:
Amazon Redshift
•
Amazon S3
Herramientas y plataformas:
AWS Glue DataBrew

