Construiré y optimizaré pipelines de datos ETL en AWS glue

Parte de la información se ha traducido automáticamente.

Sudáfrica

Hablo Inglés

Ingeniero de Terraform y DevOps especializado en AWS Amazon Connect

Soy un ingeniero de la nube certificado en AWS y desarrollador de Amazon Connect especializado en Amazon Connect, Terraform, automatización DevOps y ingeniería de datos en la nube. Ayudo a las empresa...
Acerca de este Servicio

¿Necesitas que se construya, arregle u optimice un pipeline de datos confiable en AWS?


Soy un ingeniero certificado en AWS Cloud y DevOps con experiencia práctica en diseñar pipelines de datos empresariales usando AWS Glue, PySpark, Amazon S3, Amazon Redshift, Python, Terraform y GitHub Actions.


Puedo ayudar con:


Desarrollo y solución de problemas de trabajos ETL en AWS Glue

Ingesta en S3, particionado y procesamiento de Parquet

Transformaciones en PySpark y manejo de esquemas

Preparación, carga, MERGE y deduplicación en Redshift

Conversión de marcas de tiempo, backfills y cargas incrementales

Verificación de calidad de datos, validación y monitoreo

Configuración del Glue Catalog y crawler

Infraestructura con Terraform y flujos de trabajo de CI/CD

Optimización del rendimiento y costos del pipeline

Análisis de causa raíz para fallos específicos de esquema y entorno


Mi experiencia incluye construir pipelines de producción para datos JSON complejos, aplanar estructuras anidadas, aplicar lógica de último registro, resolver conflictos de tipos y promover cambios controlados en entornos de desarrollo, prueba y producción.


Por favor, envíame un mensaje antes de ordenar si tu pipeline tiene múltiples fuentes, grandes backfills, esquemas complejos o requisitos de despliegue en producción.

Plataforma de destino:

Amazon Redshift

•

Amazon S3

Herramientas y plataformas:

Otros

Mi porfolio