Construiré pipelines de ETL en databricks usando pyspark, python y sql

Diseñaré y construiré soluciones de ingeniería de datos escalables y de alto rendimiento usando Databricks y Apache Spark. Me especializo en pipelines de ETL/ELT basados en PySpark, transformación de datos y optimización para ayudar a las empresas a procesar grandes volúmenes de datos de manera eficiente.

Mis servicios incluyen crear notebooks de Databricks, ingerir datos de múltiples fuentes (bases de datos, APIs, almacenamiento en la nube), transformar datos usando Spark SQL y PySpark, y entregar conjuntos de datos limpios y listos para análisis. También implemento verificaciones de calidad de datos, pruebas unitarias y ajuste de rendimiento para garantizar pipelines confiables y listos para producción.

Trabajo principalmente con Databricks en plataformas en la nube (Azure/AWS) y sigo las mejores prácticas en modelado de datos, diseño de pipelines y documentación. Ya sea que necesites una tarea pequeña en Databricks, un pipeline completo de ETL o una solución integral de ingeniería de datos, ofrezco comunicación clara, entrega oportuna y código fácil de mantener.

Por favor, envíame un mensaje antes de hacer un pedido para que podamos discutir tus requisitos y elegir el paquete adecuado para tu caso de uso.