Haré pipelines de datos en pyspark y databricks
Acerca de este Servicio
¿Buscas pipelines de datos robustos y de alto rendimiento listos para escalar?
Me especializo en construir, optimizar y automatizar pipelines ETL/ELT de extremo a extremo con PySpark, Databricks y arquitecturas modernas de datos en la nube. Ya sea que necesites ingerir archivos crudos desordenados, transformar conjuntos de datos complejos o migrar datos estructurados, entrego soluciones fiables y listas para producción.
Servicios ofrecidos:
1. Diseño personalizado de pipelines ETL/ELT y automatización de flujos de trabajo
2. Procesamiento y transformación de datos a gran escala con PySpark y Databricks
3. Optimización de consultas SQL, validación de datos y deduplicación
4. Integración con almacenamiento en la nube (Azure Data Lake, Synapse, Databricks Lakehouse)
5. Integración de APIs, pruebas y flujos de ingestión automatizados
6. Migración de datos de extremo a extremo y soporte de gobernanza
Pila tecnológica:
Databricks, Apache Spark / PySpark, Azure Synapse, ADLS, Python, SQL, REST APIs / Postman.
¿Por qué trabajar conmigo?
Experiencia práctica en ingeniería de datos a nivel empresarial y gestión de datos
Código limpio, modular y bien documentado
Entrega oportuna con comunicación clara
Por favor, envíame un mensaje con los requisitos de tu proyecto y datos de muestra antes de hacer un pedido para definir el alcance ideal
