Construiré pipelines de datos ETL en azure databricks pyspark y adf

Parte de la información se ha traducido automáticamente.

India

Hablo Inglés, Telugu, Hindi

Ingeniero de datos de Azure

Soy un ingeniero de datos en Azure con 3 años de experiencia en Azure Databricks, PySpark, Apache Spark, SQL, Azure Data Factory, ADLS Gen2, Delta Lake, Unity Catalog, Structured Streaming y Azure Dev...
Acerca de este Servicio

¿Necesitas ayuda para construir, mejorar o solucionar problemas en un pipeline de datos en Azure? Puedo ayudarte a diseñar e implementar soluciones confiables de ingeniería de datos usando Azure Databricks, Azure Data Factory, PySpark, SQL, ADLS y Delta Lake.

Con experiencia práctica en la construcción de pipelines ETL/ELT, puedo ayudarte con:

Desarrollo y solución de problemas en Azure Databricks

Transformaciones de datos con PySpark y optimización de rendimiento

Consultas SQL, análisis de datos y optimización de consultas

Pipelines en Azure Data Factory y movimiento de datos

Desarrollo de pipelines ETL/ELT

Implementación y optimización de Delta Lake

Streaming estructurado y procesamiento por lotes

Limpieza, validación y transformación de datos

Arquitectura Medallion usando capas Bronze, Silver y Gold

Integración de ADLS con Databricks

Depuración y corrección de problemas en pipelines

Diseño de pipelines y diagramas de arquitectura de datos

Me enfoco en entender los requisitos reales antes de construir una solución. Ya sea que necesites una transformación sencilla, ayuda para arreglar un pipeline existente o soporte en una tarea más grande de ingeniería de datos, ofreceré soluciones limpias, fáciles de mantener y prácticas.

Por favor, envíame un mensaje antes de hacer un pedido para que podamos discutir tus requisitos.

Idioma:

Inglés

Experiencia técnica:

apache spark

Databricks

Experiencia:

Canalización de datos

Desarrollo ETL

industria:

Análisis de Datos

Servicios financieros