Haré pipelines de datos en pyspark y databricks

Parte de la información se ha traducido automáticamente.

India

Hablo Inglés, Hindi

Analista Programador

Soy graduado de Informática con base sólida en tecnologías de la nube, gestión de datos y manejo de bases de datos. Tengo experiencia en Python, servicios de Azure y seguridad de redes, y me apasiona ...
Acerca de este Servicio

¿Buscas pipelines de datos robustos y de alto rendimiento listos para escalar?


Me especializo en construir, optimizar y automatizar pipelines ETL/ELT de extremo a extremo con PySpark, Databricks y arquitecturas modernas de datos en la nube. Ya sea que necesites ingerir archivos crudos desordenados, transformar conjuntos de datos complejos o migrar datos estructurados, entrego soluciones fiables y listas para producción.


Servicios ofrecidos:


1. Diseño personalizado de pipelines ETL/ELT y automatización de flujos de trabajo

2. Procesamiento y transformación de datos a gran escala con PySpark y Databricks

3. Optimización de consultas SQL, validación de datos y deduplicación

4. Integración con almacenamiento en la nube (Azure Data Lake, Synapse, Databricks Lakehouse)

5. Integración de APIs, pruebas y flujos de ingestión automatizados

6. Migración de datos de extremo a extremo y soporte de gobernanza


Pila tecnológica:

Databricks, Apache Spark / PySpark, Azure Synapse, ADLS, Python, SQL, REST APIs / Postman.


¿Por qué trabajar conmigo?


Experiencia práctica en ingeniería de datos a nivel empresarial y gestión de datos

Código limpio, modular y bien documentado

Entrega oportuna con comunicación clara


Por favor, envíame un mensaje con los requisitos de tu proyecto y datos de muestra antes de hacer un pedido para definir el alcance ideal

Idioma:

Inglés

•

Hindi

Experiencia técnica:

Informática

•

apache spark

•

Databricks

Experiencia:

Canalización de datos

•

Desarrollo ETL

industria:

Biotecnología

•

Ciberseguridad

•

Análisis de Datos