Haré un pipeline ETL con Databricks PySpark

Parte de la información se ha traducido automáticamente.

Pakistán

Hablo Inglés, Urdu

Ingeniero de datos y Python. Extracción de datos web, ETL, SQL, Generador de video con IA

Estudiante de CS en FUUAST Karachi, especializado en Python, SQL e ingeniería de datos Ayudo a empresas con: ✅ Web scraping y extracción de datos ✅ pipelines ETL (Extract, Transform, Load) ✅ limpieza...
Acerca de este Servicio

¿Tienes datos en bruto estancados en archivos CSV, APIs o tablas desordenadas? Los convertiré en tablas limpias y listas para analítica usando Databricks, PySpark y Delta Lake con la arquitectura Medallion (Bronze, Silver, Gold).


Qué obtendrás:

Capa Bronze: datos en bruto ingresados de forma segura, sin pérdidas

Capa Silver: datos limpios, deduplicados y estandarizados

Capa Gold: tablas listas para informes y dashboards

Cuadernos PySpark y SQL bien comentados

Cheques de calidad de datos (nulos, duplicados, formatos incorrectos)

Documentación simple para que tu equipo pueda mantenerlo


Mi prueba: implementé un proyecto end-to-end de Databricks que procesó más de 51,000 registros a través de las tres capas Medallion. Soy microphone1 Certified Data Engineer con formación en Cloud Data Engineer (Python, SQL, AWS, Snowflake, Spark).


Nota: la pipeline se ejecuta en tu espacio de trabajo de Databricks, así que posees tus datos. Una cuenta gratuita de Databricks es suficiente para proyectos pequeños.


Escríbeme antes de hacer el pedido con tu fuente de datos y objetivo, y te recomendaré el paquete adecuado.

Idioma:

Inglés

Experiencia técnica:

dbt (herramienta de modelado de datos)

Experiencia:

Canalización de datos

•

Desarrollo ETL

industria:

Crypto y Blockchain

•

Análisis de Datos

Mi porfolio

Otros servicios de Ingeniería de datos que ofrezco