Seré tu ingeniero de datos para soluciones de databricks pyspark ETL y lakehouse

Parte de la información se ha traducido automáticamente.

Pakistán

Hablo Inglés

Ingeniero de datos en la nube

Hola, soy Soban, un ingeniero de datos con más de 3 años de experiencia práctica en la creación y entrega de soluciones de datos de extremo a extremo. Me especializo en Snowflake, Airflow, Kafka, Azur...
Acerca de este Servicio

Construiré pipelines de datos robustos y soluciones lakehouse usando Databricks, PySpark, Apache Spark, Spark SQL y Delta Lake.

Lo que puedo construir:

pipelines ETL/ELT en Databricks

Transformaciones de datos con PySpark

Procesamiento de datos en batch

Soluciones Delta Lake

Arquitectura Medallion

Capas de datos Bronze, Silver y Gold

Procesamiento incremental de datos

Limpieza y validación de datos

SCD Tipo 1 / Tipo 2

Modelado de datos y conjuntos de datos listos para análisis

Puedo trabajar con datos estructurados de archivos CSV, APIs, bases de datos y otras fuentes soportadas, transformándolos en conjuntos de datos limpios y confiables para análisis y aplicaciones downstream.

Por favor, contáctame antes de hacer tu pedido para revisar tus requisitos y recomendarte el paquete adecuado.

Experiencia:

Integración API

•

Big data

•

Extracción de Datos

Tecnología:

Apache Kafka

•

apache spark

•

Python

•

SQL

•

Snowflake

Mi porfolio

Otros servicios de Ingeniería de datos que ofrezco