Construiré pipelines de datos ETL ELT usando airflow, spark y sql

Parte de la información se ha traducido automáticamente.

Bangladesh

Hablo Inglés, Bengalí, Hindi, Urdu

Opta por Silence para transmitir mi angustia

Ingeniero de datos dinámico con experiencia en Data Science y Analytics, Apache Airflow, Spark, pipelines ETL, Data Warehouse (Iceberg, RedShift, BigQuery), experiencia avanzada en SQL (CTEs, funcione...
Acerca de este Servicio

Soy un ingeniero de datos profesional especializado en diseñar y construir pipelines de datos escalables, confiables y completamente automatizados que transforman datos en bruto en conjuntos de datos limpios y listos para análisis. Me enfoco en crear flujos de trabajo ETL/ELT eficientes que garantizan alto rendimiento, precisión de datos y un flujo de datos sin problemas entre sistemas.

Trabajo con herramientas y tecnologías modernas de ingeniería de datos como Apache Airflow, Apache Spark, SQL y Apache Iceberg para construir soluciones robustas de procesamiento de datos. Mi experiencia incluye ingestión, transformación, orquestación, optimización y diseño de warehouses de datos.

Ya sea que necesites pipelines de procesamiento por lotes, flujos de datos en tiempo real o una solución completa de data warehouse, puedo ayudarte a construir una arquitectura de datos sólida y escalable adaptada a las necesidades de tu negocio. Mi objetivo es garantizar automatización, confiabilidad y rendimiento en cada solución que entrego.

Plataforma de destino:

Postgresql

mySQL

Amazon S3

Herramientas y plataformas:

Google Cloud Dataflow

Kafka Connect

Mi porfolio