Seré tu ingeniero de datos para proyectos de airflow, spark y dbt

Parte de la información se ha traducido automáticamente.

Rusia

Hablo Ruso, Inglés

Jefe de plataforma de datos

Soy Jefe de Plataforma de Datos en Uzum, donde construyo productos de datos escalables, fiables y fáciles de usar. Dirijo un equipo de ingenieros de datos y trabajo con el stack completo, incluyendo l...
Acerca de este Servicio

Construyo y arreglo pipelines de datos con Airflow, dbt y Spark.


Dirijo la plataforma de datos en un gran marketplace de comercio electrónico: más de 1,000 DAGs de Airflow, 600 TB de datos, 130+ usuarios de datos. He trabajado en ingeniería de datos desde 2019.


Qué puedo hacer por ti:

  • Arreglar DAGs de Airflow que fallen o son lentos, trabajos de Spark y modelos de dbt
  • Construir pipelines ETL/ELT desde bases de datos, APIs y archivos hacia tu data warehouse
  • Configurar Airflow, dbt y Spark en Docker o Kubernetes
  • Diseñar tablas en ClickHouse, PostgreSQL, Trino e Iceberg
  • Transmitir cambios de bases de datos con Debezium y Kafka
  • Añadir pruebas de calidad de datos y alertas

Cómo trabajo:

  1. Describe la tarea y acordamos alcance y fecha límite antes de que hagas la orden.
  2. Trabajo en tu repositorio o entrego código que puedas desplegar tú mismo.
  3. Obtendrás código funcionando, documentación breve y una llamada de entrega.

Envíame un mensaje antes de ordenar para comprobar que la tarea encaja en el paquete.

Idioma:

Inglés

Experiencia técnica:

dbt (herramienta de modelado de datos)

Experiencia:

Canalización de datos

•

Configuración de datos Lake

industria:

Análisis de Datos

•

Servicios financieros