Construiré y optimizaré pipelines de datos ETL en AWS o Azure usando pyspark

Parte de la información se ha traducido automáticamente.

India

Hablo Inglés, Ruso, Francés, Alemán

Ingeniero de datos en AWS y Azure para PySpark, ETL y pipelines de datos

Ingeniero de datos con casi 5 años construyendo pipelines de producción en AWS y Azure, actualmente en una fintech regulada por SEBI. Ingeniero de datos certificado en AWS - Asociado. Construyo y arr...
Acerca de este Servicio

¿Necesitas pipelines de datos confiables sin contratar a un ingeniero a tiempo completo?


Soy ingeniero de datos con casi 5 años en AWS y Azure, actualmente en una fintech regulada. Ingeniero de datos certificado en AWS - Asociado.


Lo que puedo hacer por ti:

  • Construir pipelines ETL/ELT con PySpark, Python y SQL
  • - AWS: Glue, Lambda, S3, Redshift, Athena
  • - Azure: Data Factory, Synapse, Databricks, además Snowflake
  • - Migrar datos de sistemas legados o archivos a un almacén en la nube
  • - Acelerar consultas y pipelines lentos (he logrado mejoras del 30-40%)
  • - Añadir controles de calidad de datos para que datos malos nunca lleguen a tus informes
  • - Orquestar con Airflow o ADF

Cómo trabajamos: compartes acceso o datos de muestra, envío un plan breve, lo construyo y entrego código funcional junto con documentación.


Por favor, envíame un mensaje antes de ordenar para confirmar el alcance.

Plataforma de destino:

Snowflake

•

Amazon Redshift

Herramientas y plataformas:

Azure Data Factory

•

Otros