Construiré pipelines de ingeniería de datos para proyectos de big data
Ingeniero de datos sénior
Acerca de este Servicio
Construye pipelines de datos confiables, escalables y listos para la nube con un profesional en ingeniería de datos con más de 10 años de experiencia.
Me especializo en desarrollar pipelines ETL y ELT de extremo a extremo que automatizan la ingesta, transformación, validación y carga de datos en entornos en la nube y locales.
Mis servicios incluyen:
- Desarrollo de pipelines ETL/ELT
- Procesamiento de datos por lotes e incremental
- Integración de API, bases de datos y archivos
- Limpieza y transformación de datos
- Verificación y validación de calidad de datos
- Integración de data lake y data warehouse
- Orquestación de pipelines, registro y manejo de errores
- Migración a la nube y diseño de arquitectura
Tecnologías: Python, SQL, Pyspark, GraphDB (Neo4j), Databricks, Azure Data Factory, Azure Data Lake Storage, AWS Glue, Amazon S3, BigQuery y bases de datos relacionales.
Entrego soluciones limpias, fáciles de mantener y bien documentadas, adaptadas a los requisitos de tu proyecto.
Por favor envíame un mensaje antes de hacer el pedido para entender tus fuentes de datos, requisitos y la complejidad del proyecto.
Herramientas y plataformas:
Azure Data Factory
FAQ
Traducción automática
¿Qué información necesitas para empezar?
Por favor comparte tus fuentes de datos, sistema objetivo, datos de muestra o esquema, requisitos de transformación, tecnología preferida y resultado esperado
¿Qué tipos de fuentes de datos soportas?
Trabajo con bases de datos, APIs REST, CSV, JSON, Excel, almacenamiento en la nube y datos estructurados o semi-estructurados.
¿Con qué tecnologías y plataformas en la nube puedes trabajar?
Trabajo con Python, SQL, Pyspark, Databricks, Azure Data Factory, Azure Data Lake, AWS Glue, Amazon S3, BigQuery y bases de datos relacionales.
¿Puedes construir pipelines incrementales o en tiempo real?
Sí. Puedo desarrollar pipelines por lotes, incrementales y en tiempo real según el volumen de datos, requisitos comerciales y tecnología utilizada.
¿Debo comunicarme con usted antes de realizar un pedido?
Sí. Por favor, contáctame antes de hacer el pedido para revisar el alcance de tu proyecto, su complejidad, volumen de datos, integraciones necesarias y plazo de entrega.
