Explorar las categorías
Explora
Fiverr Pro
Español
$
USD
Construiré tu pipeline de datos con airflow y spark
Acerca de este Servicio
Construye pipelines de datos confiables, escalables y listos para la nube.
¿Te cuesta mover o transformar tus datos de manera eficiente? Me especializo en construir pipelines de datos de extremo a extremo que automatizan la ingesta, transformación, validación y carga en entornos en la nube y locales.
Con más de 2.5 años de experiencia y herramientas como Spark, SQL, Python, Databricks, Snowflake, AWS y GCP, te ayudo a convertir datos crudos y desordenados en insights de nivel producción.
Lo que ofrezco:
- pipelines ETL y ELT (batch y streaming)
- Integración con APIs, almacenamiento en la nube y bases de datos
- Despliegue nativo en la nube: AWS Glue, Lambda, Azure ADF, Databricks, GCP Dataflow
- Arquitectura en tiempo real usando Kafka, Pub/Sub o Event Hubs
- Limpieza de datos, controles de calidad, registros de auditoría
Nota: Envíame un mensaje antes de ordenar para asegurarme de definir perfectamente el alcance de tu proyecto.
FAQ
Traducción automática
¿Cuánto tiempo tarda un proyecto de pipeline de datos?
Pipeline único: 5 días. Almacén de múltiples fuentes con orquestación: 14 días. pila de datos empresarial con streaming, CDC y dbt: 25 días. La complejidad (cantidad de fuentes, volumen de datos, requisitos de calidad) afecta significativamente el plazo.
¿Construyes pipelines de datos en tiempo real?
Sí. Implemento pipelines casi en tiempo real (latencia de 5 a 15 minutos) usando Kafka y carga en micro-batch, y streaming en tiempo real usando Kafka + Spark Structured Streaming o KSQL. Te ayudaré a determinar si realmente necesitas en tiempo real.
¿Puedes documentar mis pipelines de datos existentes?
Sí. Reviso, documento y mejoro el código de los pipelines existentes.
