Explorar las categorías
Explora
Fiverr Pro
Español
$
USD
Construiré pipelines ETL escalables con adf y databricks
Con trabajo y esfuerzo se puede lograr cualquier cosa
Ingeniero de datos
Soy un ingeniero de datos profesional con experiencia práctica en la construcción de pipelines de datos confiables y soluciones estructuradas de data warehouse. Ayudo a las empresas...
Acerca de este Servicio
¿Buscas un experto técnico para diseñar tu infraestructura en la nube y desarrollar pipelines ETL/ELT de alto rendimiento? Estás en el lugar correcto.
Me especializo en diseñar y desplegar soluciones de datos de extremo a extremo. Ya sea que necesites un Data Lakehouse moderno en Azure, un pipeline robusto en AWS, o transformaciones complejas en Databricks, entrego arquitecturas listas para producción.
Mi experiencia y servicios:
- Arquitectura de datos: Diseñar marcos escalables para las necesidades de datos de la organización.
- ETL por lotes y en streaming: Trabajos de alto rendimiento usando Apache Spark y PySpark.
- Excelencia en Databricks: Crear flujos de trabajo automatizados y pipelines Delta Lake.
- Integración de datos en Azure: Desarrollo usando Data Factory (ADF) y Synapse.
- Ingesta vía API: Conectar APIs a S3/Blob/SQL mediante AWS Lambda o Functions.
- Preparación para BI: Optimizar datos para Power BI, Tableau y Qlik.
- Transformaciones personalizadas: Limpieza experta con Python y SQL.
La pila tecnológica:
- Plataformas: Azure, AWS, GCP.
- Motores: Databricks, Spark, Glue.
- Orquestación: ADF, Airflow.
Mi porfolio
FAQ
Traducción automática
¿Explicará también la arquitectura de implementación?
Sí, puedo ofrecer una revisión completa de la arquitectura. Explicaré el flujo de datos, la elección de servicios en la nube (ADF, Databricks, etc.) y el razonamiento detrás del diseño para que tu equipo pueda gestionarlo en adelante.
¿Puedes manejar proyectos de datos tanto pequeños como grandes?
Por supuesto. Diseño pipelines pensando en la escalabilidad. Ya sea que necesites una ingesta simple de API a SQL para una startup o un procesamiento de miles de millones de filas con Spark para una gran organización, adapto el cómputo y almacenamiento a tu volumen y presupuesto específicos.
¿Proporcionas documentación técnica con la entrega?
Cada proyecto incluye una visión general técnica y una guía de configuración. Para documentación detallada de nivel empresarial (incluyendo diccionarios de datos y documentos de mapeo), menciona esto durante nuestra llamada de descubrimiento para incluirlo en el alcance del proyecto.
¿Ofreces soporte continuo para las soluciones que desarrollas?
Sí. Ofrezco soporte post-entrega para asegurar que el pipeline funcione sin problemas en producción. Esto incluye solucionar problemas en las primeras ejecuciones, arreglar bugs y ajustar el rendimiento. También se puede organizar mantenimiento a largo plazo o soporte mensual.
¿Cómo se determina el precio de un proyecto?
El precio se basa en tres factores: el número de fuentes de datos, la complejidad de las transformaciones (lógica ETL/ELT) y los requisitos de orquestación. Ofrezco una cotización transparente tras revisar tu esquema de datos y objetivos del proyecto.
¿Cuál es el enfoque para comenzar un proyecto?
Comenzamos con una fase breve de descubrimiento donde reviso tus fuentes de datos y requisitos de destino. Una vez aprobada la arquitectura, configuro el entorno, construyo los pipelines, realizo validaciones rigurosas de datos y finalmente entrego el código con una revisión técnica.
