Crearé ingeniería de datos y big data
Ingeniero de datos
Acerca de este Servicio
Construiré una canalización de datos ETL/ELT personalizada usando Python y SQL para extraer, transformar, validar y cargar tus datos en bases de datos o almacenes de datos en la nube como BigQuery. La canalización incluirá verificaciones básicas de calidad de datos, pruebas unitarias y documentación clara.
Herramientas y plataformas:
Google Cloud Dataflow
FAQ
Traducción automática
¿Qué información necesitas para iniciar el proyecto?
Necesito acceso a la fuente de datos o un conjunto de datos de muestra, el destino deseado y una breve descripción de las transformaciones o requisitos comerciales esperados. Por favor, no compartas credenciales sensibles directamente en el chat de Fiverr.
¿Qué fuentes y destinos de datos soportas?
Puedo trabajar con bases de datos y servicios en la nube como PostgreSQL, MySQL, BigQuery y Google Cloud Storage. También puedo trabajar con archivos estructurados como CSV y JSON.
¿Proporcionas canalizaciones ETL y ELT?
Sí. Puedo diseñar flujos de trabajo ETL o ELT dependiendo de tu arquitectura de datos, requisitos y plataforma de destino.
¿Incluye la canalización verificaciones de calidad de datos?
Sí. El paquete básico incluye validaciones básicas como verificaciones de valores nulos, detección de duplicados, validación de tipos de datos y validaciones básicas de esquema o valores.
¿La canalización incluirá pruebas y documentación?
Sí. La canalización incluye pruebas unitarias básicas y documentación que explica la configuración, dependencias, proceso de configuración y ejecución.
¿Puedes conectar la canalización a mi base de datos o entorno en la nube existentes?
Sí, siempre que la información de acceso y conexión requerida esté disponible. La implementación exacta depende de la fuente, destino y requisitos del proyecto.
