Haré una canalización de datos automatizada con Python y Airflow
Acerca de este Servicio
¿Cansado de copiar y limpiar datos a mano? Yo construyo canalizaciones de datos automatizadas que recolectan tus datos, los limpian y los guardan en una base de datos, ejecutándose en un horario por sí mismas.
Qué obtendrás:
- Código en Python que extrae datos de APIs o archivos
- Limpieza de datos (duplicados, formatos incorrectos, valores faltantes)
- Almacenamiento en una base de datos PostgreSQL
- Programación diaria con Apache Airflow
- Empaquetado en Docker para que funcione igual en cualquier entorno
- Despliegue en servidor en la nube de AWS (paquete Premium)
Yo mismo he construido y desplegado una canalización así, y puedo compartir capturas de pantalla.
Antes de pedir, envíame tu fuente de datos y qué quieres hacer con los datos, para confirmar que se ajuste.
Tecnología:
apache spark
•
BigQuery
•
Python
•
SQL
•
Apache Airflow
Mi porfolio
FAQ
Traducción automática
¿Trabajas con Power BI o Tableau?
Sí, puedo hacerlo, pero me enfocaré en la canalización de datos y la base de datos. Puedo preparar datos limpios para que tu herramienta de tablero los lea.
¿Puedes desplegar en mi propia cuenta de AWS?
Sí, si me das acceso. De lo contrario, puedo desplegar en mi propio servidor.

