Haré una canalización de datos automatizada con Python y Airflow

Parte de la información se ha traducido automáticamente.

Nigeria

Hablo Inglés

Ingeniero de datos y nube

Soy un ingeniero de datos que crea canalizaciones automatizadas que funcionan por sí solas, ya sea localmente o en la nube. Trabajo con Python, SQL, PostgreSQL, Apache Airflow y Docker, entre otros, y...
Acerca de este Servicio

¿Cansado de copiar y limpiar datos a mano? Yo construyo canalizaciones de datos automatizadas que recolectan tus datos, los limpian y los guardan en una base de datos, ejecutándose en un horario por sí mismas.


Qué obtendrás:

- Código en Python que extrae datos de APIs o archivos

- Limpieza de datos (duplicados, formatos incorrectos, valores faltantes)

- Almacenamiento en una base de datos PostgreSQL

- Programación diaria con Apache Airflow

- Empaquetado en Docker para que funcione igual en cualquier entorno

- Despliegue en servidor en la nube de AWS (paquete Premium)


Yo mismo he construido y desplegado una canalización así, y puedo compartir capturas de pantalla.


Antes de pedir, envíame tu fuente de datos y qué quieres hacer con los datos, para confirmar que se ajuste.

Experiencia:

Integración API

•

Automatizaciones

•

Big data

Tecnología:

apache spark

•

BigQuery

•

Python

•

SQL

•

Apache Airflow

Mi porfolio