Haré pipelines de datos automatizados con Python, SQL y dbt

Parte de la información se ha traducido automáticamente.

Nigeria

Hablo Inglés

Ingeniero de datos y nube

Soy un ingeniero de datos que crea canalizaciones automatizadas que funcionan por sí solas, ya sea localmente o en la nube. Trabajo con Python, SQL, PostgreSQL, Apache Airflow y Docker, entre otros, y...
Acerca de este Servicio

¿Necesitas que tus datos se recojan, limpien y se mantengan actualizados automáticamente? Construyo pipelines de datos que funcionan por sí solos, para que siempre cuentes con datos frescos y confiables.


QUÉ CONSTRUYO

- Extracción de APIs y archivos con Python

- Carga en PostgreSQL

- Limpieza y modelado con dbt, con pruebas de calidad de datos

- Automatización diaria con GitHub Actions, sin necesidad de servidor

- Un panel en vivo de Streamlit al que puedes acceder con un enlace y también a cualquier destino final que elijas


PRUEBAS DE FUNCIONAMIENTO

He creado y gestionado Nigeria Data Jobs Tracker: extrae listados de empleo cada día, los limpia con dbt y actualiza un panel público automáticamente.

Demostración en vivo: nigeria-job-market-tracker-c2dqzraz9ouopa9qo4cgnt.streamlit.app


CÓMO TRABAJO

- Tú me dices tu fuente de datos y qué quieres ver

- Construyo el pipeline y entrego el código

- Las pruebas corren en cada actualización, para que los datos malos se detecten antes de llegar a tu panel


Herramientas: Python, SQL, PostgreSQL, dbt, GitHub Actions, Streamlit, Docker.


Envíame un mensaje antes de pedir con una breve descripción de tus datos y te recomendaré el paquete adecuado.


Experiencia:

Automatizaciones

•

Extracción de Datos

•

Flujo de Datos

Tecnología:

Apache Kafka

•

apache spark

•

BigQuery

•

Python

•

Databricks

Mi porfolio

Etiquetas relacionadas