Imagínate tener un
tubería de datos que extrae datos de múltiples fuentes, los limpia y transforma, y entrega datos fiables listos para el análisis. ¡Ahí es donde puedo ayudar! Con experiencia práctica en ingeniería de datos en Airtel Digital y Grant Thornton Bharat, puedo ayudarte a construir tuberías de datos eficientes, optimizar el procesamiento y automatizar flujos de trabajo adaptados a las necesidades de tu negocio.
Mis habilidades:
- Firme dominio de Python, SQL, PySpark y Spark SQL
- Experiencia con Apache Spark, Databricks y Delta Lake
- Experiencia práctica con Apache Kafka y transmisión de datos en tiempo real
- Experiencia en construir pipelines ETL, cargas de datos incrementales y marcos de deduplicación de datos
- Conocimiento de Google Cloud Platform, Google Cloud Storage y BigQuery
- Experiencia con optimización de rendimiento de Spark y optimización de consultas SQL
- Comprensión de almacenamiento de datos, modelado de datos y calidad de datos
- Fuertes habilidades de resolución de problemas y analíticas
Lo que hago:
- Ingeniería de Datos: Construir y optimizar pipelines ETL usando Python, SQL y PySpark.
- Limpieza y Transformación de Datos: Limpiar, validar y transformar datos brutos en conjuntos estructurados y listos para el análisis.
- Automatización de Pipelines: Automatizar el procesamiento de datos repetitivo