Crearé validaciones de datos y controles de calidad usando pyspark, snowflake y aws

Parte de la información se ha traducido automáticamente.
Sumit

India

Hablo Inglés

26 pedidos completados

Ingeniería de datos, análisis de datos, desarrollo web, automatización, desarrollo de IA

Tengo 11 años de amplia experiencia en programación analítica de datos, automatización, marco de calidad de datos, REST APIs, almacenamiento de datos, ingeniería en la nube y desarrollo web. Tengo exp...
Leer más

Nivel 1

Ha cumplido determinados criterios de rendimiento y muestra un gran potencial en la plataforma.

Acerca de este Servicio

Los datos malos conducen a decisiones malas. Te ayudo a detectar, validar y corregir problemas de datos creando marcos de validación de datos escalables y listos para producción usando herramientas modernas de ingeniería de datos.

Lo que haré

  • Validación de datos y controles de calidad
  • Conciliación de datos fuente y destino
  • Validación de conteo de filas, esquema y tipos de datos
  • Controles de null, duplicados y anomalías
  • Validaciones de reglas de negocio
  • Pipeline de validación automatizados
  • Informes detallados de validación y registros

️ Pila tecnológica

  • PySpark validación de datos a gran escala
  • Python reglas personalizadas y automatización
  • Snowflake validación a nivel de warehouse
  • SQL conciliación y controles analíticos
  • AWS S3, Glue, EC2, Lambda, CloudWatch, Redshift, RDS, Secrets Manager
Leer más
build data validation and quality checks using pyspark snowflake and aws
Pantalla completa
build data validation and quality checks using pyspark snowflake and aws

Experiencia:

Automatizaciones

•

Big data

•

etl

•

Normalización

•

SQL

•

NoSQL

Tecnología:

Amazon Redshift

•

Apache Cassandra

•

Python

•

SQL

•

Snowflake

+1 más

Otros servicios de Ingeniería de datos que ofrezco

Etiquetas relacionadas