Construiré una canalización de datos de producción en GCP con BigQuery y Dataflow

Parte de la información se ha traducido automáticamente.

Pakistán

Hablo Urdu, Hindi, Inglés

63 pedidos completados

ingeniero de dataops

¡Hola! Soy Muhammad Touseef, un profesional experimentado en seguridad en la nube, Linux, AWS, DevOps, SEO, desarrollo web y marketing digital. Con más de 5 años de experiencia, me especializo en crea...
Acerca de este Servicio
Tu canal de datos es lento, costoso o se rompe sin avisar y ya estás cansado de depurarlo a medianoche.

Construyo canalizaciones en GCP de grado producción que procesan 10 TB+ diarios sin despeinarse.

¿QUÉ HE CONSTRUIDO?

Clúster de ClickHouse de 26 TB (136 mil millones de filas, consultas de 14 ms)

Ingestión en tiempo real desde Kafka a ClickHouse con Go

Canalizaciones en GCP: Cloud Function, Pub/Sub, Dataflow, BigQuery

Optimización de particiones y clúster en BigQuery (reducción de costos del 80%)

¿QUÉ OBTENDRÁS?

Canalización completa de GCP (Cloud Storage, Dataflow, BigQuery)

Computo sin servidor (Cloud Run / Cloud Functions)

Código de producción en Python + SQL

Monitoreo, manejo de errores, DLQ

Documentación y llamada de entrega de 30 minutos

¿POR QUÉ YO?

No solo escribo código, también me aseguro de la confiabilidad

Experiencia de producción, no de tutorial

Te diré qué NO hacer (te ahorra dinero)

Vamos a construir una canalización que realmente funcione. Mándame un mensaje antes de hacer el pedido.

Tecnología:

Amazon Redshift

•

Apache Cassandra

•

Apache Kafka

Experiencia:

Integración API

•

agrupación

•

Extracción de Datos

Etiquetas relacionadas