Questa pagina è disponibile anche in English, Deutsch, Español, Français, 日本語 e Português.

Huq dimezza i costi cloud e quadruplica il volume di dati

DoiT ha guidato Huq nella migrazione da AWS a Google Cloud, ricostruendo la pipeline su Dataflow e BigQuery per elaborare quasi un miliardo di record di geolocalizzazione al giorno.

The Challenge

I clienti di Huq richiedevano tempi di consegna sempre più rapidi e un accesso più frequente a dati ad alta frequenza. L'azienda doveva adattare la propria pipeline dati per rispondere alle richieste quasi in tempo reale, mantenendo la flessibilità necessaria a servire clienti con esigenze tecniche differenti.

The Solution

DoiT ha aiutato Huq a migrare la pipeline di elaborazione dati da AWS a Google Cloud sfruttando Apache Beam e Google Dataflow. La soluzione prevede l'orchestrazione dei workflow con Cloud Composer, l'archiviazione dei dati su Cloud Storage e BigQuery e l'ottimizzazione dei costi tramite reOptimize CMP e superQuery IDE.

Results

Costi cloud ridotti del 50% mentre i volumi di dati sono quadruplicati, passando da 200 a 800 milioni di data point al giorno
Architettura scalabile in grado di elaborare quasi un miliardo di record di geolocalizzazione al giorno
Capacità di scalare l'elaborazione dei dati di 100 volte senza intervenire sullo stack

Siamo un team tecnico ristretto e questo ci permette di muoverci con grande rapidità e di reagire in fretta ai cambiamenti. Quando però si adottano tecnologie nuove, serve poter contare su competenze all'avanguardia. Abbiamo scelto DoiT International soprattutto per la qualità della comunicazione e per il profondo know-how tecnico del team.
Isambard Poulson, Co-founder e CTO, Huq

Chi è Huq

Huq misura i fattori del mondo reale che incidono sulle aziende, aiutandole a costruire una visione d'insieme del proprio mercato. L'azienda produce benchmark economici e sociali a partire dai dati di mobilità, utilizzati come indicatore del flusso di persone nel retail, nei trasporti, nei centri urbani e nei luoghi di lavoro. Questa risorsa anonimizzata raccoglie grandi volumi di dati ricchi e descrittivi, che consentono analisi approfondite del comportamento dei consumatori.

Le soluzioni giuste grazie a un approccio su misura

Isambard si è rivolto a DoiT nel maggio 2020, su segnalazione di un altro cliente. DoiT ha conquistato Huq con un approccio su misura, dedicando tempo a capire le reali esigenze invece di spingere prodotti già pronti. L'onboarding è stato fluido e gli strumenti proposti si sono dimostrati particolarmente adatti alle necessità di Huq.

Una pipeline dati scalabile

DoiT ha accompagnato Huq fino al completamento della migrazione su Google Cloud, realizzando una pipeline dati che acquisisce, elabora, analizza ed esporta rapidamente quasi un miliardo di record di geolocalizzazione al giorno. La soluzione utilizza Google Cloud Composer per l'orchestrazione dei workflow, Cloud Storage per il caricamento dei dati, Dataflow per l'arricchimento e BigQuery per l'accesso da parte dei clienti.

Costi sotto controllo grazie agli strumenti di ottimizzazione

DoiT ha messo a disposizione reOptimize CMP per una visibilità più puntuale sull'utilizzo del cloud e sull'ottimizzazione dei costi. Huq ha inoltre avuto accesso a superQuery IDE, l'ambiente di sviluppo basato su AI per BigQuery che permette query più efficienti e risposte più flessibili ai clienti.

Risparmi notevoli, scalabilità senza limiti

Con il supporto di DoiT, Huq ha dimezzato la spesa cloud mentre le esigenze in termini di dati quadruplicavano. Oggi l'azienda elabora 800 milioni di data point al giorno, rispetto ai 200 milioni di prima, con costi ridotti del 50%. Il nuovo stack può scalare l'elaborazione dei dati di 100 volte senza richiedere alcuna modifica.

Scopra come DoiT aiuta i team cloud a controllare la spesa

Scopra come DoiT Cloud Intelligence aiuta i team a migliorare visibilità, governance e unit economics negli ambienti cloud.

Visita DoiT Parli con il nostro team

What they say

What I really like about DoiT's approach is that you're very hands-on and proactive. Satyam would ping me a few times a sprint, letting me know about the most current features, checking in on how things are going. When we are going through a peak time, that proactiveness makes a real difference. Satyam always comes through whenever we need support and helps us leverage the right experts to get us where we need to be.

Chiamaka Ibeme, Engineering Manager, Platform

SELECT has made important cost data readily accessible. I will often pull it up during engineering design reviews so we can quickly evaluate cost impact and projections and factor that into our design decisions.

Douglas Zickuhr, Senior Data Platform Engineer at Personio

I love clicking through SELECT to understand how our environment and workloads are evolving. I probably check it every day. It's coffee and SELECT for me every morning.

Ian Fahey, Senior Analytics Engineer at Loop

You guys have the best UI experience that I've had of any software. It's like you just read my mind where, like, oh, I wish I could click there. Oh, I can

Diana Koshy, Sr. Director of Data Engineering at Kargo

SELECT feels like exactly what Paul and I would have built if we had locked ourselves in a room for 18 months to create our ideal monitoring solution.

Devin McGee, Data Engineering Lead at Home Chef

SELECT dramatically lowers the cognitive load to understanding Snowflake costs. I'm able to sit there and easily understand what's driving the cost. Not to blow smoke up your ass, but it's just so easy to do in your platform

Blake Baggett, Head of Data Operations at Entain

One of the most helpful cost rituals we've setup from SELECT is the weekly spend digest sent to Slack. I can start high level and ensure things are in check. If not, I can very quickly drill down into specific workloads which may have driven the cost spike and remediate them before they become a bigger issue.

Michael Revelo, Manager of data and analytics engineering at ClickUp

Through SELECT's automated savings feature and deep cost visibility, we were able to instantly lower our Snowflake spend by over 40% and achieve a 20X ROI on our SELECT investment.

Skyler Chi, SVP, GTM Productivity & Excellence at Exiger

Our costs had jumped up 3X as we scaled, so we're talking about 60% savings in Snowflake spend after adopting SELECT.

Edward Mancey, GTM Lead at Synthesia

DoiT was a true partner, not a vendor. They helped us understand the problem, refine the vision, and build something production-ready far faster than we could have on our own. Their expertise, responsiveness, and commitment made all the difference.

Dr. Anish Kapur, Founder & CEO, Promptly

DoiT's Customer Success and Forward Deployed Engineering teams work very closely with us. The regular sessions with our CSM keep us focused on the right priorities, and the FDEs provide the deep technical guidance we need to validate decisions and optimize our environment. That combination has been genuinely valuable for us.

Alexander Lundberg Santos, Platform Engineer at Extenda Retail

When we started working with DoiT, we deployed Flexsave to save time and reduce complexity. We still use it today. But what really stands out is the expert support. Having someone to collaborate with on deep cloud cost topics, someone who really understands the nuances, is incredibly valuable.

Jesper Terkelsen, CTO at Monta

DoiT's Cloud Accelerator turned our AI idea into a shipped product, saving at least three months of development and delivering reliable, explainable insights our customers trust.

Scott Desgrosseilliers, CEO and co-founder, Wicked Reports

Your cloud bill shouldn't be a mystery

Let us show you what ships this week.

Book a demo