The Challenge
Datonicsは、大規模データセットを迅速かつコスト効率よく処理する点で限界に直面していました。クエリは処理に数時間かかるか、途中で失敗することも多く、BigQueryのコストは月額20,000ドルを超えていました。プログラマティック広告キャンペーンに不可欠なデータ精度を維持しながら、インフラを最適化しユニットエコノミクスを改善することが急務でした。
The Solution
DoiTのCloud Data Architectは、BigQueryのパフォーマンスを最適化するためHyperLogLog(HLL)アルゴリズムを導入しました。このデータ構造により、大規模データセットでもメモリを過剰に消費することなく高精度な推定が可能になります。DoiTはコンサルティング型のガイダンスを通じて複数のPoCを開発し、扱いやすい単位に分割して段階的に組み込みました。
Results
- クエリ処理時間を数時間から7秒に短縮(99%改善)
- BigQueryスロット使用量を2,000から132へ削減(93%減)
- クエリあたりのスキャンデータ量を99%削減
- 月額インフラコストを数千ドル規模で削減
- アナリストの生産性とデリバリー速度が向上
DoiTは、自分たちで学び調べるための方向性を示してくれる一方で、どのソリューションが最も適しているかについて明確な意見もくれます。このバランスが実にありがたいですね。
Adi Pinhasi, Datonics CTO
Datonicsについて
Datonicsは、検索データおよびターゲティング型デジタル広告データの集約・配信を手がける、世界有数の企業です。ターゲティング型インターネット広告のパイオニアであるAlmondnetの子会社として2011年に設立され、主力のデータ分析プラットフォームを通じて、世界中の企業のプログラマティック広告キャンペーンの立案と配信を支えています。
課題
Datonicsは、大規模データセットの処理で深刻なスケーラビリティの課題を抱えていました。クエリは数時間かかるか途中で失敗することもあり、オンデマンド料金プランでのBigQueryコストは月額20,000ドルを超過。予測しづらいコスト増、データの重複、複数ソースからのデータ統合の難しさが、インサイト獲得までの時間と顧客満足度に影を落としていました。
ソリューション
DoiTのCloud Data Architectを務めるElad Shaabiが包括的な調査を行い、BigQueryのパフォーマンスを最適化するためHyperLogLog(HLL)アルゴリズムを導入しました。このデータ構造により、大規模データセットでもメモリを過剰に消費することなく高精度な推定が可能になります。DoiTはコンサルティング型のガイダンスを提供しつつ複数のPoCを開発し、導入しやすいよう段階的なパッケージに分けて組み込みを進めました。
成果
HLLの導入によりクエリパフォーマンスは劇的に向上し、処理時間は数時間から7秒へと短縮されました。スロット使用量は2,000から132へ減少、クエリあたりのスキャンデータ量も99%削減。これらの最適化によって月額数千ドルのコスト削減を実現し、高額なインフラ増強も先送りでき、アナリストの生産性とデリバリー速度も大きく改善しました。
今後の展望
Datonicsは、DoiTとの10年にわたるパートナーシップを土台に、成長と新市場への展開を進めています。HLL導入による効率化で、これまで予算やインフラの制約から扱えなかった規模のデータも管理できるようになり、予測可能なユニットエコノミクスのもとで自信を持ってスケールできる体制が整いました。
クラウド支出のコントロールを、DoiTで
DoiT Cloud Intelligenceが、クラウド環境全体での可視性・ガバナンス・ユニットエコノミクスの向上をどう支援するかをご紹介します。
More customer stories
SSDの無駄を削減、AI開発を加速するExtenda Retail
Wicked Reports、GenAIを3か月早くリリース
- 3 months saved
- DoiTのCloud Accelerator活用による開発期間短縮
- 25% faster
- 社内見積もりと比較したプロトタイプから本番までの期間
- $0 additional spend
- AWSクレジットとDoiTの最適化により、プロトタイプ構築中の追加インフラ費用ゼロ
DaySmart、90日で AI 機能をリリース
- 90 days
- POC から本番展開まで
- 90 days
- 社内エンジニア工数ゼロで POC から本番展開へ
- 6x
- Engineers 相当のリソースを削減
VivaticketがAWS環境の構築を3日から15分へ短縮
- 15min
- 環境構築にかかる時間
- 15min
- 環境構築の所要時間(従来は3日)
- 20min
- イミュータブルモードでのアプリケーションデプロイ
コストを抑えながらSOC Auto-Focusをスケール
What they say
What I really like about DoiT's approach is that you're very hands-on and proactive. Satyam would ping me a few times a sprint, letting me know about the most current features, checking in on how things are going. When we are going through a peak time, that proactiveness makes a real difference. Satyam always comes through whenever we need support and helps us leverage the right experts to get us where we need to be.
Chiamaka Ibeme, Engineering Manager, Platform
SELECT has made important cost data readily accessible. I will often pull it up during engineering design reviews so we can quickly evaluate cost impact and projections and factor that into our design decisions.
Douglas Zickuhr, Senior Data Platform Engineer at Personio
I love clicking through SELECT to understand how our environment and workloads are evolving. I probably check it every day. It's coffee and SELECT for me every morning.
Ian Fahey, Senior Analytics Engineer at Loop
You guys have the best UI experience that I've had of any software. It's like you just read my mind where, like, oh, I wish I could click there. Oh, I can
Diana Koshy, Sr. Director of Data Engineering at Kargo
SELECT feels like exactly what Paul and I would have built if we had locked ourselves in a room for 18 months to create our ideal monitoring solution.
Devin McGee, Data Engineering Lead at Home Chef
SELECT dramatically lowers the cognitive load to understanding Snowflake costs. I'm able to sit there and easily understand what's driving the cost. Not to blow smoke up your ass, but it's just so easy to do in your platform
Blake Baggett, Head of Data Operations at Entain
One of the most helpful cost rituals we've setup from SELECT is the weekly spend digest sent to Slack. I can start high level and ensure things are in check. If not, I can very quickly drill down into specific workloads which may have driven the cost spike and remediate them before they become a bigger issue.
Michael Revelo, Manager of data and analytics engineering at ClickUp
Through SELECT's automated savings feature and deep cost visibility, we were able to instantly lower our Snowflake spend by over 40% and achieve a 20X ROI on our SELECT investment.
Skyler Chi, SVP, GTM Productivity & Excellence at Exiger
Our costs had jumped up 3X as we scaled, so we're talking about 60% savings in Snowflake spend after adopting SELECT.
Edward Mancey, GTM Lead at Synthesia
DoiT was a true partner, not a vendor. They helped us understand the problem, refine the vision, and build something production-ready far faster than we could have on our own. Their expertise, responsiveness, and commitment made all the difference.
Dr. Anish Kapur, Founder & CEO, Promptly
DoiT's Customer Success and Forward Deployed Engineering teams work very closely with us. The regular sessions with our CSM keep us focused on the right priorities, and the FDEs provide the deep technical guidance we need to validate decisions and optimize our environment. That combination has been genuinely valuable for us.
Alexander Lundberg Santos, Platform Engineer at Extenda Retail
Every customer has unique usage patterns. Manual resource optimization simply didn't scale—we needed automation to ensure every customer, regardless of size, had right-sized infrastructure without consuming our team's capacity.
Brad Quinn, Lead Platform Engineer, PlayHQ
PerfectScale allowed us to grow capacity without growing cost. We effectively absorbed 30% more usage for free.
Thomas Comtet, Senior Staff Engineer, SNCF
Your cloud bill shouldn't be a mystery
Let us show you what ships this week.

