Cette page est également disponible en English, Deutsch, Español, Italiano, 日本語 et Português.

Arabesque AI multiplie par 10 son traitement de données

DoiT a piloté la migration complète vers Google Cloud, en s'appuyant sur GKE, Cloud Run et BigQuery pour réduire les coûts serveur de 75 % et libérer les chercheurs des contraintes DevOps.

The Challenge

Arabesque AI avait besoin d'une scalabilité élastique pour répondre à la demande croissante de solutions d'IA sur les marchés financiers. Son modèle d'infrastructure hybride engendrait des problèmes de capacité et de maintenance qui auraient mobilisé trop de ressources à mesure de sa croissance. Les chercheurs consacraient une part importante de leur temps à la gestion DevOps au détriment de la recherche en IA, leur cœur de métier.

The Solution

Arabesque AI a migré l'intégralité de son infrastructure vers Google Cloud en s'appuyant sur Google Kubernetes Engine pour l'orchestration, Cloud Run pour le serverless, BigQuery comme entrepôt de données scalable, ainsi que sur plusieurs autres services Google Cloud. La plateforme traite des données issues de multiples sources, dont des indicateurs ESG et des données de marché, pour alimenter son moteur d'IA propriétaire.

Results

Multiplication par 10 de la capacité de streaming et d'analyse des données
Réduction d'environ 75 % des coûts serveur grâce aux instances preemptibles et aux services à l'usage
Division par deux du temps de formation des nouveaux collaborateurs, alors même que l'équipe a doublé en moins d'un an
Réorientation de l'essentiel des ressources des opérations vers la R&D

Pour une entreprise en pleine croissance comme la nôtre, la recherche est au cœur de notre activité. Avec Google Cloud, l'essentiel de nos ressources est consacré à la recherche et seule une part minime va aux opérations. C'est l'inverse de notre situation précédente, et cela nous permet de faire évoluer notre plateforme bien plus vite.
Nikolaos Kaplis, CTO, Arabesque AI

Le défi

Arabesque AI était confronté à d'importants défis de scalabilité avec son modèle d'infrastructure hybride. Le rythme de croissance entraînait des problèmes de capacité et de maintenance sur les serveurs on-premises. Provisionner de nouveaux serveurs et les maintenir en condition opérationnelle mobilisait trop de ressources. Les chercheurs consacraient une part substantielle de leur temps à la gestion DevOps plutôt qu'à leur cœur de métier, la recherche en IA. L'articulation entre l'on-premises et le cloud s'avérait laborieuse et intenable sur le long terme.

La solution

Arabesque AI a rejoint le programme Google Cloud for Startups et migré l'intégralité de son infrastructure vers Google Cloud. Bâtie sur Kubernetes et orchestrée par Google Kubernetes Engine, la plateforme s'appuie sur Cloud Run pour alléger la charge de gestion d'infrastructure. Le système traite les données via plusieurs pipelines à l'aide de Cloud Functions et Pub/Sub, et stocke les datasets dans Cloud Storage. BigQuery joue le rôle d'entrepôt de données scalable et permet des requêtes rapides sur des pétaoctets de données, sans aucun surcoût opérationnel.

Moteur d'IA et traitement des données

Le moteur d'intelligence artificielle propriétaire d'Arabesque AI s'exécute sur des nœuds GKE, montant jusqu'à plusieurs milliers de cœurs lors de l'entraînement de nouveaux modèles, avant de redescendre ensuite. Les pools de nœuds preemptibles rendent ce processus à la fois économique et simple à gérer. Le moteur d'IA génère de nouveaux signaux à partir des informations de marché stockées dans BigQuery, démultipliant souvent le volume de données initial. La combinaison de ces signaux propriétaires et des données de marché existantes permet de construire de nouvelles stratégies d'investissement.

Partenariat avec DoiT International

Une fois la migration achevée, Arabesque AI a collaboré avec DoiT International, Google Cloud Premier Partner, pour optimiser son infrastructure. DoiT a simplifié la facturation et apporté un accompagnement précieux sur la migration vers BigQuery, avec deux jours de travail économisés à la clé. Ce partenariat ouvre également l'accès à un support complémentaire et à une expertise d'ingénierie au moment opportun.

Résultats et impact business

La migration a permis à Arabesque AI de recentrer ses équipes sur les objectifs de recherche plutôt que sur les opérations. La capacité de streaming et d'analyse des données a été multipliée par 10, tandis que les coûts serveur ont baissé d'environ 75 %. L'entreprise a plus que doublé en moins d'un an, tout en divisant par deux son temps de formation. L'usage de technologies open source sur Google Cloud facilite par ailleurs le recrutement et l'intégration de nouveaux talents dans un environnement apprécié des développeurs.

Innovations à venir

Arabesque AI développe Knowledge Graph, un projet visant à extraire des enseignements à partir d'informations non structurées telles que les flux d'actualité et de médias sociaux. Exécuté sur Dataflow, il extraira automatiquement les informations pertinentes des sources textuelles. L'objectif : identifier au sein de textes non structurés les entreprises, relations et signaux nécessaires à l'amélioration des prédictions, en s'appuyant sur des algorithmes de traitement du langage naturel pour évoluer vers une véritable compréhension du langage.

Découvrez comment DoiT aide les équipes cloud à maîtriser leurs dépenses

Explorez comment DoiT Cloud Intelligence aide les équipes à gagner en visibilité, en gouvernance et en unit economics sur leurs environnements cloud.

Découvrir DoiT Contacter notre équipe

What they say

What I really like about DoiT's approach is that you're very hands-on and proactive. Satyam would ping me a few times a sprint, letting me know about the most current features, checking in on how things are going. When we are going through a peak time, that proactiveness makes a real difference. Satyam always comes through whenever we need support and helps us leverage the right experts to get us where we need to be.

Chiamaka Ibeme, Engineering Manager, Platform

SELECT has made important cost data readily accessible. I will often pull it up during engineering design reviews so we can quickly evaluate cost impact and projections and factor that into our design decisions.

Douglas Zickuhr, Senior Data Platform Engineer at Personio

I love clicking through SELECT to understand how our environment and workloads are evolving. I probably check it every day. It's coffee and SELECT for me every morning.

Ian Fahey, Senior Analytics Engineer at Loop

You guys have the best UI experience that I've had of any software. It's like you just read my mind where, like, oh, I wish I could click there. Oh, I can

Diana Koshy, Sr. Director of Data Engineering at Kargo

SELECT feels like exactly what Paul and I would have built if we had locked ourselves in a room for 18 months to create our ideal monitoring solution.

Devin McGee, Data Engineering Lead at Home Chef

SELECT dramatically lowers the cognitive load to understanding Snowflake costs. I'm able to sit there and easily understand what's driving the cost. Not to blow smoke up your ass, but it's just so easy to do in your platform

Blake Baggett, Head of Data Operations at Entain

One of the most helpful cost rituals we've setup from SELECT is the weekly spend digest sent to Slack. I can start high level and ensure things are in check. If not, I can very quickly drill down into specific workloads which may have driven the cost spike and remediate them before they become a bigger issue.

Michael Revelo, Manager of data and analytics engineering at ClickUp

Through SELECT's automated savings feature and deep cost visibility, we were able to instantly lower our Snowflake spend by over 40% and achieve a 20X ROI on our SELECT investment.

Skyler Chi, SVP, GTM Productivity & Excellence at Exiger

Our costs had jumped up 3X as we scaled, so we're talking about 60% savings in Snowflake spend after adopting SELECT.

Edward Mancey, GTM Lead at Synthesia

DoiT was a true partner, not a vendor. They helped us understand the problem, refine the vision, and build something production-ready far faster than we could have on our own. Their expertise, responsiveness, and commitment made all the difference.

Dr. Anish Kapur, Founder & CEO, Promptly

DoiT's Customer Success and Forward Deployed Engineering teams work very closely with us. The regular sessions with our CSM keep us focused on the right priorities, and the FDEs provide the deep technical guidance we need to validate decisions and optimize our environment. That combination has been genuinely valuable for us.

Alexander Lundberg Santos, Platform Engineer at Extenda Retail

Every customer has unique usage patterns. Manual resource optimization simply didn't scale—we needed automation to ensure every customer, regardless of size, had right-sized infrastructure without consuming our team's capacity.

Brad Quinn, Lead Platform Engineer, PlayHQ

SNCF

PerfectScale allowed us to grow capacity without growing cost. We effectively absorbed 30% more usage for free.

Thomas Comtet, Senior Staff Engineer, SNCF

Your cloud bill shouldn't be a mystery

Let us show you what ships this week.

Book a demo