Vor dem kommerziellen Launch von Spectra musste Climate X seine AWS-Architektur modernisieren, um datenintensive Workloads und ein schnelles Kundenwachstum tragen zu können. Die bestehende Demo-Architektur stieß bei der Verarbeitung von CSV-Dateien an ihre Grenzen und bot weder die Resilienz noch die Skalierbarkeit, die für den kommerziellen Betrieb nötig waren.
DoiT hat einen AWS Well-Architected Review durchgeführt und gemeinsam mit Climate X die Architektur neu aufgebaut. Dazu gehörten der Wechsel von CSV-Dateien zu flexibleren Formaten, separate Module für unterschiedliche Datenverarbeitungsfunktionen, die Migration auf Amazon Aurora sowie der Wechsel von Amazon EBS zu Amazon FSx for Lustre für eine leistungsfähigere Datenspeicherung.
Die neue Architektur hat es uns überhaupt erst ermöglicht, Kunden zu gewinnen – sie bot die Resilienz, Verfügbarkeit und Skalierbarkeit für den kommerziellen Betrieb und damit die Grundlage, um Verträge abzuschließen.
Andrew Ellam, Vice President of Technology, Climate X
Climate X wurde 2020 gegründet und betreibt mit Spectra eine Analytics-Plattform, mit der Unternehmen standortspezifische Klimarisiken und deren finanzielle Auswirkungen bewerten können. Vor dem Launch des kommerziellen Angebots war klar: Die Architektur auf AWS musste neu aufgesetzt werden, denn die erste Version war lediglich eine Demo. AWS empfahl Climate X den AWS-Partner DoiT mit ausgewiesener Expertise in Cloud-Architektur und FinOps, um einen AWS Well-Architected Review der bestehenden Infrastruktur durchzuführen.
Der Review von DoiT deckte gleich mehrere Verbesserungspotenziale in der Architektur von Climate X auf. Ein zentraler Knackpunkt: Die Verarbeitung von Ein- und Ausgabedaten über CSV-Dateien schränkte sowohl die Wahl der Dateiformate als auch die architektonischen Optionen stark ein. Das Redesign sah eigene Services für unterschiedliche Arten der Datenverarbeitung vor – mit getrennten Modulen für Client-Authentifizierung, Verarbeitung von Kundenanfragen, Load-Balancing und das Auslesen geospatialer Daten.
Climate X migrierte von einer einzelnen großen Datenbankinstanz auf Amazon Aurora – mit integrierter Sicherheit, kontinuierlichen Backups und Serverless Compute. Das sorgt für eine deutlich reibungslosere Skalierung. DoiT half außerdem dabei, Amazon EBS durch Amazon FSx for Lustre zu ersetzen und so vollständig verwalteten Shared Storage auf Basis eines Hochleistungsdateisystems bereitzustellen.
Bis Mitte 2022 verfügte Climate X über eine modernisierte AWS-Architektur, die den Rollout von Spectra an zahlende Kunden trug. Zunächst startete die Plattform in UK, danach folgte die Expansion nach Europa, in die USA, nach Kanada und in den Asien-Pazifik-Raum. Die neue Architektur lieferte die Resilienz, Verfügbarkeit und Skalierbarkeit, die für den kommerziellen Betrieb und den Abschluss von Kundenverträgen erforderlich waren.
Dank der besseren Skalierbarkeit konnte Climate X die Granularität seiner geografischen Daten deutlich erhöhen. Daten zu Küstenüberflutungen liegen jetzt in einer Auflösung von 30×30 Metern vor – statt zuvor 90×90 Meter – und damit 9-mal mehr Daten pro Kachel. Das Forschungsteam setzt inzwischen AWS ParallelCluster ein, um High-Performance-Computing-Cluster bereitzustellen, verarbeitet mehr als 2 Billionen Datenpunkte und zahlt dabei nur für die tatsächlich benötigte Rechenleistung.
Climate X arbeitet weiterhin eng mit DoiT zusammen und rechnet damit, dass das aktuelle Setup die prognostizierte Nachfrage für die nächsten 18–24 Monate problemlos trägt. DoiT hat zudem dabei geholfen, eine enge Beziehung zu AWS aufzubauen – mit zusätzlichen Vorteilen wie einem AWS Climate Grant. Die Partnerschaft schafft spürbaren Geschäftswert durch Kostenoptimierung und architektonische Verbesserungen.
Erfahren Sie, wie Cloud Intelligence™ Teams dabei unterstützt, Transparenz, Governance und Unit Economics in Cloud-Umgebungen zu verbessern.
“PerfectScale gives us the confidence to automate Kubernetes optimization while letting our engineers focus on building what matters.”
Josh Zarrabi, Infrastructure Engineer
“Without PerfectScale by DoiT, I don't know how we would do it. We'd have to have twice the number of people on my team to stay on top of it. With PerfectScale, we can focus on the more strategic issues.”
David Adkins, Director of Software and Platform Engineering
Connecting IBM and AWS privately was the piece we needed to get right, and we wanted to move faster on it than we could on our own. DoiT worked through the options with us, found the subnet overlap that was breaking the routing, and made it stable. That unblocked everything else.
DevOps Lead, Software Projects
Attribute™'s platform is truly unique. We now have crystal-clear visibility into our cloud spend at the workload and tenant level, and that insight has already led to actionable savings and powerful insights as we further scale our service.
Paul White, VP of Engineering, Shasta Cloud
We have worked with DoiT for many years, and there has been an increasing number of capabilities and features in DoiT Cloud Intelligence. We've embedded features such as Cloud Analytics and Reports in our own FinOps processes, it's become core to what we do.
Martin Lee, Director of Operations
DoiT gave us the confidence to move from experimentation to production. They helped us understand the right way to build AI for the real world.
Milad Rezazadeh, CTO
Attribute™'s cost grouping technology took our cost visibility and allocation to a whole new level. Now, our teams are fully accountable for their budgets, significantly improving our cloud efficiency and helping us minimize unnecessary costs.
Eli Zilbershtein, Head of DevOps, Hippo
You can't tag a customer in a multi-tenant environment. Attribute™ finally shows us what each customer costs and what's driving those costs.
Omri Cohen, Director of Engineering, Platform
Attribute™'s data is truly unmatched. No other solution on the market could deliver the precise customer cost and usage profiles we needed in such a complex infrastructure. Within weeks, the data from Attribute™ transformed our understanding of cost structures, influencing key strategic decisions in pricing, renegotiations, and market positioning.
Jonathan Langer, COO, Claroty
Attribute™ simplified tracking customer costs in our multi-tenant environments. Customer cost measurement is now clear and standardized, and finance gets the business context they need. Integration was quick and required no changes.
Kfir Lippmann, CFO, Salt Security
Attribute™ translates complex cloud bills into actionable, business-centric insights that empower our engineering teams to take true ownership of their costs.
Balamurugan Mohandossgandhi, Head of IT and Infrastructure, PropertyGuru
This has let us get a better idea of what our cost of goods sold really is. It's not every day you come across something that delivers value as quickly as yours did for us. I was seeing useful insights inside the POC, and we had only deployed it to a couple of real clusters.
Jason Moore, Principal DevOps Engineer, Accrete AI
Eliminating the need to tag thousands of resources has freed up my team and we've invested our efforts in enhancing our platform significantly.
Ziv Sivan, VP of Engineering
Let us show you what ships this week.
