Lernen Sie die Grundlagen von Apache Airflow und wie Sie es mit Google Cloud Composer betreiben – einem vollständig verwalteten Orchestrierungsdienst für Workflows, die mehrere Cloud-Anbieter und On-Premises-Rechenzentren umfassen können.
Bei DoiT International begleiten wir unsere Kunden auf ihrem Weg in die Cloud. Eine typische Hürde dabei: Ein bestimmter Cloud-Dienst soll eingesetzt werden, doch die nötige Erfahrung fehlt – und die Lernkurve ist steil.
Google Cloud Composer ist genau so ein Dienst mit einer spürbar steilen Lernkurve.
Cloud Composer ist ein vollständig verwalteter Orchestrierungsdienst für Workflows, die sich über mehrere Cloud-Anbieter und On-Premises-Rechenzentren erstrecken können. Cloud Composer basiert auf Apache Airflow und setzt für das Scripting auf Python.
Wer bei null anfängt, verbringt erfahrungsgemäß viel Zeit damit, zwischen der Dokumentation von Cloud Composer und Apache Airflow hin- und herzuspringen.
Um den Einstieg in Cloud Composer zu erleichtern, habe ich ein Mini-Buch geschrieben – einen kompakten Kurs zu den Grundlagen von Apache Airflow und zum Betrieb mit Cloud Composer auf der Google Cloud Platform.
Das Mini-Buch
Sie können mein Mini-Buch hier lesen:
📘 Getting started with Apache Airflow on Cloud Composer
Inhalte des Mini-Buchs:
- Apache Airflow und seine Konzepte
- Google Cloud Composer verstehen
- Airflow einrichten
- Airflow-Pipelines bauen
- DAGs schreiben
- Custom Plugins schreiben
- Airflow testen
- Continuous Integration (CI) und Continuous Delivery (CD)
Das Mini-Buch ist Open Source (MIT) und auf GitHub verfügbar. Beiträge sind ausdrücklich willkommen. Erstellen Sie gerne einen Pull Request auf GitHub oder öffnen Sie ein neues Issue mit Anregungen, Kommentaren oder Fragen.
Ich hoffe, dieses Mini-Buch begleitet Sie auf Ihrem Weg mit Cloud Composer und der Cloud.
Bleiben Sie dran – weitere Updates folgen!