Die wichtigsten Themen
DAGs professionell in Python coden
Komplexe Abhängigkeiten steuern
Custom Operators und Plugins bauen
Skalierung mit Celery und K8s
Monitoring und Alerting einrichten
Best Practices für Production
Überblick Verabschieden Sie sich von unübersichtlichen Cron-Jobs und manuellen Skripten. Apache Airflow hat sich als der Industriestandard für die programmatische Orchestrierung komplexer Datenflüsse etabliert. In diesem...
Die Themen Architektur und Core-Konzepte Komponenten: Scheduler, Webserver, Metastore und Worker · Lebenszyklus eines DAGs (Directed Acyclic Graph) · Installation und Konfiguration der Entwicklungsumgebung...
- Architektur und Core-Konzepte
- Komponenten: Scheduler, Webserver, Metastore und Worker
- Lebenszyklus eines DAGs (Directed Acyclic Graph)
- Installation und Konfiguration der Entwicklungsumgebung
- Airflow CLI und Navigation im Web UI
- DAG Design und Implementation
- Definition von Workflows als Python-Code
- Einsatz von Standard-Operatoren (Bash, Python, SQL)
- Abhängigkeiten und Task-Reihenfolge definieren
- Scheduling-Intervalle und Backfilling-Strategien
- Fortgeschrittene Workflow-Steuerung
- Datenaustausch zwischen Tasks mittels XComs
- Verzweigungen und bedingte Ausführung (Branching)
- Dynamische DAG-Generierung für variable Workloads
- Trigger Rules und SLA-Definitionen
- Erweiterbarkeit und Customizing
- Entwicklung eigener Operatoren und Sensoren
- Hooks für die Anbindung externer Systeme (Cloud, DBs)
- Plugins zur Erweiterung der Funktionalität
- Best Practices für wiederverwendbaren Code
- Production Engineering und Deployment
- Executor-Modelle im Vergleich (Local, Celery, Kubernetes)
- Monitoring, Logging und Alerting-Strategien
- Fehlerbehandlung, Retries und Timeouts
- Unit Testing von DAGs und CI/CD Integration
Wer hier richtig ist
- Data Engineers und Data Scientists
- DevOps-Spezialistinnen und Backend-Entwickler
- Softwarearchitektinnen im Big Data Umfeld
- Für alle, die Datenprozesse automatisieren, überwachen und skalierbar gestalten wollen.
Das lernst du
Nach diesem Seminar sind die Teilnehmerinnen und Teilnehmer fähig, komplexe Data Pipelines mittels Apache Airflow zu konzipieren und zu implementieren. Sie verstehen die interne Architektur und können entscheiden, welcher Executor für welches Szenario geeignet ist. Zudem beherrschen sie Techniken zur Fehlerbehandlung und zum Monitoring, um einen stabilen Produktionsbetrieb zu gewährleisten.
So arbeiten wir
Das Seminar setzt auf eine intensive Mischung aus technischem Deep-Dive und praktischer Anwendung. Nach der theoretischen Einführung in die Konzepte setzen die Teilnehmerinnen und Teilnehmer das Gelernte direkt in einer bereitgestellten Lab-Umgebung um. Wir entwickeln sukzessive komplexere Pipelines, schreiben eigenen Code für Operatoren und simulieren Fehlerfälle, um das Debugging zu trainieren.
Empfohlene Vorkenntnisse
- Solide Kenntnisse in der Programmiersprache Python sind zwingend erforderlich.
- Grundlegendes Verständnis von SQL und allgemeinen Datenbankkonzepten wird vorausgesetzt.
Dein Fahrplan
Organisatorisches
Lernformate
Unsere Seminare bieten dir maximale Flexibilität: Du kannst zwischen Live-Online und Vor Ort in unseren modernen Schulungszentren im D-A-CH Raum wählen. Beide Formate garantieren dir die gleiche hohe Qualität und interaktive Lernerfahrung.
Schulungsarten
Wir bieten dir verschiedene Schulungsarten: Offene Seminare, Firmenseminare für Teams und Inhouse-Schulungen direkt bei dir vor Ort. So findest du genau das Format, das zu deinen Bedürfnissen passt.
Uhrzeiten
9:00-16:00 Uhr
Aktuelle Software
In unseren offenen Kursen arbeiten wir mit der aktuellsten Software-Version. So lernst du direkt mit den Tools und Features, die du auch in deinem Arbeitsalltag verwendest - praxisnah und zukunftsorientiert. Bei Inhouse- und Firmenschulungen bestimmt ihr die Version.
Deine Vorteile
Zufriedenheitsgarantie
Wir sind von unserer Qualität überzeugt. Sollte ein Training einmal nicht deinen Erwartungen entsprechen, bieten wir dir an, den Kurs kostenlos zu wiederholen oder ein anderes Training zu besuchen. Ohne Risiko, ohne Diskussion.
Inklusivleistungen
Deine Teilnahme beinhaltet: Schulungsmaterial, Zertifikat, Verpflegung (bei Präsenzveranstaltungen) und persönliche Betreuung durch unsere Trainer und unser Orga-Team. Alles aus einer Hand - keine versteckten Kosten.
Lernen von Experten
Unsere Trainer sind zertifizierte und erfahrene Profis mit jahrelanger Berufserfahrung. Sie vermitteln dir in den Kursen nicht nur theoretisches Wissen, sondern teilen ihre Erfahrungen aus realen Projekten und helfen dir, das Gelernte direkt in deiner täglichen Arbeit anzuwenden. Das ist kein Werbeversprechen, sondern unser Anspruch. Am besten siehst du das in unseren Bewertungen, z.B. auch bei Google.
Keine Vorkasse
Du zahlst erst nach dem Seminar. Keine Vorkasse, keine Vorauszahlung - so kannst du sicher sein, dass du nur für das bezahlst, was du auch wirklich erhalten hast. Die Rechnung erhältst du erst nach Kursbeginn.
Max. 8 Teilnehmende
Wir setzen auf kleine Gruppen, damit du die Aufmerksamkeit bekommst, die du verdienst. So haben wir mehr Zeit für deine individuellen Fragen und können gezielt auf deine Bedürfnisse eingehen.
Termine & Buchung
Vor Ort
Online
Nicht der passende Termin dabei?
Wir finden eine Lösung: anderer Termin, mehrere Teilnehmer, Inhouse-Schulung oder individuelle Beratung.
Lieber gleich das ganze Team schulen?
Diese Schulung gibt es auch exklusiv für dein Unternehmen, bei euch vor Ort, an unseren Standorten oder Live-Online. Inhalte und Termine nach Maß.
Inhouse-Schulung
Wir kommen zu euch: diese Schulung maßgeschneidert in euren Räumen, für Unternehmen und Behörden.
- Inhalte exakt auf euch zugeschnitten
- Termine nach euren Bedürfnissen
- Günstiger ab mehreren Teilnehmern
- Vertraute Umgebung, kein Reiseaufwand
Firmen-Seminar
Exklusiv für dein Team an einem unserer Standorte oder Live-Online, individuell angepasst.
- Geschlossene Gruppe aus eurem Haus
- Individuelle Terminplanung
- An unseren Standorten oder Live-Online
- Angepasste Inhalte
Fragen und Antworten zu Apache Airflow: Skalierbare Data Pipelines
Benötige ich Vorkenntnisse in Docker oder Kubernetes?
Wird Airflow 2.x verwendet?
Weitere häufig gestellte Fragen und Antworten findest du in den FAQs .
Ähnliche Kurse
dbt-Training: Analytics-Engineering-Kurs
Google Cloud Associate Training: Data Practitioner mit BigQuery
Data Science und Machine Learning - Einführung
Python Data Science Einstieg mit Pandas, Numpy & Co.
Big Data Analytics für militärische Aufklärung
Unser Qualitätsversprechen: Wissen, das in der Praxis funktioniert
Aus der Praxis für die Praxis
Schluss mit theoretischem Ballast. Wir trainieren dich für reale IT-Herausforderungen, nicht für Multiple-Choice-Tests. Unsere Trainer vermitteln dir genau das Wissen, das am nächsten Montagmorgen im Job wirklich funktioniert.
Individuell statt "Schema F"
Deine Fragen passen nicht ins Standard-Skript? Bei uns schon. Wir verzichten auf starre Lehrpläne und geben deinen konkreten Projekt-Fragen Raum. Unsere Trainer passen die Inhalte flexibel an das an, was dich und dein Team aktuell weiterbringt.
Maximale Freiheit: Remote oder vor Ort
Lerne so, wie es in deinen Alltag passt - ohne Reise-Stress und Zeitverlust. Egal ob remote, hybrid oder präsent vor Ort: Wir garantieren dir ein nahtloses und effektives Lernerlebnis, egal von wo du dich zuschaltest.
Mit Zufriedenheitsgarantie
Wir sind von unserer Qualität überzeugt - und wollen, dass du es auch bist. Sollte ein Training einmal nicht deinen Erwartungen entsprechen, bieten wir dir an, den Kurs kostenlos zu wiederholen oder ein anderes Training zu besuchen. Ohne Risiko, ohne Diskussion.
Über 20.000 Unternehmen und Behörden vertrauen auf uns