Seminar / Training
Lernziele
- Airflow-Architektur im Betrieb verstehen und passende Executor-/Deployment-Entscheidungen treffen
- Stabilität und Performance über Konfiguration, Ressourcensteuerung und Observability verbessern
- Typische Fehlerbilder systematisch analysieren und Troubleshooting-Playbooks ableiten
- Upgrades, Wartung und Backup/Restore als wiederholbaren Prozess planen
Zielgruppe
- Plattform-Teams und DevOps/SRE mit Airflow-Betriebsverantwortung
- Technische Leads, die Airflow produktiv einführen oder konsolidieren
- Teams, die Stabilitäts- und Performance-Probleme nachhaltig lösen möchten
Voraussetzungen
- Airflow-Basiswissen (DAGs, UI, Scheduling)
- Linux-/Container-Grundlagen; Basiswissen zu Netzwerken und Datenbanken ist vorteilhaft
Inhalte
- Komponenten im Betrieb: Scheduler, Webserver, Worker, Triggerer, Metadatenbank
- Executor- und Skalierungsmodelle (Überblick): Local, Celery, Kubernetes – Auswahlkriterien
- Konfiguration und Kapazitätssteuerung:
- Parallelität, Concurrency, Pools, Queues, Prioritäten
- Scheduler-Verhalten, DAG-Parsing, Serialization, Performance-Hebel
- Logging- und Metrik-Konzept:
- Log-Routing, Log-Retention, strukturierte Log-Auswertung
- Metriken, Heartbeats, SLA-/Failure-Indikatoren, Alerting-Strategien
- Stabilität in Produktion:
- Retries/Timeouts, Rate Limits, Idempotenz, Schutz vor „Run-Avalanches“
- Backfills und Catchup: kontrollierte Nachverarbeitung ohne Überlast
- Wartung:
- Upgrade-Planung, Migrationen, Rollback-Prinzipien
- Backup/Restore, Datenbankpflege, Housekeeping
- Troubleshooting:
- Scheduler-Lag, Task-Stalls, Deadlocks, Queue-Probleme, Worker-Ausfälle
- Ursachenanalyse anhand Logs/Metriken und reproduzierbaren Szenarien
Praxisübungen
- Schritt-für-Schritt eine betriebsnahe Beispielumgebung aufsetzen und Basis-Checks durchführen
- Monitoring-Grundlage definieren: wichtigste Metriken und Alarmregeln ableiten
- Performance-Lab: Concurrency/Pools/Queues so konfigurieren, dass Durchsatz und Stabilität ausbalanciert sind
- Troubleshooting-Drills: typische Störungen nachstellen, Diagnosepfad dokumentieren, Fixes ableiten
- Wartungsplan: Upgrade-Checkliste und Backup/Restore-Prozess als wiederholbare Routine
Anschluss
Für Kubernetes-basierte Plattformen baut das Kubernetes-Seminar auf diesen Inhalten auf und vertieft Deployment, Autoscaling, Security-Basics und Observability in Clusterumgebungen.
Fachbereichsleiter / Leiter der Trainer / Ihre Ansprechpartner
-
Lucas Beich
Telefon: + 49 (221) 74740055
E-Mail: lucas.beich@seminar-experts.de -
Paul Goldschmidt
Telefon: + 49 (221) 74740055
E-Mail: paul.goldschmidt@seminar-experts.de
Seminardetails
| Dauer: | 3 Tage ca. 6 h/Tag, Beginn 1. Tag: 10:00 Uhr, weitere Tage 09:00 Uhr |
| Preis: |
Öffentlich oder Live Stream: € 1.797 zzgl. MwSt. Inhaus: € 5.100 zzgl. MwSt. |
| Teilnehmeranzahl: | min. 2 - max. 8 |
| Teilnehmer: | Plattform-Teams, DevOps/SRE, Airflow-Admins, Data Engineering Leads mit Betriebsverantwortung |
| Voraussetzungen: | Airflow-Grundlagen; grundlegende Linux- und Container-Kenntnisse. Verständnis für Datenbanken (z. B. PostgreSQL) ist vorteilhaft. |
| Standorte: | Stream Live, Inhaus/Firmenseminar, Berlin, Bremen, Darmstadt, Dresden, Erfurt, Essen, Flensburg, Frankfurt, Freiburg, Friedrichshafen, Hamburg, Hamm, Hannover, Jena, Kassel, Köln, Konstanz, Leipzig, Luxemburg, Magdeburg, Mainz, München, Münster, Nürnberg, Paderborn, Potsdam, Regensburg, Rostock, Stuttgart, Trier, Ulm, Wuppertal, Würzburg |
| Methoden: | Vortrag, Demonstrationen, praktische Übungen am System |
| Seminararten: | Öffentlich, Webinar, Inhaus, Workshop - Alle Seminare mit Trainer vor Ort, Webinar nur wenn ausdrücklich gewünscht |
| Durchführungsgarantie: | ja, ab 2 Teilnehmern |
| Sprache: | Deutsch - bei Firmenseminaren ist auch Englisch möglich |
| Seminarunterlage: | Dokumentation auf Datenträger oder als Download |
| Teilnahmezertifikat: | ja, selbstverständlich |
| Verpflegung: | Kalt- / Warmgetränke, Mittagessen (wahlweise vegetarisch) |
| Support: | 3 Anrufe im Seminarpreis enthalten |
| Barrierefreier Zugang: | an den meisten Standorten verfügbar |
| Weitere Informationen unter + 49 (221) 74740055 |
Seminartermine
Die Ergebnissliste kann durch Anklicken der Überschrift neu sortiert werden.
