Seminar / Training
Dieses Seminar behandelt das Design von Oozie-Scheduling jenseits einzelner XML-Dateien. Im Mittelpunkt stehen fachliche Zeitlogik, Datenverfügbarkeit, Partitionen, Nachläufe, doppelte Verarbeitung, verspätete Lieferungen und kontrollierte Wiederholung. Schlechte Scheduler-Logik ist wie schlechte Buchführung: irgendwann findet sie einen Weg, teuer zu werden.
Inhaltsübersicht
- Fachliche Zeitlogik und technische Planung
- Datenabhängigkeiten und Verfügbarkeitsfenster
- Partitionen, Pfadmuster und Nachläufe
- Idempotenz und doppelte Verarbeitung
- Design-Reviews und Betriebsabnahme
Schrittweise Seminarinhalte
- Schritt 1: Fachliche Verarbeitungslogik in Zeitfenster, Stichtage und Datenereignisse übersetzen.
- Schritt 2: Eingabe- und Ausgabedaten mit Partitionen, Pfadmustern und Gültigkeiten modellieren.
- Schritt 3: Verspätete Daten, fehlende Partitionen und manuelle Korrekturläufe berücksichtigen.
- Schritt 4: Idempotente Verarbeitung und sichere Wiederholung entwerfen.
- Schritt 5: Coordinator-Parameter und Dataset-Definitionen aus dem Design ableiten.
- Schritt 6: Review-Kriterien für Scheduling-Logik, Risiken und Betriebsauswirkungen erstellen.
- Schritt 7: Designentscheidungen für Entwicklung und Betrieb dokumentieren.
Praxisübungen
- Design einer Monats- und Tagesverarbeitung mit unterschiedlichen Zeitfenstern
- Bewertung von Risiken durch verspätete Datenlieferungen
- Entwurf einer idempotenten Wiederholungsstrategie
Zielgruppe
Geeignet für Data Engineers, Facharchitekten, BI-Teams und Betreiber, die zuverlässige Batch-Planung mit klaren Datenabhängigkeiten benötigen.
Fachbereichsleitung / Leitung der Trainer / Ansprechpartner
-
Lucas Beich
Telefon: + 49 (221) 74740055
E-Mail: lucas.beich@seminar-experts.de
Seminardetails
| Dauer: | 2 Tage ca. 6 h/Tag, Beginn 1. Tag: 10:00 Uhr, 2. Tag: 09:00 Uhr |
| Preis: |
Öffentlich oder Live Stream: € 1.198 zzgl. MwSt. Inhaus: € 3.400 zzgl. MwSt. |
| Teilnehmeranzahl: | min. 2 - max. 8 |
| Teilnehmer: | Data Engineers, Facharchitekten, BI-Teams, Betreiber und technische Analysten |
| Voraussetzungen: | Grundkenntnisse zu Hadoop, Linux-Kommandozeile und XML sind hilfreich. Für reine Überblicksthemen genügt technisches Grundverständnis. |
| Standorte: | Stream Live, Inhaus/Firmenseminar, Berlin, Bremen, Darmstadt, Dresden, Erfurt, Essen, Flensburg, Frankfurt, Freiburg, Friedrichshafen, Hamburg, Hamm, Hannover, Jena, Kassel, Köln, Konstanz, Leipzig, Luxemburg, Magdeburg, Mainz, München, Münster, Nürnberg, Paderborn, Potsdam, Regensburg, Rostock, Stuttgart, Trier, Ulm, Wuppertal, Würzburg |
| Methoden: | Vortrag, Demonstrationen, praktische Übungen am System |
| Seminararten: | Öffentlich, Webinar, Inhaus, Workshop - Alle Seminare mit Trainer vor Ort, Webinar nur wenn ausdrücklich gewünscht |
| Durchführungsgarantie: | ja, ab 2 Teilnehmern |
| Sprache: | Deutsch - bei Firmenseminaren ist auch Englisch möglich |
| Seminarunterlage: | Dokumentation auf Datenträger oder als Download |
| Teilnahmezertifikat: | ja, selbstverständlich |
| Verpflegung: | Kalt- / Warmgetränke, Mittagessen (wahlweise vegetarisch) |
| Support: | 3 Anrufe im Seminarpreis enthalten |
| Barrierefreier Zugang: | an den meisten Standorten verfügbar |
| Weitere Informationen unter + 49 (221) 74740055 |
Seminartermine
Die Ergebnissliste kann durch Anklicken der Überschrift neu sortiert werden.
