Seminar Marquez Installation und Administration

Zielsetzung

Das Seminar vermittelt den sauberen Aufbau einer Marquez-Umgebung, die Administration der zentralen Komponenten und die grundlegenden Betriebsentscheidungen für Entwicklungs-, Test- und produktionsnahe Installationen.

Inhaltsübersicht

• Rollen von Marquez API, Weboberfläche, Datenbank und Konfiguration
• Lokale Installation, Container-Setup und strukturierte Konfigurationsverwaltung
• Datenbankanbindung, Startreihenfolge, Logs und administrative Prüfungen
• Grundlegende Pflege von Namespaces, Jobs, Runs und Datasets
• Betriebliche Mindeststandards für kleine und mittlere Umgebungen

Seminarinhalte

1. Schritt 1: Systemlandschaft planen
   Die benötigten Komponenten werden fachlich und technisch eingeordnet. Abhängigkeiten, Ports, Datenbankverbindungen, Konfigurationsdateien und Betriebsgrenzen werden vor der Installation geklärt.
2. Schritt 2: Installation durchführen
   Eine Marquez-Umgebung wird schrittweise aufgebaut. Dabei werden typische Stolperfallen wie falsche Startreihenfolge, nicht erreichbare Datenbank, blockierte Ports und unklare Umgebungsvariablen behandelt.
3. Schritt 3: Grundkonfiguration prüfen
   Nach der Installation werden API, Weboberfläche und Datenbankverbindung kontrolliert. Die Prüfung erfolgt nicht nach Bauchgefühl, sondern mit klaren Tests: Status, API-Reaktion, Logausgabe und erste Metadaten.
4. Schritt 4: Erste Lineage anzeigen
   Ein kleines Set aus Jobs, Runs und Datasets wird eingespielt. Danach wird der Graph ausgewertet, um zu prüfen, ob Datenflüsse korrekt sichtbar werden und ob Namensräume sinnvoll getrennt sind.
5. Schritt 5: Administration strukturieren
   Betriebliche Routineaufgaben werden festgelegt: Neustart, Logprüfung, Backup, Datenpflege, Konfigurationsänderungen und einfache Störungsdiagnose. Ziel ist ein belastbares Fundament statt Bastelkellerromantik.
6. Schritt 6: Übergabedokumentation erstellen
   Die Umgebung wird mit Konfigurationsübersicht, Prüfpunkten und Betriebsnotizen dokumentiert. Damit wird nachvollziehbar, welche Annahmen getroffen wurden und wie spätere Erweiterungen sauber anschließen.

Praktische Übungen

• Aufbau einer lokalen Marquez-Umgebung
• Prüfung von API, UI und Datenbankverbindung
• Einspielen einfacher Lineage-Events
• Analyse der Logausgaben bei typischen Fehlstarts
• Erstellung einer administrativen Checkliste

Zielgruppe

Administratoren, Plattformteams, DevOps-Fachkräfte und Data-Engineering-Teams, die Marquez als Lineage-Backend betreiben oder bewerten.

Voraussetzungen

Grundkenntnisse in Linux- oder Container-Umgebungen, Datenbankgrundlagen und technisches Verständnis für Webservices.