Seminar Apache Hudi Kompaktseminar für Data Engineers

Das Kompaktseminar vermittelt den schnellen, praxisnahen Einstieg in Apache Hudi für Data Engineers. In zwei Tagen werden die Grundlagen so aufgebaut, dass Tabellen angelegt, Daten geschrieben, geändert und abgefragt werden können, ohne sich sofort in jedem Feintuning zu verlieren. Die Dauer reicht für einen soliden Praxiseinstieg, aber nicht für tiefes Betriebs-Tuning – genau dafür gibt es die weiterführenden Seminare.

Zielgruppe

Geeignet für Data Engineers, Analytics Engineers, ETL/ELT-Entwickler und Plattformteams, die Hudi künftig in Projekten einsetzen oder vorhandene Datenflüsse modernisieren wollen.

Voraussetzungen

Empfohlen werden SQL-Kenntnisse, Erfahrung mit verteilten Datenverarbeitungskonzepten sowie erste Praxis mit Spark oder vergleichbaren Werkzeugen.

Seminarinhalte

• Architektur und Grundbegriffe von Hudi
• Anlegen von Tabellen und Auswahl geeigneter Schlüsselfelder
• Copy-on-Write und Merge-on-Read richtig auswählen
• Upserts, Inserts, Deletes und Umgang mit späten Änderungen
• Partitionierung, Dateigrößen und erste Layout-Entscheidungen
• Snapshot-, Incremental- und Time-Travel-Abfragen im Tagesgeschäft
• Schemaentwicklung und sichere Änderungen an Tabellenstrukturen
• Einbindung in Spark SQL und typische Schreib- und Lesewege
• Synchronisation von Metadaten in Kataloge und typische Projektmuster
• Grenzen des Kompaktformats und Übergang in vertiefende Seminare

Praxis und Übungen

Die Übungen führen von einer leeren Tabelle bis zu ersten produktionsnahen Schreib- und Leseabläufen. Gearbeitet wird mit realistischen Änderungsfällen, damit nicht nur schöne Demo-Daten funktionieren, sondern auch der normale Betriebsalltag.