Seminar Apache Iceberg Architektur, Kataloge und Plattformintegration

Dieses viertägige Seminar behandelt Apache Iceberg aus Sicht von Plattformaufbau, Integrationsdesign und Governance. Vier Tage sind notwendig, weil nicht nur das Tabellenformat selbst, sondern auch Kataloge, Objektspeicher, Sicherheitszonen, Multi-Engine-Anbindung und Betriebsmodelle sauber zusammengeführt werden müssen. Wer hier kürzt, spart meist nur an der falschen Stelle und zahlt später mit Reibungsverlusten im Betrieb.

Zielsetzung

Vermittelt wird ein belastbares Architekturverständnis für produktive Iceberg-Plattformen. Das Seminar zeigt, wie aus einzelnen Tabellen eine konsistente Lakehouse-Struktur wird, wie Kataloge ausgewählt und getrennt werden, wie Entwicklungs-, Test- und Produktionspfade organisiert werden und wie sich technische Standards so festlegen lassen, dass Teams nicht permanent gegeneinander arbeiten.

Inhalte

• Aufbau von Metadaten, Snapshots, Manifesten und Tabellenzuständen
• Katalogtypen wie REST, Hive, Hadoop, JDBC und benutzerdefinierte Kataloge
• Objektspeicher, File-IO, Warehouse-Strukturen und Namenskonventionen
• Branching- und Tagging-Strategien für Entwicklung, Freigabe und Audit
• Governance, Retention, Kompatibilität, Freigabepolitik und Upgrade-Strategien
• Integrationsmuster für Spark, Trino, Hive und Flink aus Plattformperspektive
• Sicherheits- und Zugriffskonzepte für Kataloge, Metadaten und Speicherbereiche
• Referenzarchitekturen für zentrale, föderierte und hybride Datenplattformen

Praxis

Im Seminar werden Architekturentscheidungen an typischen Zielbildern durchgespielt: zentraler Enterprise-Katalog, domänenorientierte Strukturen, Test- und Freigabepfade, Retentionsvorgaben sowie Integrationsszenarien für mehrere Engines. Zusätzlich entstehen belastbare Checklisten für Plattformstandards, Freigabeprozesse und die technische Betriebsorganisation.

Zielgruppe

Geeignet ist das Format für Rollen mit Verantwortung für Plattformdesign und technische Standards. Dazu zählen Plattformarchitekten, Senior Data Engineers, Data Platform Leads, Administrations- und Betriebsteams sowie Projektverantwortliche, die Iceberg strukturiert und nicht im Bastelmodus einführen wollen.