Seminar Apache Kafka Connect und Datenintegration

Kafka Connect ist in vielen Projekten der pragmatische Weg zwischen sauberer Plattformidee und handfestem Integrationsalltag. Dieses zweitägige Seminar konzentriert sich auf die Architektur von Connect-Workern, das Zusammenspiel von Source- und Sink-Konnektoren, Converter-Konzepten, Konfigurationsmustern, Fehlerbehandlung und Skalierung. Zwei Tage sind hier die richtige Größenordnung: Ein Tag wäre nur eine Produktvorführung, mehr als zwei Tage lohnt sich meist erst, wenn tiefe projektspezifische Spezialfälle oder individuelle Konnektoren entwickelt werden sollen.

Inhaltsübersicht

• Seminarziel
• Schwerpunkte
• Praxis und Übungen
• Zielgruppe
• Voraussetzungen

Seminarziel

Vermittelt wird ein belastbares Verständnis dafür, wie Kafka Connect für wiederholbare und wartbare Datenintegration eingesetzt wird. Nach dem Seminar lassen sich Worker-Modelle unterscheiden, Konnektoren sicher konfigurieren, Fehlerbilder einordnen und die Betriebsgrenzen von Connect realistisch bewerten.

Schwerpunkte

• Rolle von Kafka Connect in Integrations- und Datenplattformen
• Standalone- und Distributed-Worker im Vergleich
• Source- und Sink-Konnektoren, Tasks und Parallelisierung
• Converter-Konzept, Datenformate und Schema-Strategien
• Plugin-Verwaltung, Deployment und Versionierung
• Fehlerbehandlung, Toleranzgrenzen und Dead-Letter-Ansätze
• Monitoring, Rebalancing und Betriebsmodelle
• Entscheidungshilfen: Wann Connect passt und wann nicht

Praxis und Übungen

Die Labore folgen einem klaren Ablauf: Zunächst wird ein Worker eingerichtet, danach werden einfache Source- und Sink-Szenarien aufgebaut, beobachtet und geändert. Im Anschluss werden fehlerhafte Datensätze, Neustarts, Skalierung und Konfigurationsvarianten getestet. So wird sichtbar, wie Connect sich im Alltag verhält und wo Teams besser vorher nachdenken, statt später hektisch zu flicken.

Zielgruppe

Gedacht ist das Seminar für Data Engineers, Integrationsentwickler, Administratoren sowie ETL- und Plattformteams, die Datenflüsse nicht permanent von Hand schieben wollen.

Voraussetzungen

Empfohlen werden sichere Grundlagen zu Topics, Partitionen, Producer und Consumer sowie ein allgemeines Verständnis für Datenintegration. Ideal ist der Besuch des Grundlagenseminars.