Seminar Weaviate Filter, Aggregationen und Metadatenabfragen

Dieses praxisorientierte Seminar behandelt präzise Filterausdrücke, logische Operatoren, Datentypen, Filter in Vektor-, Keyword- und Hybridabfragen, Aggregationen, Gruppierungen, Sortierung und Ergebnis-Metadaten. Alle Arbeitsschritte werden an einer durchgängigen Referenzumgebung ausgeführt, geprüft und in wiederverwendbaren Arbeitsvorlagen dokumentiert.

Inhaltsübersicht

• Daten- und Indexvorbereitung
• Filterausdrücke
• Filter in Suchabfragen
• Aggregationen und Gruppierung
• Sortierung und Fehleranalyse
• Lernziele und Abnahmekriterien
• Praxisübungen und Betriebsdokumentation

Lernziele

• Anforderungen in den Bereichen Daten- und Indexvorbereitung, Filter in Suchabfragen und Sortierung und Fehleranalyse strukturiert analysieren und in eine umsetzbare Weaviate-Konfiguration überführen.
• Collections, Daten, Abfragen oder Betriebsparameter nachvollziehbar konfigurieren und mit reproduzierbaren Prüfungen verifizieren.
• Fehlersituationen systematisch eingrenzen, geeignete Diagnoseinformationen erfassen und belastbare Korrekturmaßnahmen ableiten.
• Qualität, Leistung, Sicherheit und Wartbarkeit anhand definierter Kriterien bewerten und die Lösung für den Regelbetrieb dokumentieren.

Schritt-für-Schritt-Inhalte

1. Daten- und Indexvorbereitung

Schwerpunkt: filterbare Properties, Datentypen, Nullwerte, Arrays, Datumswerte, Tokenisierung und repräsentative Testdaten.

1. Anforderungen für Daten- und Indexvorbereitung erfassen: filterbare Properties, Datentypen, Nullwerte, Arrays, Datumswerte, Tokenisierung und repräsentative Testdaten; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

2. Filterausdrücke

Schwerpunkt: Vergleichsoperatoren, Mengenoperatoren, Textoperatoren, Pfade, verschachtelte Bedingungen und logische Verknüpfungen.

1. Anforderungen für Filterausdrücke erfassen: Vergleichsoperatoren, Mengenoperatoren, Textoperatoren, Pfade, verschachtelte Bedingungen und logische Verknüpfungen; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

3. Filter in Suchabfragen

Schwerpunkt: Kombination mit Vektorsuche, Keyword Search und Hybrid Search, Vorfilterung, Grenzwerte und Ergebnis-Metadaten.

1. Anforderungen für Filter in Suchabfragen erfassen: Kombination mit Vektorsuche, Keyword Search und Hybrid Search, Vorfilterung, Grenzwerte und Ergebnis-Metadaten; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

4. Aggregationen und Gruppierung

Schwerpunkt: Anzahl, numerische Kennzahlen, Top-Vorkommen, Gruppierung, Mandantenbezug und fachliche Plausibilisierung.

1. Anforderungen für Aggregationen und Gruppierung erfassen: Anzahl, numerische Kennzahlen, Top-Vorkommen, Gruppierung, Mandantenbezug und fachliche Plausibilisierung; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

5. Sortierung und Fehleranalyse

Schwerpunkt: Sortierregeln, Paging, fehlende Werte, leere Treffer, Datentypfehler, Performance und wiederverwendbare Abfragebausteine.

1. Anforderungen für Sortierung und Fehleranalyse erfassen: Sortierregeln, Paging, fehlende Werte, leere Treffer, Datentypfehler, Performance und wiederverwendbare Abfragebausteine; Zielzustand, Eingaben, Abhängigkeiten und messbare Prüfkriterien in einer Arbeitsvorlage festhalten.
2. Technische Grundlage konfigurieren: passende Collections, Properties, Clients, Modelle, Indizes oder Infrastrukturparameter auswählen und jede Einstellung mit ihrem Zweck dokumentieren.
3. Vorgehen mit repräsentativen Daten ausführen: Ausgangszustand prüfen, Operation schrittweise durchführen, Rückgaben protokollieren und das erwartete Verhalten gegen die Prüfkriterien vergleichen.
4. Fehler- und Grenzfälle untersuchen: ungültige Eingaben, fehlende Berechtigungen, leere Ergebnisse, Zeitüberschreitungen oder Ressourcenengpässe gezielt auslösen und diagnostizieren.
5. Ergebnis absichern: Qualität, Latenz, Ressourcenbedarf, Sicherheit und Wartbarkeit bewerten; Konfiguration und Wiederholungsablauf als wiederverwendbares Runbook festhalten.

Praxisübungen

1. Übung 1: Daten- und Indexvorbereitung – filterbare Properties, Datentypen, Nullwerte, Arrays, Datumswerte, Tokenisierung und repräsentative Testdaten in einer vorbereiteten Referenzumgebung konfigurieren, ausführen, mit Negativtests prüfen und in einem Abnahmeprotokoll dokumentieren.
2. Übung 2: Filterausdrücke – Vergleichsoperatoren, Mengenoperatoren, Textoperatoren, Pfade, verschachtelte Bedingungen und logische Verknüpfungen in einer vorbereiteten Referenzumgebung konfigurieren, ausführen, mit Negativtests prüfen und in einem Abnahmeprotokoll dokumentieren.
3. Übung 3: Filter in Suchabfragen – Kombination mit Vektorsuche, Keyword Search und Hybrid Search, Vorfilterung, Grenzwerte und Ergebnis-Metadaten in einer vorbereiteten Referenzumgebung konfigurieren, ausführen, mit Negativtests prüfen und in einem Abnahmeprotokoll dokumentieren.
4. Übung 4: Aggregationen und Gruppierung – Anzahl, numerische Kennzahlen, Top-Vorkommen, Gruppierung, Mandantenbezug und fachliche Plausibilisierung in einer vorbereiteten Referenzumgebung konfigurieren, ausführen, mit Negativtests prüfen und in einem Abnahmeprotokoll dokumentieren.

Zielgruppe

Backend-Entwickler, Data Engineers, Search Engineers und Anwender mit ersten Weaviate-Erfahrungen.

Voraussetzungen

Grundkenntnisse zu Collections, Properties und mindestens einer Weaviate-Suchart.