Zum Hauptinhalt springen
Playbook: RAG-Quellen-Audit
← Zurück zum Journal
RAG 6 Min. Lesezeit

Playbook: RAG-Quellen-Audit

Die meisten persistenten RAG-Fehler liegen nicht im Modell. Sie liegen in duplizierten, veralteten, schlecht gelabelten oder kontextfremden Quellen.

In diesem Artikel

Definieren Sie, was eine akzeptable Quelle in Ihrer Operation bedeutet

Nicht jedes indexierte Dokument verdient dasselbe Gewicht. Entscheiden Sie, was eine Quelle akzeptabel macht: Gültigkeit, Owner, Nachverfolgbarkeit, Sensitivität, Format und Autoritätsstufe. Ohne dieses Kriterium zählt das Audit nur Dateien.

Nach Domäne und Risiko stichprobenartig prüfen

Das Audit soll häufige, kritische und problematische Randfragen abdecken. Nur beliebte Dokumente zu sampeln lässt Zonen unberührt, wo falsche Zitate am meisten schaden.

  • Domänen nach Volumen und Kritikalität wählen.
  • Paare oft widersprüchlicher Dokumente prüfen.
  • Von Nutzern gemeldete Fehlfragen einbeziehen.

Retrieval, Zitat und Kontext in einem Durchgang bewerten

Es reicht nicht zu prüfen, ob die richtige Datei gefunden wurde. Prüfen Sie auch richtigen Abschnitt, lesbare Zitation und ob abgerufener Kontext die Antwortbedeutung verändert.

Defekte nach Korrekturtyp klassifizieren

Jedes Finding soll in einen umsetzbaren Eimer: fehlende Metadaten, schlechtes Chunking, veraltetes Dokument, kaputte Berechtigungen oder fehlerhafte Antwortanweisung. Das beschleunigt Backlog und vermeidet Zufallsfixes.

Mit Kadenz abschließen, nicht mit Einmal-Audit

Quellen-Audit ist kein Jahresereignis. Es soll kurze, wiederkehrende Routine werden, besonders wenn sich Richtlinien, Handbücher oder Betriebsdokumente häufig ändern.

Sampling-Skript freischalten

Vollständigen Artikel freischalten

Melden Sie sich mit Ihrem Kodex-Community-Konto an, um weiterzulesen.

Mehr aus dem Journal

Bereit, das umzusetzen?

Kodex liefert mit Ihnen — oder starten Sie mit Ressourcen.

Beratung buchen Ressourcen

Zusammenarbeit

Erzählen Sie uns Ihr Ziel

Ein kurzer Triage zur Qualifizierung Ihrer Anfrage. In wenigen Minuten zum richtigen Scope.

1

Wie möchten Sie mit Kodex zusammenarbeiten?

Wir öffnen den richtigen Weg — ohne unnötige Fragen.

Wie möchten Sie mit Kodex zusammenarbeiten?

Tippen Sie auf eine Karte, um fortzufahren