Glossar · Technik und Modelle

RAG (Retrieval Augmented Generation): Definition und Nutzen

Definition

RAG (Retrieval Augmented Generation) verbindet ein Sprachmodell mit einer Suche in deinen eigenen Dokumenten, sodass Antworten auf geprüften Quellen beruhen statt auf reinem Modellwissen. Vor der Antwort holt das System passende Textstellen aus einer Wissensbasis und legt sie dem Modell als Kontext bei. So bleiben Aussagen aktuell und belegbar, ohne dass das Modell neu trainiert werden muss.

Warum der Begriff zählt

Ein Sprachmodell allein kennt nur, was in seinen Trainingsdaten stand, und erfindet im Zweifel plausibel klingende Antworten. RAG dreht das um. Das Modell arbeitet wie ein Mitarbeiter, der vor der Antwort erst im Handbuch nachschlägt, statt aus dem Gedächtnis zu raten. Für Unternehmen entscheidet dieser Ansatz oft darüber, ob ein Assistent überhaupt in den Betrieb darf, weil jede Aussage auf eine nachvollziehbare Quelle zeigt.

Wann es relevant ist

  • Deine Antworten müssen auf internem Wissen beruhen, etwa Handbüchern, Verträgen oder Tickets.
  • Die Inhalte ändern sich laufend und ein Nachtrainieren des Modells wäre zu träge.
  • Nachvollziehbarkeit ist Pflicht, jede Antwort soll ihre Quelle zeigen können.
  • Du willst kein sensibles Wissen ins Modell einbrennen, sondern kontrolliert bereitstellen.

Wann nicht

Wenn die Aufgabe reines Sprachgefühl braucht, etwa das Umschreiben eines Textes im Firmenton, hilft externes Wissen wenig und Fine-Tuning passt besser. Und wenn deine Wissensbasis unstrukturiert, veraltet oder widersprüchlich ist, verstärkt RAG diese Mängel nur. Dann steht am Anfang eine Aufräumarbeit an den Quellen, nicht der Bau der Suche.

Branchen, die das nutzen

  • Versicherungen: Sachbearbeiter fragen Tarifwerke und Bedingungen ab und bekommen Antworten mit Verweis auf die genaue Klausel.
  • Anlagenbau: Servicetechniker durchsuchen Wartungshandbücher und Ersatzteillisten im Feld, statt PDF-Ordner zu wälzen.
  • Kanzleien und Steuerberatung: Recherche in Mandatsakten und Gesetzestexten mit klarer Fundstelle für jede Aussage.
  • Öffentliche Verwaltung: Auskünfte zu Verfahren und Richtlinien, die auf der jeweils gültigen Fassung beruhen.

Typische Anwendungsfälle

  • Ein interner Assistent, der Fragen zu Produkten und Prozessen aus der Wissensdatenbank beantwortet.
  • Ein Support-Werkzeug, das Antwortentwürfe aus früheren Tickets und der Doku zieht.
  • Eine Vertragsprüfung, die relevante Passagen findet und mit Fundstelle zusammenfasst.
  • Ein Onboarding-Helfer, der neuen Mitarbeitenden Richtlinien mit Quellenlink erklärt.
  • Eine Angebotsunterstützung, die technische Spezifikationen aus dem Produktkatalog zieht.

Entscheidungshilfe

Entscheidungshilfe
SignalRAG passtAlternative
Antwort muss auf internen Quellen beruhenRAG mit Wissensbasis und QuellenlinkModell ohne Anbindung genügt nicht
Inhalte ändern sich häufigRAG, Quelle aktualisieren reichtFine-Tuning wäre zu langsam
Stil und Ton sollen sich änderneher nichtFine-Tuning oder Prompt Engineering
Wissensbasis ist chaotischerst Quellen ordnenDatenaufbereitung vor dem Bau

Beispiel

Ein Anlagenbauer will Servicetechnikern schnelleren Zugriff auf Wartungswissen geben. Im Workshop wählt das Team einen engen Ausschnitt, etwa eine Maschinenreihe, und baut in wenigen Tagen einen Prototyp auf den echten Handbüchern. Getestet wird mit realen Feldfragen, auch mit Fällen, bei denen mehrere Dokumente widersprechen. Erst nach diesem Test entscheidet das Team über den Ausbau. Das Beispiel beschreibt die Vorgehensweise, keine behauptete Kundenkennzahl.

Verbindung zu Services

Der Einstieg ist meist der KI-Workshop, in dem der Use-Case eng geschnitten wird, danach KI-Entwicklung und KI-Implementierung.

Quellen

Diese Einordnung beschreibt gängige Praxis beim Bau von Wissensassistenten. Konkrete Architektur, Rechte und Datenschutz hängen vom Projekt und den gewählten Systemen ab und sollten dort geprüft werden.

Verwandte Themen EmbeddingsVektordatenbankFoundation Model

Strategiegespräch buchen

Prüfe deinen Use-Case im Gespräch. Buche dein Strategiegespräch über den Kalender: Strategiegespräch buchen. Alternativ per E-Mail: info@ki-agentur.co.

  • Termin direkt im Kalender wählen
  • Use-Case und Ziele gemeinsam klären
  • Klarer nächster Schritt nach dem Gespräch

Alternativ per E-Mail an info@ki-agentur.co

Wähle einen freien Termin.

Häufig gestellte Fragen

Was ist der Unterschied zwischen RAG und Fine-Tuning?
RAG gibt dem Modell Wissen als Kontext mit, das Modell selbst bleibt unverändert. Fine-Tuning verändert das Modell und prägt ihm Verhalten oder Stil ein. Für aktuelle, belegbare Fakten ist RAG meist die pragmatischere Wahl.
Muss ich für RAG meine Daten an ein externes Modell geben?
Nicht zwingend. Die Suche läuft in deiner Wissensbasis, und je nach Architektur lassen sich Modelle im eigenen Umfeld oder mit vertraglichen Zusicherungen betreiben. Das gehört zu den ersten Klärungen im Workshop.
Wie schnell steht ein erster RAG-Prototyp?
Für einen eng geschnittenen Bereich oft in Tagen, weil ein vorhandenes Modell mit deinen Dokumenten verbunden wird. Der Aufwand steckt weniger im Modell als in sauberen Quellen und guter Suche.