KI-Ergebnisse prüfen: Aussagen, Quellen und Auslassungen getrennt ansehen
Sprachlich überzeugend ist noch nicht fachlich richtig: Eine praktische Prüfroutine für KI-Entwürfe mit klaren Zuständigkeiten und dokumentierten Korrekturen.
Ein gut formulierter KI-Entwurf kann auf den ersten Blick fertig wirken. Für die Verwendung im Arbeitsalltag müssen jedoch die einzelnen Aussagen stimmen, wichtige Informationen enthalten sein und Grenzen des Ausgangsmaterials erkennbar bleiben. Die Prüfung wird überschaubarer, wenn Sie diese Aufgaben getrennt durchführen.
Den Prüfmaßstab vor der Ausgabe festlegen
Beschreiben Sie, was ein verwendbarer Entwurf enthalten muss. Bei einer Zusammenfassung kann das die korrekte Wiedergabe bestätigter Entscheidungen sein; bei einer Antwort auf eine Anfrage die Übereinstimmung mit freigegebenen Angebotsinformationen. Benennen Sie außerdem Aussagen, die keinesfalls ergänzt werden dürfen, etwa unbestätigte Termine oder Leistungszusagen.
Legen Sie fest, wer diese Punkte fachlich beurteilen kann. Eine allgemeine Sprachprüfung ersetzt kein Wissen über das betreffende Angebot. Wenn niemand die Richtigkeit kontrollieren kann, fehlt dem geplanten Ablauf eine wesentliche Voraussetzung.
Behauptungen an der Quelle prüfen
Markieren Sie überprüfbare Aussagen und vergleichen Sie sie mit der tatsächlich maßgeblichen Information. Wenn die Ausgabe eine Quelle nennt, öffnen Sie diese und prüfen Sie, ob sie die konkrete Behauptung trägt. Ein passend klingender Verweis allein genügt nicht. Auch Mengen, Namen und zeitliche Angaben verdienen einen eigenen Blick.
Das BSI beschreibt in seiner Veröffentlichung „Generative KI-Modelle“ Risiken beim Einsatz solcher Systeme und empfiehlt eine anwendungsspezifische Betrachtung vor der Integration. Für den hier beschriebenen Redaktionsablauf leiten wir daraus die praktische Aufgabe ab, die Prüfschritte an den möglichen Folgen einer falschen Aussage auszurichten.
Nach fehlenden Einschränkungen suchen
Eine Zusammenfassung kann einzelne Sätze korrekt wiedergeben und trotzdem einen falschen Gesamteindruck erzeugen. Vielleicht fehlt eine Voraussetzung oder eine noch offene Entscheidung wirkt bereits verbindlich. Vergleichen Sie deshalb nicht nur vorhandene Aussagen, sondern auch das, was aus dem Ausgangsmaterial hätte erhalten bleiben müssen.
Ein fiktiver Fall: Die Notiz sagt, dass ein Termin erst nach Prüfung der Unterlagen vereinbart wird. Ein Entwurf nennt lediglich den Terminwunsch. Die Information ist dann unvollständig, auch wenn das Datum selbst richtig übernommen wurde.
Korrekturen für den nächsten Versuch auswerten
- Welche Aussage war falsch oder unbelegt?
- Welche wichtige Einschränkung fehlte?
- War das Ausgangsmaterial eindeutig und aktuell?
- Welche Nacharbeit war bis zum verwendbaren Ergebnis nötig?
- Muss Material, Aufgabenstellung oder Ablauf geändert werden?
Erfassen Sie Fehlerarten über mehrere geeignete Beispiele hinweg. Ein einzelner gelungener Text zeigt noch nicht, wie der Ansatz mit schwierigeren Fällen umgeht. Beurteilen Sie auch den Prüfaufwand. Wenn eine Korrektur nur durch vollständige Neuerarbeitung möglich wird, gehört diese Beobachtung in die Entscheidung über den weiteren Einsatz.
Zum Ausprobieren
Nehmen Sie einen KI-Entwurf aus geeigneten Testdaten. Markieren Sie eine belegte Aussage, eine offene Frage und eine Information, deren Weglassen das Verständnis verändern würde.
Einen möglichen Ansatz ansehen
Bei einer fiktiven Angebotszusammenfassung kann der Leistungsumfang belegt sein, die Verfügbarkeit aber offen bleiben. Der Hinweis auf eine noch nötige Abstimmung muss erhalten bleiben. Eine flüssigere Formulierung rechtfertigt nicht, diese Einschränkung zu streichen.
Weiterlesen: Fünf Fragen vor dem ersten KI-Workflow.