3. Ermutige ChatGPT zur Selbstbewertung und erkenne Halluzinationen
Ein nützlicher, oft noch unterschätzter Trick besteht darin, ChatGPT darum zu bitten, das eigene Ergebnis zu bewerten und Anpassungen vorzunehmen. So können wir das Modell beispielsweise auffordern, die eigene Antwort zu analysieren, auf einer Skala zu bewerten und dann basierend auf dieser Selbstbewertung eine verbesserte Version zu erstellen.
Praxisbeispiel:
„Bitte erstelle ein erklärendes Schreiben für einen Kunden, der Schwierigkeiten hat, die Bedingungen seiner Berufsunfähigkeitsversicherung zu verstehen. Bewerte danach das von dir erstellte Ergebnis auf einer Skala von 1 bis 10 und erläutere, wie du zu dieser Bewertung kommst.“
Ein Folgeprompt könnte sein: „Passe nun das Ergebnis so an, dass du es mit einer 11 bewerten würdest.“ Die 11 liegt dabei außerhalb der genannten Skala und wird uns dennoch zu besseren Ergebnissen führen.
Zudem hilft die Selbsteinschätzung dabei, Halluzinationen zu erkennen. Halluzinationen sind falsche Aussagen des Modells, die jedoch korrekt klingen. Im Regelfall liegt die Bewertung von ChatGPT bei 8 bis 9. Bei einer Bewertung von 7 oder tiefer sollte Ergebnis überprüft werden. Zudem gibt die Erläuterung Aufschluss darüber, wie gut das Ergebnis ist. Je überzeugender diese Erläuterungen sind, desto valider ist das Ergebnis einzustufen.