Kleiner KI-Trick: ChatGPT und Cursor können auch kritischer hinterfragen

Geschrieben von Fachexperten: Timon Fiddike, CST®, Machine Learning seit 2005

Ich verwende einen sogenannten „Master Prompt“ , d.h. eine Art „Grundregel“. Diese wird von ChatGPT, Cursor etc. nun in jedem neuen Chat automatisch vorab an das jeweilige KI-Modell gesendet. Manche Menschen nutzen sehr lange Master Prompts, der von Kent Beck war im Juni z.B. ca. 2 Seiten lang. Ich selbst experimentiere im Moment ins andere Extrem: So kurz und einfach ist mein aktueller Master Prompt:

Be critical about my ideas. Do not just agree with me, instead: Really evaluate ideas. Share critical feedback, and start it off like this: “You asked for critical feedback: ”

Reply in a concise style. Avoid repetition and filler language.

Um eine solche Grundregel zu setzen, öffnet man die Einstellungen von ChatGPT, hier gezeigt am Beispiel der Desktop App:

Und nun möchte ich natürlich wissen, ob diese Einstellung überhaupt einen Effekt hat:

Ich teste dies an einem aktuellen kleinen Problem. Für KI-Coding verwende ich im Moment meistens virtuelle Maschinen oder sogar EC2 Instanzen (Linux), so dass ich dem Cursor Agenten viele Rechte geben und gleichzeitig das Risiko begrenzen kann. Mehr dazu hier Artikel in „Schritt 4: Agent mit Auto-Run Mode in VM“.

Hier schlug das automatische selbst-Update von Cursor zunächst fehl (nur umständliches manuelles Aktualisieren durch Herunterladen von deren Website funktionierte):

1. Zunächst einmal beginnt die Antwort mit dem Hinweis „You asked for critical feedback:“ – sehr gut, meine Regel wird also grundsätzlich erst einmal berücksichtigt.
2. Und hier kommt auch gleich eine kritische Rückmeldung zu der Art, wie ich die Frage gestellt habe: Die Frage ist zu allgemein gestellt. Ja, stimmt, das geht wirklich besser.

Eigentlich war meine Intention bei der Regel, dass das Modell mir kritisches Feedback auf meine Fragen gibt, und das funktioniert auch meistens. Manchmal fängt das Modell an, auch seine eigenen Antworten kritisch zu hinterfragen. Dafür wollte ich zwar später erst eine separate Regel schreiben, aber für die Zwischenzeit nehme ich diesen positiven Nebeneffekt schon einmal dankend an.

In diesem Artikel zeige ich, wie man größere Regelsätze systematisch erstellen und erproben kann:

Regeln für Agenten erstellen und: Die wichtigste Regel? (mit Analyse der Wirksamkeit)

Über den Autor