Prompt Engineering

Prompt Engineering ist das systematische Gestalten und Prüfen von Eingaben, damit ein Modell möglichst zuverlässig Ergebnisse nach bestimmten Anforderungen erzeugt. OpenAI: Prompt Engineering Prompt Design wird als alternative Bezeichnung für die Gestaltung solcher Prompts verwendet. Google-Glossar

Vom Entwurf zum überprüften Werkzeug

Zu einem Prompt können Aufgabenbeschreibung, Verhaltensregeln, Kontext, Beispiele und Formatvorgaben gehören. OpenAI: Prompt Engineering Diese Bestandteile sollen klar machen, welches Ergebnis gewünscht ist und welche Informationen dafür verwendet werden sollen. OpenAI: Prompt Engineering

Der erste Entwurf ist dabei nicht bereits der fertige Nachweis seiner Wirksamkeit: Zu Änderungen am Prompt gehören repräsentative Testfälle und eine Auswertung. OpenAI: Prompt Engineering Auch beim Wechsel einer Modellversion sollte das Verhalten erneut geprüft werden, weil verschiedene Modelle und Versionen unterschiedlich auf Eingaben reagieren können. OpenAI: Prompt Engineering

Gängig ist, mit einer möglichst einfachen, ausreichenden Anweisung zu beginnen und zusätzliche Regeln oder Beispiele anhand beobachteter Fehler zu ergänzen. Anthropic: Context Engineering „Mehr Text“ ist damit kein eigenständiges Qualitätsziel.

So kannst du dir das vorstellen

Du entwickelst hypothetisch einen Prompt, der Serviceanfragen in feste Kategorien einordnet. Zunächst legst du fest, welche Kategorien erlaubt sind und wie mit mehrdeutigen Anfragen umzugehen ist.

Anschließend testest du den Entwurf mit normalen Fällen, unvollständigen Angaben und Anfragen, die zwei Themen zugleich enthalten. Wenn eine Variante mehrdeutige Fälle vorschnell zuordnet, könntest du eine klarere Regel oder ein passendes Beispiel ergänzen.

Danach vergleichst du die geänderte Fassung wieder mit den Testfällen. Die Arbeit ähnelt hier der Entwicklung eines überprüfbaren Prozessbausteins, nicht dem Suchen nach einer besonders eindrucksvollen Formulierung.

Promptänderung oder Modellanpassung?

Bei gewöhnlichen Textprompts wird der Eingabekontext verändert, ohne dafür die Modellgewichte zu trainieren. Brown et al.: Language Models are Few-Shot Learners Prompt Tuning bezeichnet dagegen ein Trainingsverfahren für zusätzliche lernbare Promptrepräsentationen und ist trotz des ähnlichen Namens etwas anderes. Lester et al.: Prompt Tuning

Für wiederkehrende Anwendungen gilt zudem die Empfehlung, Prompts zu versionieren und Änderungen gemeinsam mit Tests zu verwalten. OpenAI: Prompting So bleibt nachvollziehbar, welche Fassung in einem bestimmten Prozess verwendet wurde. OpenAI: Prompting

Verwandte Begriffe

Prompt, Prompting, Prompting Framework, Automated Prompt Optimization, Prompt Tuning, Canonical Examples.