​
Zugriff auf die Evaluierungs-Funktion

Um mit dem Evaluierungs-Tool zu beginnen:
  1. Öffnen Sie die Anthropic Console und navigieren Sie zum Prompt-Editor.
  2. Nachdem Sie Ihren Prompt erstellt haben, suchen Sie nach dem ‘Evaluieren’-Tab oben auf dem Bildschirm.
Zugriff auf die Evaluierungs-Funktion
Stellen Sie sicher, dass Ihr Prompt mindestens 1-2 dynamische Variablen mit der doppelten geschweiften Klammer-Syntax enthält: {{variable}}. Dies ist erforderlich für die Erstellung von Evaluierungs-Testsets.

​
Prompts generieren

Die Console bietet einen integrierten Prompt-Generator, der von Claude Opus 4.1 betrieben wird:
1

Klicken Sie auf 'Prompt generieren'

Das Klicken auf das ‘Prompt generieren’-Hilfstool öffnet ein Modal, in dem Sie Ihre Aufgabeninformationen eingeben können.
2

Beschreiben Sie Ihre Aufgabe

Beschreiben Sie Ihre gewünschte Aufgabe (z.B. “Eingehende Kundenservice-Anfragen triagieren”) mit so viel oder so wenig Detail, wie Sie möchten. Je mehr Kontext Sie einbeziehen, desto mehr kann Claude seinen generierten Prompt an Ihre spezifischen Bedürfnisse anpassen.
3

Generieren Sie Ihren Prompt

Das Klicken auf den orangefarbenen ‘Prompt generieren’-Button unten lässt Claude einen hochwertigen Prompt für Sie generieren. Sie können diese Prompts dann mit dem Evaluierungs-Bildschirm in der Console weiter verbessern.
Diese Funktion macht es einfacher, Prompts mit der entsprechenden Variablen-Syntax für die Evaluierung zu erstellen. Prompt-Generator

​
Testfälle erstellen

Wenn Sie auf den Evaluierungs-Bildschirm zugreifen, haben Sie mehrere Optionen, um Testfälle zu erstellen:
  1. Klicken Sie auf den ’+ Zeile hinzufügen’-Button unten links, um manuell einen Fall hinzuzufügen.
  2. Verwenden Sie die ‘Testfall generieren’-Funktion, um Claude automatisch Testfälle für Sie generieren zu lassen.
  3. Importieren Sie Testfälle aus einer CSV-Datei.
Um die ‘Testfall generieren’-Funktion zu verwenden:
1

Klicken Sie auf 'Testfall generieren'

Claude wird Testfälle für Sie generieren, eine Zeile nach der anderen für jedes Mal, wenn Sie den Button klicken.
2

Generierungslogik bearbeiten (optional)

Sie können auch die Testfall-Generierungslogik bearbeiten, indem Sie auf das Pfeil-Dropdown rechts neben dem ‘Testfall generieren’-Button klicken, dann auf ‘Generierungslogik anzeigen’ oben im Variablen-Fenster, das sich öffnet. Möglicherweise müssen Sie auf ‘Generieren’ oben rechts in diesem Fenster klicken, um die anfängliche Generierungslogik zu füllen.Das Bearbeiten ermöglicht es Ihnen, die Testfälle, die Claude generiert, mit größerer Präzision und Spezifität anzupassen und fein abzustimmen.
Hier ist ein Beispiel eines gefüllten Evaluierungs-Bildschirms mit mehreren Testfällen: Gefüllter Evaluierungs-Bildschirm
Wenn Sie Ihren ursprünglichen Prompt-Text aktualisieren, können Sie die gesamte Evaluierungs-Suite gegen den neuen Prompt erneut ausführen, um zu sehen, wie sich Änderungen auf die Leistung über alle Testfälle hinweg auswirken.

​
Tipps für effektive Evaluierung

Verwenden Sie das ‘Einen Prompt generieren’-Hilfstool in der Console, um schnell Prompts mit der entsprechenden Variablen-Syntax für die Evaluierung zu erstellen.

​
Ergebnisse verstehen und vergleichen

Das Evaluierungs-Tool bietet mehrere Funktionen, um Ihnen bei der Verfeinerung Ihrer Prompts zu helfen:
  1. Seite-an-Seite-Vergleich: Vergleichen Sie die Ausgaben von zwei oder mehr Prompts, um schnell die Auswirkungen Ihrer Änderungen zu sehen.
  2. Qualitätsbewertung: Bewerten Sie die Antwortqualität auf einer 5-Punkte-Skala, um Verbesserungen in der Antwortqualität pro Prompt zu verfolgen.
  3. Prompt-Versionierung: Erstellen Sie neue Versionen Ihres Prompts und führen Sie die Test-Suite erneut aus, um schnell zu iterieren und Ergebnisse zu verbessern.
Durch die Überprüfung der Ergebnisse über Testfälle hinweg und den Vergleich verschiedener Prompt-Versionen können Sie Muster erkennen und informierte Anpassungen an Ihrem Prompt effizienter vornehmen. Beginnen Sie heute mit der Evaluierung Ihrer Prompts, um robustere KI-Anwendungen mit Claude zu erstellen!