Best PracticesTesten und evaluieren

Verwendung des Evaluierungs-Tools

Die Claude Console verfügt über ein Evaluierungs-Tool, mit dem du deine Prompts unter verschiedenen Szenarien testen kannst.

Zugriff auf die Evaluierungsfunktion

So startest du mit dem Evaluierungs-Tool:

Öffne die Claude Console und navigiere zum Prompt-Editor.
Nachdem du deinen Prompt verfasst hast, suche nach dem Tab „Evaluate" oben auf dem Bildschirm.

Zugriff auf die Evaluierungsfunktion

Stelle sicher, dass dein Prompt mindestens 1–2 dynamische Variablen mit der doppelten geschweiften Klammer-Syntax enthält: {{variable}}. Dies ist erforderlich, um Eval-Testsets zu erstellen.

Prompts generieren

Die Console bietet einen integrierten Prompt-Generator, der von Claude Sonnet 4.5 unterstützt wird:

Klicke auf „Generate Prompt“
Wenn du auf das Hilfstool „Generate Prompt" klickst, öffnet sich ein Modal, in dem du deine Aufgabeninformationen eingeben kannst.
Beschreibe deine Aufgabe
Beschreibe deine gewünschte Aufgabe (z. B. „Eingehende Kundensupport-Anfragen triagieren") mit so vielen oder so wenigen Details, wie du möchtest. Je mehr Kontext du angibst, desto besser kann Claude den generierten Prompt auf deine spezifischen Anforderungen zuschneiden.
Generiere deinen Prompt
Wenn du unten auf die orangefarbene Schaltfläche „Generate Prompt" klickst, generiert Claude einen hochwertigen Prompt für dich. Du kannst diese Prompts dann mithilfe des Evaluierungsbildschirms in der Console weiter verbessern.

Diese Funktion erleichtert das Erstellen von Prompts mit der passenden Variablensyntax für die Evaluierung.

Prompt-Generator

Testfälle erstellen

Wenn du den Evaluierungsbildschirm aufrufst, hast du mehrere Möglichkeiten, Testfälle zu erstellen:

Klicke unten links auf die Schaltfläche „+ Add Row", um manuell einen Fall hinzuzufügen.
Verwende die Funktion „Generate Test Case", damit Claude automatisch Testfälle für dich generiert.
Importiere Testfälle aus einer CSV-Datei.

So verwendest du die Funktion „Generate Test Case":

Klicke auf „Generate Test Case“
Claude generiert Testfälle für dich – jeweils eine Zeile pro Klick auf die Schaltfläche.
Generierungslogik bearbeiten (optional)
Du kannst auch die Logik zur Testfallgenerierung bearbeiten, indem du auf den Pfeil-Dropdown rechts neben der Schaltfläche „Generate Test Case" klickst und dann oben im erscheinenden Variablen-Fenster auf „Show generation logic". Möglicherweise musst du oben rechts in diesem Fenster auf „Generate" klicken, um die anfängliche Generierungslogik zu befüllen.
Durch das Bearbeiten kannst du die von Claude generierten Testfälle mit größerer Präzision und Spezifität anpassen und feinabstimmen.

Hier ist ein Beispiel für einen ausgefüllten Evaluierungsbildschirm mit mehreren Testfällen:

Ausgefüllter Evaluierungsbildschirm

Wenn du deinen ursprünglichen Prompt-Text aktualisierst, kannst du die gesamte Eval-Suite erneut mit dem neuen Prompt ausführen, um zu sehen, wie sich Änderungen auf die Leistung über alle Testfälle hinweg auswirken.

Tipps für eine effektive Evaluierung

Verwende das Hilfstool „Generate a prompt" in der Console, um schnell Prompts mit der passenden Variablensyntax für die Evaluierung zu erstellen.

Ergebnisse verstehen und vergleichen

Das Evaluierungs-Tool bietet mehrere Funktionen, die dir helfen, deine Prompts zu verfeinern:

Side-by-side-Vergleich: Vergleiche die Ausgaben von zwei oder mehr Prompts, um schnell die Auswirkungen deiner Änderungen zu sehen.
Qualitätsbewertung: Bewerte die Antwortqualität auf einer 5-Punkte-Skala, um Verbesserungen der Antwortqualität pro Prompt nachzuverfolgen.
Prompt-Versionierung: Erstelle neue Versionen deines Prompts und führe die Test-Suite erneut aus, um schnell zu iterieren und die Ergebnisse zu verbessern.

Indem du die Ergebnisse über alle Testfälle hinweg überprüfst und verschiedene Prompt-Versionen vergleichst, kannst du Muster erkennen und fundierte Anpassungen an deinem Prompt effizienter vornehmen.

Beginne noch heute mit der Evaluierung deiner Prompts, um robustere KI-Anwendungen mit Claude zu erstellen!

Was this page helpful?

Best PracticesTesten und evaluieren

Verwendung des Evaluierungs-Tools

Die Claude Console verfügt über ein Evaluierungs-Tool, mit dem du deine Prompts unter verschiedenen Szenarien testen kannst.

Zugriff auf die Evaluierungsfunktion

So startest du mit dem Evaluierungs-Tool:

Öffne die Claude Console und navigiere zum Prompt-Editor.
Nachdem du deinen Prompt verfasst hast, suche nach dem Tab „Evaluate" oben auf dem Bildschirm.

Zugriff auf die Evaluierungsfunktion

Stelle sicher, dass dein Prompt mindestens 1–2 dynamische Variablen mit der doppelten geschweiften Klammer-Syntax enthält: {{variable}}. Dies ist erforderlich, um Eval-Testsets zu erstellen.

Prompts generieren

Die Console bietet einen integrierten Prompt-Generator, der von Claude Sonnet 4.5 unterstützt wird:

Klicke auf „Generate Prompt“
Wenn du auf das Hilfstool „Generate Prompt" klickst, öffnet sich ein Modal, in dem du deine Aufgabeninformationen eingeben kannst.
Beschreibe deine Aufgabe
Beschreibe deine gewünschte Aufgabe (z. B. „Eingehende Kundensupport-Anfragen triagieren") mit so vielen oder so wenigen Details, wie du möchtest. Je mehr Kontext du angibst, desto besser kann Claude den generierten Prompt auf deine spezifischen Anforderungen zuschneiden.
Generiere deinen Prompt
Wenn du unten auf die orangefarbene Schaltfläche „Generate Prompt" klickst, generiert Claude einen hochwertigen Prompt für dich. Du kannst diese Prompts dann mithilfe des Evaluierungsbildschirms in der Console weiter verbessern.

Diese Funktion erleichtert das Erstellen von Prompts mit der passenden Variablensyntax für die Evaluierung.

Prompt-Generator

Testfälle erstellen

Wenn du den Evaluierungsbildschirm aufrufst, hast du mehrere Möglichkeiten, Testfälle zu erstellen:

Klicke unten links auf die Schaltfläche „+ Add Row", um manuell einen Fall hinzuzufügen.
Verwende die Funktion „Generate Test Case", damit Claude automatisch Testfälle für dich generiert.
Importiere Testfälle aus einer CSV-Datei.

So verwendest du die Funktion „Generate Test Case":

Klicke auf „Generate Test Case“
Claude generiert Testfälle für dich – jeweils eine Zeile pro Klick auf die Schaltfläche.
Generierungslogik bearbeiten (optional)
Du kannst auch die Logik zur Testfallgenerierung bearbeiten, indem du auf den Pfeil-Dropdown rechts neben der Schaltfläche „Generate Test Case" klickst und dann oben im erscheinenden Variablen-Fenster auf „Show generation logic". Möglicherweise musst du oben rechts in diesem Fenster auf „Generate" klicken, um die anfängliche Generierungslogik zu befüllen.
Durch das Bearbeiten kannst du die von Claude generierten Testfälle mit größerer Präzision und Spezifität anpassen und feinabstimmen.

Hier ist ein Beispiel für einen ausgefüllten Evaluierungsbildschirm mit mehreren Testfällen:

Ausgefüllter Evaluierungsbildschirm

Tipps für eine effektive Evaluierung

Verwende das Hilfstool „Generate a prompt" in der Console, um schnell Prompts mit der passenden Variablensyntax für die Evaluierung zu erstellen.

Ergebnisse verstehen und vergleichen

Das Evaluierungs-Tool bietet mehrere Funktionen, die dir helfen, deine Prompts zu verfeinern:

Side-by-side-Vergleich: Vergleiche die Ausgaben von zwei oder mehr Prompts, um schnell die Auswirkungen deiner Änderungen zu sehen.
Qualitätsbewertung: Bewerte die Antwortqualität auf einer 5-Punkte-Skala, um Verbesserungen der Antwortqualität pro Prompt nachzuverfolgen.
Prompt-Versionierung: Erstelle neue Versionen deines Prompts und führe die Test-Suite erneut aus, um schnell zu iterieren und die Ergebnisse zu verbessern.

Beginne noch heute mit der Evaluierung deiner Prompts, um robustere KI-Anwendungen mit Claude zu erstellen!

Was this page helpful?

Zugriff auf die Evaluierungsfunktion

Prompts generieren

Testfälle erstellen

Tipps für eine effektive Evaluierung

Prompt-Struktur für die Evaluierung

Ergebnisse verstehen und vergleichen

Zugriff auf die Evaluierungsfunktion

Prompts generieren

Testfälle erstellen

Tipps für eine effektive Evaluierung

Prompt-Struktur für die Evaluierung

Ergebnisse verstehen und vergleichen

Zugriff auf die Evaluierungsfunktion

Prompts generieren

Testfälle erstellen

Tipps für eine effektive Evaluierung

Ergebnisse verstehen und vergleichen

Zugriff auf die Evaluierungsfunktion

Prompts generieren

Testfälle erstellen

Tipps für eine effektive Evaluierung

Ergebnisse verstehen und vergleichen