要開始使用評估工具:

確保您的提示包含至少 1-2 個使用雙大括號語法的動態變數:{{variable}}。這是建立評估測試集的必要條件。
Console 提供內建的 提示生成器,由 Claude Opus 4.1 驅動:
點擊「生成提示」
點擊「生成提示」輔助工具將開啟一個模態視窗,讓您輸入任務資訊。
描述您的任務
描述您想要的任務(例如,「分類入站客戶支援請求」),可以提供詳細或簡略的描述。您提供的上下文越多,Claude 就越能針對您的特定需求量身定制生成的提示。
生成您的提示
點擊底部的橙色「生成提示」按鈕,Claude 將為您生成高品質的提示。然後您可以使用 Console 中的評估螢幕進一步改善這些提示。
此功能讓建立具有適當變數語法的提示變得更容易,以便進行評估。

當您存取評估螢幕時,您有幾個選項來建立測試案例:
要使用「生成測試案例」功能:
點擊「生成測試案例」
Claude 將為您生成測試案例,每次點擊按鈕時一次生成一行。
編輯生成邏輯(可選)
您也可以透過點擊「生成測試案例」按鈕右側的箭頭下拉選單,然後點擊彈出的變數視窗頂部的「顯示生成邏輯」來編輯測試案例生成邏輯。您可能需要點擊此視窗右上角的「生成」來填入初始生成邏輯。
編輯此項目可讓您自訂和微調 Claude 生成的測試案例,以獲得更高的精確度和特異性。
以下是包含多個測試案例的已填入評估螢幕範例:

如果您更新原始提示文字,您可以對新提示重新執行整個評估套件,以查看變更如何影響所有測試案例的效能。
使用 Console 中的「生成提示」輔助工具快速建立具有適當變數語法的提示以進行評估。
評估工具提供多項功能來幫助您改善提示:
透過檢視各測試案例的結果並比較不同的提示版本,您可以發現模式並更有效率地對提示進行明智的調整。
立即開始評估您的提示,使用 Claude 建立更強健的 AI 應用程式!