テストグループの作成
早期アクセステストグループは、特定のAIエージェントに関連するテストケースを整理します。各テストグループは、正確に1つのエージェントにリンクされていますが、同じエージェントに対して複数のテストグループを作成して、異なるユースケースをカバーできます。
シナリオタイプ、エージェントバージョン、または評価目標ごとにテストをグループ化して、品質評価を構造化します。
備考
AgentOS に [AI エージェントが構成されている] (/agentos-ai-agents/ai-agents/configure-ai-agent) が必要です。
テストグループを作成する
- 品質センター > テストグループの作成に移動します。
- [新しいテスト グループ] ダイアログで、以下を構成します。
- AI エージェント: テストするエージェントを選択します。
- テストグループ名: テストグループのわかりやすい名前を入力します。
- テスト グループの作成 を選択します。
これで、テスト ケースをグループに追加できます。
テスト グループを複製または削除する
既存のテストケースのセットを別の AI エージェントで実行する場合は、テストグループを複製できます。不要になったテストグループを削除することもできます。
テスト グループごとに、メニュー アイコン (3 つのドット) を選択して、次のオプションにアクセスします。
- テスト グループの複製: テスト グループのコピーを作成します。
- 削除: テスト グループを削除します。
テストグループを複製または削除するには:
- テスト グループの一覧で、テスト グループの横にあるメニュー アイコン (3 つのドット) を選択します。
- 重複するテスト グループ または 削除 を選択します。
- 重複する場合は、同じエージェントのテストグループを複製するか、別のエージェントを選択できます。
- 複製または削除を選択して確定します。
テスト グループ ページ
テストグループを開くと、テストグループページにそのグループのすべてのテストケースが表示されます。
このページでは、次の操作を実行できます：
- 検索: 検索ボックスを使用してテスト ケースを検索します。
- フィルタ: テストケースをフィルタします。
- テストケースの追加: テストケースの追加を選択してテストケースを追加します。
- テストケースの表示: テストケースのリストを表示します。テスト ケースごとに、次の情報を表示できます。
| コラム | 説明 |
|---|---|
| ユーザー入力 | テスト ケースの最初のエンド ユーザー メッセージ。 |
| 会話が変わります | エージェントとエンドユーザーの間で交換されたメッセージの数。 |
テスト ケースごとに、メニュー アイコン (3 つのドット) を選択して、次のオプションにアクセスします。
- 編集: テスト ケースを更新します。
- 複製: テスト ケースのコピーを作成します。
- 削除: テスト ケースを削除します。
次のステップ
- テストケースの追加: テストケースをグループに追加して、エージェントの予想される動作を定義します。
ベストプラクティス
- 関連するテストケースをグループ化する - 機能やユーザー体験ごとに個別のテストグループを作成します。
- わかりやすい名前を使用する - テストグループに明確に名前を付けて、その目的を一目で確認できるようにします。
- 複数回実行 - テストグループを3〜10回実行して、エージェントの応答に一貫性があることを確認します。
- 有用な会話を保存する - プレビューでの手動テスト中に、重要なシナリオを表す会話を保存します。