Guillaume Balaine

無料診断 · 2分

あなたのエージェントは本番運用できる状態ですか？

10の質問に「はい」か「いいえ」で答えてください。厳しめに：「一部だけ」は「いいえ」です。

10問中 0問 回答済み

  1. 01プロンプトやモデルを変更するたびに、評価スイートが自動で実行される。
  2. 02評価ケースは手書きの例だけでなく、実際のユーザー入力から作られている。
  3. 03モデルの出力は、使われる前にスキーマで検証されている。
  4. 04不正な出力は自動でリトライまたは修復される。
  5. 05エージェントの各実行が、プロンプト、ツール呼び出し、レイテンシ、コストまで一貫してトレースされている。
  6. 06ツール呼び出しに制約がある：型付きパラメータ、許可リスト、ループ回数の上限。
  7. 07タスクごとのコストとレイテンシを把握し、予算が決まっている。
  8. 08タスクの種類や難易度に応じて、異なるモデルやプロンプトにルーティングしている。
  9. 09顧客データへのアクセスは範囲が限定され、最小権限で、監査されている。
  10. 10プロンプトやモデルの変更を数分でロールバックできる。