無料モジュール
エージェントの評価
AIエージェントの評価を、実機のラボで学びます。ステップの採点、最終状態の検査、実行の公平な比較、対話の試験、悪い変更を止めるゲートまで扱います。
6件のレッスン400分のレッスンソフトウェア工学
レッスン一覧
どのレッスンも全文を無料で読めます。無料アカウントを作ると、コマンドをラボで実行し、クイズと課題に取り組めます。
1 · コンテナラボ
AIエージェントの軌跡を評価する
エージェントが踏んだステップを、参照パスと比べて採点できる。
レッスンを読む2 · コンテナラボ
AIエージェントの最終状態を検査する
実行が何を言ったかではなく、何を変えたかを検査できる。
レッスンを読む3 · コンテナラボ
新しいAIエージェントは本当に良いか
実行のたびに結果が変わるとき、あるエージェントが別のエージェントより良いかを言える。
レッスンを読む4 · コンテナラボ
模擬ユーザーでチャットボットを試験する
台本どおりのユーザーで対話を試験し、会話を採点できる。
レッスンを読む5 · コンテナラボ
本番のトレースから評価ケースを作る
使われている中での失敗を、残してはならないものを残さずに、ケースにできる。
レッスンを読む6 · コンテナラボ
AIエージェントの評価スイートを作る
軌跡、状態、繰り返した実行を、1つのゲートにまとめられる。
レッスンを読む
授業で使いますか?このモジュールを学生に割り当てると、教員用ガイド、自動採点つきの課題、学生ごとのラボを使えます。