3.4標準
プロンプトやモデルを更新する。
過去に見つかった重大な失敗を再発させない。
運用として適切なものを2つ選べ。
× 不正解
回帰評価セットは代表・境界・過去失敗・新リスクを版管理し、同じケースで差分・許容基準・採用判断を記録する。
詳細解説
正しい代表的ケース、境界ケース、過去の失敗、最新のリスクを版付きで管理する
変更前後を同じ条件で比べられる。
変更前後を同じ条件で比べられる。
問題の要件では、代表的ケース、境界ケース、過去の失敗、最新のリスクを版付きで管理するが解決する範囲と、別の工程が担う範囲を分けて判断する。
正しい評価結果、許容基準、差分レビュー、採用判断を保存する
回帰と意思決定を追跡できる。
回帰と意思決定を追跡できる。
問題の要件では、評価結果、許容基準、差分レビュー、採用判断を保存するが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤りモデル更新ごとに評価ケースを全て入れ替える
比較可能性が失われる。
比較可能性が失われる。
問題の要件では、モデル更新ごとに評価ケースを全て入れ替えるが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤り平均スコアだけが同じなら個別の重大失敗を無視する
高影響の退行が隠れる。
高影響の退行が隠れる。
問題の要件では、平均スコアだけが同じなら個別の重大失敗を無視するが解決する範囲と、別の工程が担う範囲を分けて判断する。
実際に確かめる
一時的な検証環境で実行できる例です。
AWS公式AIF-C01 Domain 3.4の回帰評価、モデル更新、品質管理を確認する。期待される結果
モデル・プロンプト変更で既知の失敗が再発していないか継続評価できる。理解のポイント
- 回帰
- 評価セット
- 版管理
確認時の注意
- 確認環境: AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
- AWS公式ドキュメントで、対象サービスが提供する機能と前提条件を確認する。
- モデル、データ、アプリケーション、利用者の責任分界を混同しない。
基礎のおさらい
回帰テスト
変更後に既存の重要な挙動が悪化していないか確認するテスト。
評価セット版
評価ケースと期待結果・基準を固定して識別する版。
問題IDAWS-AIF-359
確認環境AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
最終技術確認2026-08-20
誤り・権利侵害を報告