3.3標準
応答品質を改善するプロンプトを本番へ出す。
利用者への影響を限定する。
手順として適切なものを2つ選べ。
× 不正解
プロンプト変更も固定評価・少量トラフィック・内部利用者で新旧を比較し、停止条件・承認・ロールバックを用意する。
詳細解説
正しい固定評価セットと内部利用者・少量トラフィックで新旧の品質、安全性、費用を比較する
変更の影響を限定できる。
変更の影響を限定できる。
問題の要件では、固定評価セットと内部利用者・少量トラフィックで新旧の品質、安全性、費用を比較するが解決する範囲と、別の工程が担う範囲を分けて判断する。
正しい停止条件・旧版への戻し方・承認者・変更記録を定義する
異常時に復旧できる。
異常時に復旧できる。
問題の要件では、停止条件・旧版への戻し方・承認者・変更記録を定義するが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤りプロンプトは文言だけなので段階展開や回帰評価は不要である
挙動が変わる。
挙動が変わる。
問題の要件では、プロンプトは文言だけなので段階展開や回帰評価は不要であるが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤り少量展開で問題がなければ全ての言語・利用者を検証せず展開する
条件差を見落とす。
条件差を見落とす。
問題の要件では、少量展開で問題がなければ全ての言語・利用者を検証せず展開するが解決する範囲と、別の工程が担う範囲を分けて判断する。
実際に確かめる
一時的な検証環境で実行できる例です。
AWS公式AIF-C01 Domain 3.3・4.3の変更管理、段階展開、回帰評価を確認する。期待される結果
プロンプト変更をコード変更と同様に測定・承認・段階展開できる。理解のポイント
- 段階展開
- 回帰評価
- ロールバック
確認時の注意
- 確認環境: AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
- AWS公式ドキュメントで、対象サービスが提供する機能と前提条件を確認する。
- モデル、データ、アプリケーション、利用者の責任分界を混同しない。
基礎のおさらい
段階展開
変更を少量の利用者やトラフィックへ順番に広げる方法。
プロンプト回帰
プロンプト変更前後で固定質問の結果を比較する評価。
問題IDAWS-AIF-476
確認環境AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
最終技術確認2026-08-20
誤り・権利侵害を報告