1.3標準
不正検知で見逃しコストが特に大きい。
正解率だけでモデルを選ばない。
指標選択として適切なものを2つ選べ。
× 不正解
指標は見逃し・誤検知の業務コストへ合わせ、適合率・再現率・閾値と正解率を組み合わせて比較する。
詳細解説
正しい再現率や偽陰性数を重視し、見逃しコストを評価する
不正を見逃さない要件を反映できる。
不正を見逃さない要件を反映できる。
問題の要件では、再現率や偽陰性数を重視し、見逃しコストを評価するが解決する範囲と、別の工程が担う範囲を分けて判断する。
正しい適合率、再現率、閾値、業務コストを同時に比較する
誤検知による調査負荷も含めて判断できる。
誤検知による調査負荷も含めて判断できる。
問題の要件では、適合率、再現率、閾値、業務コストを同時に比較するが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤りクラスが不均衡でも正解率だけを最大化する
少数の不正を無視しても高く見える。
少数の不正を無視しても高く見える。
問題の要件では、クラスが不均衡でも正解率だけを最大化するが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤り指標を決めずにモデルの印象で選ぶ
候補を再現可能に比較できない。
候補を再現可能に比較できない。
問題の要件では、指標を決めずにモデルの印象で選ぶが解決する範囲と、別の工程が担う範囲を分けて判断する。
実際に確かめる
一時的な検証環境で実行できる例です。
AWS公式AIF-C01 Domain 1.3の評価指標、分類、ビジネス要件を確認する。期待される結果
正解率だけでなく業務コストを含む指標選択を説明できる。理解のポイント
- 再現率
- 偽陰性
- 業務コスト
確認時の注意
- 確認環境: AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
- AWS公式ドキュメントで、対象サービスが提供する機能と前提条件を確認する。
- モデル、データ、アプリケーション、利用者の責任分界を混同しない。
基礎のおさらい
再現率
実際の陽性のうち、モデルが陽性と検出できた割合。
適合率
モデルが陽性と判定したもののうち、実際に陽性だった割合。
問題IDAWS-AIF-294
確認環境AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
最終技術確認2026-08-20
誤り・権利侵害を報告