1.2標準
承認モデルで見逃しのコストが大きい。
予測確率を業務判定へ変換する。
設計として適切なものを2つ選べ。
× 不正解
分類しきい値は確率そのものではなく業務コスト・検証性能・グループ影響を比較して決める。
詳細解説
正しい検証データで適合率・再現率と誤りの業務コストを比較してしきい値を決める
モデルスコアを業務判断へ対応付けられる。
モデルスコアを業務判断へ対応付けられる。
問題の要件では、検証データで適合率・再現率と誤りの業務コストを比較してしきい値を決めるが解決する範囲と、別の工程が担う範囲を分けて判断する。
正しい部署・地域などのグループごとに性能としきい値の影響を確認する
偏りを見落としにくい。
偏りを見落としにくい。
問題の要件では、部署・地域などのグループごとに性能としきい値の影響を確認するが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤り確率0.5を全ての業務で固定すれば最適になる
コストと分布で適切値は変わる。
コストと分布で適切値は変わる。
問題の要件では、確率0.5を全ての業務で固定すれば最適になるが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤りしきい値を変えてもモデルの性能は変わらない
適合率・再現率が変化する。
適合率・再現率が変化する。
問題の要件では、しきい値を変えてもモデルの性能は変わらないが解決する範囲と、別の工程が担う範囲を分けて判断する。
実際に確かめる
一時的な検証環境で実行できる例です。
AWS公式AIF-C01 Domain 1.2の分類しきい値、適合率、再現率、公平性を確認する。期待される結果
誤りのコストとグループ影響を考慮してしきい値を設定できる。理解のポイント
- しきい値
- 業務コスト
- グループ差
確認時の注意
- 確認環境: AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
- AWS公式ドキュメントで、対象サービスが提供する機能と前提条件を確認する。
- モデル、データ、アプリケーション、利用者の責任分界を混同しない。
基礎のおさらい
分類しきい値
予測確率を陽性・陰性などの決定へ変換する境界値。
業務コスト
見逃しや誤検知が業務へ与える損失やリスク。
問題IDAWS-AIF-452
確認環境AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
最終技術確認2026-08-20
誤り・権利侵害を報告