1.3標準
不正確率0.8以上を人手調査へ回す。
確率が実際の発生率として解釈できるか確認する。
評価として適切なものを2つ選べ。
× 不正解
予測確率は区間別の実績で校正を確認し、しきい値を業務コスト・見逃し・誤検知と合わせて評価する。
詳細解説
正しい予測確率の区間ごとに実際の陽性率を比較する
確率0.8の集団でおよそ8割が陽性かなど、信頼度を確認できる。
確率0.8の集団でおよそ8割が陽性かなど、信頼度を確認できる。
問題の要件では、予測確率の区間ごとに実際の陽性率を比較するが解決する範囲と、別の工程が担う範囲を分けて判断する。
正しいしきい値変更後の調査件数と見逃し・誤検知の影響を評価する
確率の利用目的と業務コストを結び付けられる。
確率の利用目的と業務コストを結び付けられる。
問題の要件では、しきい値変更後の調査件数と見逃し・誤検知の影響を評価するが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤り確率が0.8なら個別顧客が必ず陽性だと解釈する
確率は集団や条件に対する推定であり、個別の保証ではない。
確率は集団や条件に対する推定であり、個別の保証ではない。
問題の要件では、確率が0.8なら個別顧客が必ず陽性だと解釈するが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤り正解率だけで確率の信頼性を判断する
順位が正しくても確率の校正が悪い場合がある。
順位が正しくても確率の校正が悪い場合がある。
問題の要件では、正解率だけで確率の信頼性を判断するが解決する範囲と、別の工程が担う範囲を分けて判断する。
実際に確かめる
一時的な検証環境で実行できる例です。
AWS公式AIF-C01ガイドDomain 1.3の分類性能、確率、しきい値評価を確認する。期待される結果
確率の順位性能と校正、業務しきい値を区別できる。理解のポイント
- 校正
- 確率
- しきい値
確認時の注意
- 確認環境: AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
- AWS公式ドキュメントで、対象サービスが提供する機能と前提条件を確認する。
- モデル、データ、アプリケーション、利用者の責任分界を混同しない。
基礎のおさらい
確率校正
予測確率と、その確率を示した集団の実際の発生率が一致する程度。
しきい値
確率やスコアを陽性・陰性などの判断へ変換する境界値。
問題IDAWS-AIF-134
確認環境AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
最終技術確認2026-08-20
誤り・権利侵害を報告