3.2標準
社内検索の上位候補に、似ているが権威性の低い文書が混ざる。
回答へ使う根拠を改善する。
評価・改善として適切なものを2つ選べ。
× 不正解
RAGの順位は関連度だけでなく版・権威性・権限・鮮度を考慮し、評価セットで根拠の正確さと順位を確認する。
詳細解説
正しい関連度だけでなく、文書の版、権威性、アクセス権、鮮度をランキングへ反映する
質問に近いだけでなく利用可能で正しい根拠を優先できる。
質問に近いだけでなく利用可能で正しい根拠を優先できる。
問題の要件では、関連度だけでなく、文書の版、権威性、アクセス権、鮮度をランキングへ反映するが解決する範囲と、別の工程が担う範囲を分けて判断する。
正しい質問と回答の一部を含む評価セットで、根拠の正確さと順位を人手確認する
検索スコアだけでは測れない実用性を確認できる。
検索スコアだけでは測れない実用性を確認できる。
問題の要件では、質問と回答の一部を含む評価セットで、根拠の正確さと順位を人手確認するが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤りベクトル距離が最小なら現行性や権限を確認しない
検索の近さは正当性を保証しない。
検索の近さは正当性を保証しない。
問題の要件では、ベクトル距離が最小なら現行性や権限を確認しないが解決する範囲と、別の工程が担う範囲を分けて判断する。
誤り引用元の表示をなくして利用者の迷いを減らす
根拠を確認できず誤りの訂正が難しくなる。
根拠を確認できず誤りの訂正が難しくなる。
問題の要件では、引用元の表示をなくして利用者の迷いを減らすが解決する範囲と、別の工程が担う範囲を分けて判断する。
実際に確かめる
一時的な検証環境で実行できる例です。
Amazon Bedrock Knowledge Bases公式の検索・再ランキングとAIF-C01 Domain 3.2を確認する。期待される結果
意味の近さと、回答根拠として採用できる品質を分けて評価できる。理解のポイント
- 再ランキング
- 権威性
- 鮮度
確認時の注意
- 確認環境: AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
- AWS公式ドキュメントで、対象サービスが提供する機能と前提条件を確認する。
- モデル、データ、アプリケーション、利用者の責任分界を混同しない。
基礎のおさらい
再ランキング
検索候補を追加の特徴やモデルで並べ替え、上位品質を改善する処理。
根拠の正確さ
回答の主張を本当に支持する文書が引用されている程度。
問題IDAWS-AIF-202
確認環境AWS公式AIF-C01試験ガイドとAWS公式ドキュメントの確認
最終技術確認2026-08-20
誤り・権利侵害を報告