生成品質のドリフトを検知する

どの変更・条件でドリフトが起きたか切り分けられる。

どの変更・条件でドリフトが起きたか切り分けられる。

問題の要件では、プロンプト・モデル版・入力カテゴリごとに品質指標を時系列で比較するが解決する範囲と、別の工程が担う範囲を分けて判断する。

本番変化とモデル自体の退行を別々に確認できる。

本番変化とモデル自体の退行を別々に確認できる。

問題の要件では、固定評価セットと本番サンプルを分け、異常時に再現テストするが解決する範囲と、別の工程が担う範囲を分けて判断する。