プロンプト変更による回帰を検出する

一例では禁止事項や境界条件の回帰を捉えられない。

一例では禁止事項や境界条件の回帰を捉えられない。

問題の要件では、変更後の成功例を1件だけ確認するが解決する範囲と、別の工程が担う範囲を分けて判断する。

長さだけでは出力品質や安全性の変化を判断できない。

長さだけでは出力品質や安全性の変化を判断できない。

問題の要件では、プロンプトの文字数だけ比較するが解決する範囲と、別の工程が担う範囲を分けて判断する。

回帰の検出機会を失い、利用者への影響が出る。

回帰の検出機会を失い、利用者への影響が出る。

問題の要件では、評価をせず本番へ切り替えるが解決する範囲と、別の工程が担う範囲を分けて判断する。