異常値を隔離して分析を継続する

データ品質では、完全性、正確性、一貫性、適時性、妥当性をルールと測定値で定義する。

ルールで外れ値をフラグ付けし、隔離テーブルへ保存する

異常値隔離はデータを消さずに品質違反を分離する。

外れ値を平均値で上書きする

補間は根拠と監査を伴う別処理である。

異常が1件でも全パイプラインを無条件停止する

停止条件は違反率と業務影響で決める。

S3 Lifecycleで異常行を削除する

Lifecycleは保存ルールである。