入力スキーマの揺れを吸収して変換する

取り込み方式、データ形式、変換位置、再処理、運用責任の違いを整理する。

DynamicFrameを使い、必要に応じてResolveChoiceやApplyMappingを行う

DynamicFrameはスキーマの揺れを扱うGlue固有のデータ構造である。

常に固定スキーマのDataFrameとして即時読み込む

固定スキーマのDataFrameは安定した入力型を前提にする。

S3ライフサイクルで列型を統一する

S3ライフサイクルはオブジェクトの保存期間・クラスを管理する。

CloudWatchアラームで文字列を数値へ変換する

CloudWatchアラームはメトリクスに基づく通知・アクションを設定する。