Crawlerの実行頻度とコストを調整する

カタログ、Crawler、スキーマ、パーティション、メタデータ検索、権限の違いを整理する。

データ到着頻度とスキーマ変更に合わせてCrawlerを日次・イベント起動にする

Crawlerスケジュールはメタデータ更新頻度とコストを決める。

毎分Crawlerを無条件に実行する

過剰なCrawler頻度はスキャンを無駄にする。

Crawlerを永久に無効化する

Crawler無効化は自動メタデータ更新を止める。

S3保存クラスを変更してCrawler頻度を決める

S3保存クラスはアクセス・料金特性を変える。