1.2基礎
S3に日々追加されるCSVログを、Athenaで効率よく分析できる形式へ変換する。
列指向圧縮を利用し、必要な列だけを読み取れるようにする。
最も適切な処理はどれか。
× 不正解
AWS Glue ETLでCSVをParquetへ変換すると、列指向圧縮と列プルーニングによりAthenaのスキャン量を削減しやすい。
詳細解説
正しいAWS Glue ETLジョブでCSVをParquetへ変換する
GlueのETLで形式変換・圧縮・パーティション出力を行い、Athenaのスキャン量を抑えられる。
GlueのETLで形式変換・圧縮・パーティション出力を行い、Athenaのスキャン量を抑えられる。
誤りCloudTrailでCSVをParquetへ変換する
CloudTrailはAWS API監査ログを記録するサービスで、データ形式変換は担当しない。
CloudTrailはAWS API監査ログを記録するサービスで、データ形式変換は担当しない。
誤りS3のバージョニングだけを有効化する
版管理はファイル形式や圧縮方式を変換しない。
版管理はファイル形式や圧縮方式を変換しない。
誤りIAMポリシーを変更して列指向化する
IAMは権限管理であり、保存データの形式を変換しない。
IAMは権限管理であり、保存データの形式を変換しない。
実際に確かめる
一時的な検証環境で実行できる例です。
AWS GlueのETL、Parquet、圧縮、Athenaの列プルーニングの公式説明を確認する。期待される結果
認証・監査・保存形式変換の役割を区別できる。理解のポイント
- AWS Glue ETL
- CSV
- Parquet
- 列指向
確認時の注意
- 確認環境: AWS公式DEA-C01試験ガイドと各サービスの公式ドキュメントの確認
- AWS公式DEA-C01 Domain 1と各サービスの公式ドキュメントを確認する。
基礎のおさらい
列指向形式
分析で一部の列だけを読む場合、Parquetの列指向配置と圧縮がスキャン量削減に寄与する。
変換後の管理
スキーマ、パーティション、圧縮codec、変換失敗ファイルの保存先を確認する。
問題IDAWS-DEA-027
確認環境AWS公式DEA-C01試験ガイドと各サービスの公式ドキュメントの確認
最終技術確認2026-08-20
誤り・権利侵害を報告