Slide 13
Slide 13 text
13
②検索
※パーティション分割するケース例>
• 積み上げられるデータ(トランザクションデータなど)
• パーティションを作成する
AthenaからS3のデータに対してSQLでクエリを実⾏できる。スキャン量で課⾦。
データを 1. パーティション分割し、2. 列指向データフォーマットにして、コストを改善できる。
cm-nayuts-unload
├── month=012022
│ └── 0000_part_00.parquet
├── month=112021
│ └── 0000_part_00.parquet
└── month=122021
└── 0000_part_00.parquet
SELECT
col1
, col2
FROM table1
WHERE month = xxxx
AWS Glue
Data Catalog
など
Amazon
S3
Amazon
Athena
<1について>