動いてるからヨシ！ / It works, ship it!

2026/07/23 埼京.dev
https://sai-kyo.connpass.com/event/395150/

Transcript

1. 動いてるからヨシ！ 埼京.dev #4 2026.07.23 シュン
2. 自己紹介 所属 株式会社カンリー シュン ARIYAMA Shunichiro X @shun_1218 店舗集客メディアの一括管理・分析・運用サービス 「カンリー店舗集客」 プロダクト全体に影響のありそうなアレコレを担当 02
3. プロダクトが蓄積してきたデータの活用 13万店舗を超える店舗に関するデータ 他プロダクトとの店舗データの連携 各種媒体に投稿されるクチコミの分析 03
4. BigQuery Google Cloud のデータ ウェアハウス サーバーレスでインフラの管理が不要 大規模データの集計が MySQL のような汎用 RDBMS に比べて速い 04
5. 同期の仕組み MySQL Avro 変更元 変更分を書き出し Cloud Storage 中間ストレージ MERGE BigQuery UPSERT で反映 同期先 変更分を Avro に書き出す BigQuery 側は MERGE で反映（UPSERT） 差分は1回あたり 数行〜数百行 05
6. 事件！ 06
7. BigQueryの料金体系 引用: BigQuery | Google Cloud (https://cloud.google.com/bigquery/pricing?hl=ja) 07
8. MERGEの仕組み MySQL でいうインデックスはない MERGE INTO <target> T ← 巨大なテーブル USING ← 差分（数行） <source> S ON T.id = S.id 更新時に全行の ID を確認する ← この条件で行を探す 一致する行があれば UPDATE なければ INSERT 書き込む差分は数行でもテーブル全体を読む 08
9. 料金体系をもう一度 引用: BigQuery | Google Cloud (https://cloud.google.com/bigquery/pricing?hl=ja) 09
10. パーティショニング＋クラスタリング 小規模データで検証 処理バイト数 Before After 削減率 44.08 KB 1.04 KB 97.6% 10
11. なぜ気付けなかったか 正しく動くことに注力 新しい取り組みなので実装は小規模で確実に動かすことに集中 良く言えば信頼、悪く言えば油断 主担当として入った時点で動いているものを疑わなかった 11
12. まとめ 見積もりって大事 前提を疑う コストも品質のうち 12