MoT TechTalk #12 タクシーアプリ『GO』大規模トラフィックを捌く分析データ基盤の全容に迫る！

■ 内容
・Dataflow による車両位置情報のストリーミング収集パイプライン
・CDC（Change Data Capture）を使ったデータ収集の事例紹介
・dbtとDataformの検証から導入まで
・AI予約サービスのMLOps事例紹介

■ スライド内リンク集
p. 8
DeNA TechCon 2022 https://techcon2022.dena.dev/spring/session/arrival-predictio-ai-2-social-implementation/
MoT TechTalk #10 https://jtx.connpass.com/event/236252/
p. 10
MoT TechTalk #7 https://jtx.connpass.com/event/226030/
p. 16
Mercari Dataflow Template https://engineering.mercari.com/blog/entry/20210928-mtf2021-day3-2/
p. 52
BigQuery Assertion https://cloud.google.com/bigquery/docs/reference/standard-sql/debugging-statements?hl=ja
p. 60
採用情報 https://hrmos.co/pages/mo-t/jobs/1000004

■ YouTube
https://youtu.be/HJdP4_H_hJI?t=185

■ connpass
https://jtx.connpass.com/event/249940/

Transcript