プロダクト間のデータ連携をイベント駆動で作り直した話

2023年2月22日に開催された「【Autify x ZOZO x dip共同開催】AWSコスト削減事例祭り」の発表資料

https://zozotech-inc.connpass.com/event/273113/

Transcript

1. プロダクト間のデータ連携をイベント駆動で作り直した話 2023/02/22 dip株式会社 藤中雄太
2. アジェンダ • 自己紹介 • 弊社サービスについて • 従来のシステムについて • 課題 • イベント駆動化した新システムについて • 結果 • 振り返り 2
3. 自己紹介 3
4. 自己紹介 • 2022/03/01 dip株式会社入社 • JavaやGo言語を主力に バックエンドエンジニア をやっています 4
5. 従来のシステムについて 5
6. 従来のシステムについて 6
7. 従来のシステムについて 7 バイトルのデータを 見たい
8. 従来のシステムについて 8 データの流れ コボットで バイトルのデータも 見れる
9. 従来のシステムについて 9 データの流れ コボットの利用者が増加
10. 従来のシステムについて 10 データの流れ DB負荷が大きくなったため サーバ処理が不安定に APIアクセスが増加
11. 従来のシステムについて 11 データの流れ DBのレプリカを 増設することで安定化
12. 課題 12
13. 課題 コストの増加 DBサーバを増設のため インフラコストが5倍以上に 13 タイムラグ 5分に1回データを同期するシステム のため連携にタイムラグが発生
14. イベント駆動化した新システムについて 14
15. イベント駆動化した新システムについて 15 リクエスト データ レスポンス 従来のシステム
16. イベント駆動化した新システムについて 16 データ送信 新システム
17. イベント駆動化した新システムについて 17 データの流れ
18. イベント駆動化した新システムについて 18
19. イベント駆動化した新システムについて 19
20. イベント駆動化した新システムについて 20
21. 結果 21
22. 結果 コストの増加 DBサーバを増設のため インフラコストが5倍以上に 22
23. 結果 コストの増加 DBサーバを増設のため インフラコストが5倍以上に 23 コスト削減 規模縮小でインフラコストを 10分の1に削減
24. タイムラグ 5分に1回データを同期するシステム のため 連携にタイムラグが発生している 結果 24
25. タイムラグ 5分に1回データを同期するシステム のため 連携にタイムラグが発生している 結果 25 即時連携 送信が即行われるようになったため タイムラグなしにデータ連携が 行えるように
26. 振り返り 26
27. 振り返り • SNSの通知トリガーを 他プロダクトでも 使用できるようになった 27 • 改修範囲が広範囲に • LambdaのCICD環境設計に 手間取った よかったこと 大変だったこと
28. システムをイベント駆動にした話は以上です 28
29. 【宣伝】テックブログやってます • [dip テックブログ] で検索 • または以下のQRから 29 今回お話しした内容 も載っています
30. 【宣伝】エンジニア募集中です カジュアル面談などやっています お気軽にお申し込みください 30