高速で運用しやすいフィードをめざして/Improvement of Eight Feed

■イベント
Sansan Builders Box 2018
https://jp.corp-sansan.com/sbb2018/

■登壇概要
タイトル：「高速で運用しやすいフィードをめざして」
登壇者：Eight 事業部 Development Group エンジニア 太田 朗

▼Sansan Builders Box
https://buildersbox.corp-sansan.com/

Transcript

1. ⾼速で運⽤しやすい Feedをめざして
2. Sansan Builders Box What is it? 名刺アプリEightの話 特にFeedの話
3. Sansan Builders Box What is it? Eightとは？
4. Sansan Builders Box What is it? 名刺管理 ビジネスのためのSNS
5. Sansan Builders Box What is it? SNSによくある機能 || Feed
6. Sansan Builders Box What is it? Feedとは？
7. Sansan Builders Box What is it? 投稿, アクティビティ,ニュースなど なにかしらの情報の流れ
8. Sansan Builders Box What is it? Eight Feedとは？
9. Sansan Builders Box What is it? ・Eight使い始めました ・名刺更新情報 ・企業投稿 ・⽇経ニュース etc...
10. Sansan Builders Box What is it? ※以後、Feed→EightのFeedを指す
11. Sansan Builders Box What is it? Feedのバックエンドを刷新中
12. Sansan Builders Box What is it? 今回のFeed刷新の知⾒や 移⾏PJの歩き⽅を紹介します
13. Sansan Builders Box Agenda - ⾃⼰紹介 - 刷新プロジェクトの概要 - 再設計 - 移⾏
14. Sansan Builders Box Agenda - ⾃⼰紹介 - 刷新プロジェクトの概要 - 再設計 - 移⾏
15. ଠా ࿕（Akira Ohta） ೥ྸɿࡀ ॴଐɿ4BOTBOגࣜձࣾɺ0NPUFTBOEPSC ۀ຿ɿύϑΥʔϚϯεɺٕज़తෛ࠴ฦࡁͳͲ ڵຯͷ͋Δٕज़ɿ 'JSFCBTFɺ7VFKTɺ3FBDU
    /BUJWFɺ SFEBTIɺ"NB[PO
    "UIFOB Sansan株式会社 Eight事業部 エンジニア
16. Sansan Builders Box Agenda - ⾃⼰紹介 - 刷新プロジェクトの概要 - 再設計 - 開発 - 移⾏
17. Sansan Builders Box 刷新プロジェクトの概要- 現⾏ 古い図 新しい図
18. Sansan Builders Box 移⾏プロジェクトの概要- 現⾏ 古い図 新しい図
19. Sansan Builders Box 移⾏プロジェクトの概要 ・2015/5からfeed開発スタート。Eight開発メンバー約5⼈。 ・2018/11現在、メンバーは約20⼈。 ・様々な⼈がFeedに機能追加 ・当時の思想が反映しきれないことも ・事業の成⻑を優先
20. Sansan Builders Box 移⾏プロジェクトの概要 ・モデリングや実装が現状の機能を抽象化できていない ・新機能が実装できない ・バグが多い ・使われていない機能がある ・パフォーマンス ・apiレスポンスが遅い ・配信負荷が⾼い
21. Sansan Builders Box 移⾏プロジェクトの概要 連続的な変化では改善できない ↓ 刷新の決断に⾄る
22. Sansan Builders Box Agenda - ⾃⼰紹介 - 刷新プロジェクトの概要 - 再設計 - 移⾏
23. Sansan Builders Box 再設計 1. 現状の課題出し 2. 論理設計 3. 物理設計
24. Sansan Builders Box 再設計 モデリングがミスマッチ 複雑度の⾼い機能 使われていない機能
25. Sansan Builders Box 再設計 ・モデリングがミスマッチ ・設計しなおす ・複雑度の⾼い機能 ・複雑度が低い他の機能で代替 ・使われていない機能 ・削除
26. Sansan Builders Box 再設計 論理設計 いわゆるER図を書くところ
27. Sansan Builders Box 再設計 やり⽅は以下を参照下さい ָʑERDϨοεϯ RDB THE Right Way
28. Sansan Builders Box 再設計 図を出す
29. Sansan Builders Box 再設計 結果モデリング上は正しい状態 パフォーマンスは物理設計で
30. Sansan Builders Box 再設計 物理設計 || データをどう保存するか
31. Sansan Builders Box ・n:nの間には中間テーブル ・複数テーブルjoinするところのパフォーマンスが悪い 再設計
32. Sansan Builders Box 再設計 ・複数テーブルjoinするところのパフォーマンスが悪い ・⾮正規化（orderに使うカラムを中間テーブルに） ・アクティブユーザ分はキャッシュを作る
33. Sansan Builders Box 再設計 ・今までscalability観点でDynamoDBを使っていた ・モデリング・Rails的にもRDBがよい ・Amazon Auroraを使えば問題なさそう ・検証の結果RDBを使うことに
34. Sansan Builders Box 再設計 論理/物理設計を分けて正しいモデリングに ⾮正規化やキャッシュでパフォーマンスも⾼速
35. Sansan Builders Box Agenda - ⾃⼰紹介 - 刷新プロジェクトの概要 - 再設計 - 移⾏
36. Sansan Builders Box 移⾏ DynamoDB ↓ RDB
37. Sansan Builders Box 移⾏ ⼿段をどう決めるか 実装コスト、実⾏スピードのバランス
38. Sansan Builders Box 移⾏ 移⾏の図
39. Sansan Builders Box 移⾏ 移⾏の図
40. Sansan Builders Box 移⾏ 移⾏の図
41. Sansan Builders Box 移⾏ ・RDBに投⼊するところはRuby ・RubyやActiveRecordを使えることが⼤きい ・csv⽣成まで2⽇、Rubyの処理は半⽇ほど ・より⾼速な⾔語はあるものの、速度バウンドではない
42. Sansan Builders Box 移⾏ 移⾏の図
43. Sansan Builders Box 移⾏ 移⾏の図
44. Sansan Builders Box 移⾏ ・lambdaでデータ変換を担当 ・取り込む部分のロジックは先程のものを流⽤ ・実装コストを抑えられた
45. Sansan Builders Box 移⾏ 不要なコストをかけない Rubyを使えたことで⼯数減
46. Sansan Builders Box 全体のまとめ 全体のまとめ
47. Sansan Builders Box まとめ 時間の許す限り最⾼の設計を追求 論理/物理設計を分ける
48. Sansan Builders Box まとめ 実現可能で実装、実⾏できるデータ移⾏ 要件を考える 不要なコストをかけない
49. Sansan Builders Box まとめ 絶賛移⾏中！ 今後もEightのFeedをお楽しみに！
50. ご清聴ありがとうございました
51. Sansan Builders Box 新feedの開発 新規・書き直し部分は楽しい 既存とのつなぎ込みはつらい
52. Sansan Builders Box 新feedの開発 書き直しの後、既存の順序で開発 ↓ ⾟さが後半に集中…
53. Sansan Builders Box 新feedの開発 ⾟い作業はなるべく早めに着⼿ ⻑いプロジェクトは 開発順序もちゃんと考える
54. Sansan Builders Box まとめ 既存コードのメンテはつらい ⾟い作業を最後に持ってこない