2週に1度のビッグバンリリースをデイリーリリース化するまでの苦悩 ~急成長するスタートアップのリアルな裏側~

by KNOWLEDGE WORK / 株式会社ナレッジワーク

Slide 1

Slide 1 text

2週に1度のビッグバンリリースをデイリーリリース化するまでの苦悩 mado / Knowledge Work

Slide 2

Slide 2 text

© Knowledge Work Inc. ⾃⼰紹介株式会社ナレッジワーク SRE / Scrum Master 樋⼝直⼈ (mado) 経歴パチプロ / パチスロライター / パチスロエンジニアビズリーチ: テックリード - Scala, AWS ナレッジワーク: 1⼈⽬SRE - Go, Google Cloud 趣味まどマギのパチスロ（4⽉の新台マギアレコードが楽しみ）ウルトラマラソン / スパルタンレースサウナ

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Slide 6

Slide 6 text

Slide 7

Slide 7 text

Slide 8

Slide 8 text

1. 会社‧事業紹介

Slide 9

Slide 9 text

© Knowledge Work Inc. Proﬁle 会社概要 9 創業⽇ 2020年4⽉1⽇代表者⿇野耕司資本⾦ 61.3億円（資本準備⾦等含む）事業内容ナレッジワークの開発‧提供主な株主グロービス‧キャピタル‧パートナーズ、DNX Ventures、WiL One Capital、ANRI、XTech、Salesforce Ventures ユーザベース、フォースタートアップス、Sansan

Slide 10

Slide 10 text

© Knowledge Work Inc. ナレッジワークのミッション 10 できる喜びが巡る⽇々を届ける Deliver the joy of enablement 「昨⽇できなかった仕事が今⽇できるようになった」「今⽇うまく進められなかった仕事も明⽇はうまくできるかもしれない」そんな想いで働ければ、仕事に希望が持てるはずです。しかし、世の中の多くの⼈が「上司に恵まれない」「職場に恵まれない」「会社の仕組みに恵まれない」などの理由で、「努⼒しても成⻑できない」「努⼒しても成果が出ない」つまりは「努⼒しても報われない」という環境で仕事をしています。私たちは『イネーブルメント』を実現するプロダクトを提供することで世の中の⼈たちが仕事にできるようになることを⽀援し、働く喜びが巡る⽇々を届けます。我々はイネーブルメントの会社です

Slide 11

Slide 11 text

© Knowledge Work Inc. イネーブルメントの4つの提供価値 11 「ナレッジ」「ラーニング」「ワーク」「ピープル」の4つの領域が必要になります成果視点（業務視点）能⼒視点（⼈材視点）できるようになる（Canの最⼤化）ワーク領域ナレッジ領域ピープル領域ラーニング領域やるべきことが分かる（MUSTの明確化）ワーク領域業務プロセスの最適化ナレッジ領域コンテンツやノウハウの展開ピープル領域スキルの可視化ラーニング領域学習プログラムの提供

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

2. マルチプロダクトへの転換

Slide 16

Slide 16 text

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

マルチプロダクト化のbefore/after

Slide 20

Slide 20 text

Slide 21

Slide 21 text

Slide 22

Slide 22 text

© Knowledge Work Inc. システムアーキテクチャ before/after 22 モノリス自律分散アーキテクチャモノリスから⾃律分散アーキテクチャへプロダクトA プロダクトB プロダクトC LB Cloud Load Balancing backend A Cloud Run backend Cloud Run backend B Cloud Run frontend B Cloud Run frontend A Cloud Run backend C Cloud Run frontend C Cloud Run Frontend Vercel

Slide 23

Slide 23 text

Slide 24

Slide 24 text

3. リリースの課題

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

Slide 30

Slide 30 text

⾼頻度リリース化する上での課題

Slide 31

Slide 31 text

Slide 32

Slide 32 text

Slide 33

Slide 33 text

Slide 34

Slide 34 text

4. リリース改善の道のり

Slide 35

Slide 35 text

Slide 36

Slide 36 text

Slide 37

Slide 37 text

© Knowledge Work Inc. プロジェクト化 37 ● 全社巻き込みのためプロジェクト発⾜ ● ゴールは2つ ○ モノリスから⾃⽴分散アーキテクチャへの移⾏ ○ 低頻度ビッグバンデプロイから⾼頻度スモールデプロイへの移⾏ ● CTOやPrincipal Engineer、PdMなどを巻き込み ● プロジェクト名は Project Bamboo ○ ⽵を割ったような美しいサービス分割 ○ 地下茎 (Platform) による驚異的な繁殖⼒と成⻑スピード印象に残るようにイメージ画像も作成全社プロジェクト開始

Slide 38

Slide 38 text

© Knowledge Work Inc. モノリスの解体 38 モノリス⾃律分散アーキテクチャプロダクトごとに独⽴してデプロイできるように分割プロダクトは量産できるようにテンプレート化プロダクトA プロダクトB プロダクトC LB Cloud Load Balancing backend A Cloud Run backend Cloud Run backend B Cloud Run frontend B Cloud Run frontend A Cloud Run backend C Cloud Run frontend C Cloud Run Frontend Vercel

Slide 39

Slide 39 text

Slide 40

Slide 40 text

© Knowledge Work Inc. 40 サービスの品質保証 qa example worker example backend example gateway e2e 実施 stg example worker example backend example gateway e2e 実施 prd example worker example backend example gateway 🎉 e2eテストを強化 e2eテストが通ると次の環境へデプロイされる Cloud Deploy Delivery pipeline

Slide 41

Slide 41 text

デプロイ時のオペレーション分離

Slide 42

Slide 42 text

© Knowledge Work Inc. デプロイとterraform applyの分離デプロイ時にterraform apply アプリケーションデプロイ時に terraform apply 42 terraform applyを分離デプロイとterraform applyを分離デプロイとterraform applyを分離デプロイ & terraform apply デプロイ terraform apply terraform apply terraform apply

Slide 43

Slide 43 text

© Knowledge Work Inc. デプロイとterraform applyを分離 43 細かい単位で都度prd環境までapplyする運⽤へ master tf/qa tf/stg tf/prd Pull request → Approve → atlantis apply Pull request → Approve (SRE) → atlantis apply Pull request → Approve (SRE) → atlantis apply

Slide 44

Slide 44 text

© Knowledge Work Inc. デプロイとDB migrationの分離デプロイ時にDB migration アプリケーションデプロイ時に DB migration 44 DB migrationを分離デプロイとDB migrationの分離デプロイとDB migrationを分離デプロイ & DB migration デプロイ DB migration DB migration DB migration

Slide 45

Slide 45 text

© Knowledge Work Inc. デプロイとDB migrationの分離 45 毎⽇深夜にstg/prdへDB migrationする運⽤へ master db-migration/qa db-migration/stg db-migration/prd qa 実行 stg 実行 prd 実行 🌃 🌃 ● 各ブランチへのマージをトリガーに Cloud Build 起動 ○ Cloud Build で sql-migrate を実⾏ ● stg/prd への実⾏は深夜メンテナンスウィンドウに実⾏ ○ Pull request を Approve だけしておく ○ GitHub Workﬂow で⾃動マージ

Slide 46

Slide 46 text

移⾏期間中に起きること

Slide 47

Slide 47 text

Slide 48

Slide 48 text

Slide 49

Slide 49 text

5. 現状と効果

Slide 50

Slide 50 text

Slide 51

Slide 51 text

Slide 52

Slide 52 text

Slide 53

Slide 53 text

6. 今後の展望

Slide 54

Slide 54 text

Slide 55

Slide 55 text

Slide 56

Slide 56 text

© Knowledge Work Inc. Platform & SRE Group 56 樋⼝直⼈ ex-ビズリーチ SRE Google Cloud 資格9冠ギャンブラー渡邊尚吾 ex-Google Group Manager Google Cloud Champion Innovator 愛⽝家 SRE k8sとGitHub Actions のスペシャリスト世界⼀周トラベラー村岡宏是 ex-10X 本⽇全員会場に来ていますブースに遊びに来て気軽に話しかけてください