保育・教育施設の業務省力化を提供する Webサービスの改善と技術的負債解消への取り組みーマイクロサービスへの挑戦ー

by コドモン開発チーム

Slide 1

Slide 1 text

2023年2月10日岡村謙杜 Chavdar Dimitrov 保育・教育施設の業務省力化を提供する Webサービスの改善と技術的負債解消への取り組みーマイクロサービスへの挑戦ー

Slide 2

Slide 2 text

2 ブルガリア出身、沖縄の大学を卒業後に東京の人事関連SaaS会社に入社。主にバックエンドの開発を担当。安全なリリースと快適な開発環境の構築に関心があります。 Chavdar Dimitrov チャブダール　ディミトロフ 2021.08 コドモンに開発エンジニアとして入社　　　　　マイクロサービス化に携わる経歴自己紹介

Slide 3

Slide 3 text

3 経歴プロダクト開発チームにて、バックエンド、フロントエンド問わず開発に携わる。Kotlinとチーム開発とオカメインコが好き。自己紹介岡村謙杜おかむらけんと 2021.05 コドモンに開発エンジニアとして入社 2021.10 プロダクト開発チームのマネージャーになる

Slide 4

Slide 4 text

4 Mission

Slide 5

Slide 5 text

5 すべての先生に子どもと向き合う時間と心のゆとりをこんなプロダクトを開発していますメインプロダクトは、保育・教育施設職員の業務を支援するWebアプリケーション。保護者と施設のやり取りを支えるモバイルアプリケーションや、施設職員向けモバイル版アプリケーション、外部サービスと連携するAPIなども開発しています。

Slide 6

Slide 6 text

6 はじめに

Slide 7

Slide 7 text

7 本題に入る前に

Slide 8

Slide 8 text

8 昨年のシステム稼働状況について

Slide 9

Slide 9 text

9 2022年4月から半年ほどシステム稼働が不安定な状況が時折発生してしまいました

Slide 10

Slide 10 text

10 安定稼働にもつながるマイクロサービスアーキテクチャ化について本日は話します

Slide 11

Slide 11 text

11 本日話す内容 1 2 3 なぜマイクロサービスアーキテクチャへ移行しているか ● 取り組んでいる理由 ● 移行戦略実際にどんな感じでやっているのか ● 開発の進め方(XP) ● 事例紹介：資料管理サービスの移行やってみての感想・学びこれからについて 4

Slide 12

Slide 12 text

12 本日話す内容 1 なぜマイクロサービスアーキテクチャへ移行しているか ● 取り組んでいる理由 ● 移行戦略実際にどんな感じでやっているのか ● 開発の進め方(XP) ● 事例紹介：資料管理サービスの移行やってみての感想・学びこれからについて 2 3 4

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

Slide 16

Slide 16 text

Slide 17

Slide 17 text

Slide 18

Slide 18 text

18 CONFIDENTIAL - © 2022 CoDMON Inc. 18 なぜマイクロサービスアーキテクチャへ移行しているか ● Aを修正したら関係ないと考えていたBに影響が出る ● 複数ブランチ運用による複雑度の増加 ● リリース後に1箇所不具合が見つかると、全てがロールバックされてしまう ● リリース調整のチーム間コミュニケーションの増加 ● どこか1箇所で問題が発生すると、システム全体に波及してしまう

Slide 19

Slide 19 text

19 CONFIDENTIAL - © 2022 CoDMON Inc. 19 なぜマイクロサービスアーキテクチャへ移行しているか ● Aを修正したら関係ないと考えていたBに影響が出る ● 複数ブランチ運用による複雑度の増加 ● リリース後に1箇所不具合が見つかると、全てがロールバックされてしまう ● リリース調整のチーム間コミュニケーションの増加 ● どこか1箇所で問題が発生すると、システム全体に波及してしまう安定してユーザーに価値を届け続けることが難しい状態に

Slide 20

Slide 20 text

20 CONFIDENTIAL - © 2022 CoDMON Inc. 20 なぜマイクロサービスアーキテクチャへ移行しているか ● Aを修正したら関係ないと考えていたBに影響が出る ● 複数ブランチ運用による複雑度の増加 ● リリース後に1箇所不具合が見つかると、全てがロールバックされてしまう ● リリース調整のチーム間コミュニケーションの増加 ● どこか1箇所で問題が発生すると、システム全体に波及してしまう安定してユーザーに価値を届け続けることが難しい状態に開発チームの機動力低下

Slide 21

Slide 21 text

Slide 22

Slide 22 text

Slide 23

Slide 23 text

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

Slide 30

Slide 30 text

Slide 31

Slide 31 text

Slide 32

Slide 32 text

Slide 33

Slide 33 text

Slide 34

Slide 34 text

34 CONFIDENTIAL - © 2022 CoDMON Inc. 34 なぜマイクロサービスアーキテクチャへ移行しているかビジネス視点・新規ユーザー獲得に繋がる・契約維持に繋がる・プロダクトの活用速度が上がる・重大なトラブルを防止できる etc. 技術視点・ドメイン複雑度・他サービスとの依存度・データ移行の必要性・スケーリングの必要度合い etc. ✖ 改修可能性を上げることで事業成長につながるか改修難易度と移行難易度

Slide 35

Slide 35 text

Slide 36

Slide 36 text

Slide 37

Slide 37 text

Slide 38

Slide 38 text

Slide 39

Slide 39 text

Slide 40

Slide 40 text

Slide 41

Slide 41 text

Slide 42

Slide 42 text

Slide 43

Slide 43 text

Slide 44

Slide 44 text

44 本日話す内容なぜマイクロサービスアーキテクチャへ移行しているか ● 取り組んでいる理由 ● 移行戦略実際にどんな感じでやっているのか ● 開発の進め方(XP) ● 事例紹介：資料管理サービスの移行やってみての感想・学びこれからについて 3 4 1 2

Slide 45

Slide 45 text

Slide 46

Slide 46 text

46 開発の進め方 1 開発手法開発サイクルブランチ戦略 2 1 3 1 3

Slide 47

Slide 47 text

47 開発の進め方 1 開発手法開発サイクルブランチ戦略 1 1 3 2

Slide 48

Slide 48 text

Slide 49

Slide 49 text

Slide 50

Slide 50 text

50 CONFIDENTIAL - © 2022 CoDMON Inc. 50 実際にどんな感じでやっているのか：開発の進め方プラクティス人間性　経済性　相互利益自己相似性　改善　ふりかえり　流れ　機会冗長性　失敗　品質ベイビーステップ責任の引き受け多様性チーム全体　計画ゲーム小さなリリース　受け入れテスト共同所有　持続可能なペースメタファー継続的インテグレーションテスト駆動開発　ペアプログラミングリファクタリング　シンプルな設計価値コミュニケーションシンプリシティフィードバック勇気リスペクト原則

Slide 51

Slide 51 text

Slide 52

Slide 52 text

52 CONFIDENTIAL - © 2022 CoDMON Inc. 52 実際にどんな感じでやっているのか：開発の進め方 Robert C.Martin (著), 角征典 (翻訳), 角谷信太郎 (翻訳) 「Clean Agile　基本に立ち戻れ」KADOKAWA 47ページ ● 全てのプラクティスを取り入れる ● 守破離の守を大切にする “一度にひとつだけのプラクティスを選んでも改善は見られるだろう。だが、組み合わせて使うようになれば、劇的な改善が見られるはずだ。プラクティスの相互作用が、その効果を増幅させるのである。” Kent Beck, Cynthia Andres, 角征典(訳) 「エクストリーム・プログラミング」オーム社 34 ページ

Slide 53

Slide 53 text

53 CONFIDENTIAL - © 2022 CoDMON Inc. 53 実際にどんな感じでやっているのか：開発の進め方 Robert C.Martin (著), 角征典 (翻訳), 角谷信太郎 (翻訳) 「Clean Agile　基本に立ち戻れ」KADOKAWA 47ページ ● 全てのプラクティスを取り入れる ● 守破離の守を大切にする “一度にひとつだけのプラクティスを選んでも改善は見られるだろう。だが、組み合わせて使うようになれば、劇的な改善が見られるはずだ。プラクティスの相互作用が、その効果を増幅させるのである。” Kent Beck, Cynthia Andres, 角征典(訳) 「エクストリーム・プログラミング」オーム社 34 ページ

Slide 54

Slide 54 text

54 開発の進め方開発手法開発サイクルブランチ戦略 2 1 3

Slide 55

Slide 55 text

Slide 56

Slide 56 text

Slide 57

Slide 57 text

57 開発の進め方開発手法開発サイクルブランチ戦略 1 3 3 2

Slide 58

Slide 58 text

Slide 59

Slide 59 text

Slide 60

Slide 60 text

Slide 61

Slide 61 text

Slide 62

Slide 62 text

Slide 63

Slide 63 text

Slide 64

Slide 64 text

Slide 65

Slide 65 text

Slide 66

Slide 66 text

66 CONFIDENTIAL - © 2022 CoDMON Inc. 66 実際にどんな感じでやっているのか：事例紹介 EC2 保護者向けサービス Amazon Aurora モノリス EC2 施設向けサービス Amazon Aurora 新サービス ECS Fargate 資料管理サービス AWS Fargate Amazon SQS Publisher Subscriber データ同期バッチ Amazon S3 Amazon S3 Amazon S3 AWS Fargate Amazon CloudFront

Slide 67

Slide 67 text

67 CONFIDENTIAL - © 2022 CoDMON Inc. 67 実際にどんな感じでやっているのか：事例紹介 EC2 保護者向けサービス Amazon Aurora モノリス EC2 施設向けサービス Amazon Aurora 新サービス ECS Fargate 資料管理サービス AWS Fargate Amazon SQS Publisher Subscriber データ同期バッチ Amazon S3 Amazon S3 Amazon S3 AWS Fargate Amazon CloudFront

Slide 68

Slide 68 text

Slide 69

Slide 69 text

69 CONFIDENTIAL - © 2022 CoDMON Inc. 69 実際にどんな感じでやっているのか：事例紹介バックエンド Kotlin 扱うドメインを型で表現できる初導入ではあるが、メンバーの経験があった E2Eテスト Gauge + Playwright 仕様をマークダウン形式で表現できる Chrome + FireFox + Safariのテストができる CI/CD GitHub Actions インフラ ECS 容易にスケールできる Dockerとの相性フロントエンド Nuxt.js 社内にナレッジが溜まっていたフロントで新しい技術を取り入れるのはリスクが高いと判断技術スタック

Slide 70

Slide 70 text

Slide 71

Slide 71 text

Slide 72

Slide 72 text

Slide 73

Slide 73 text

73 CONFIDENTIAL - © 2022 CoDMON Inc. 73 実際にどんな感じでやっているのか：事例紹介 APIとDBのみを移行する選択肢もありましたが、資料サービスに関しては変えたい仕様があり、このタイミングで変えたほうがリプレイス後に変えるより効率的だと判断しました。リプレイスのアプローチリリースしてからユーザーに数年使っていただいていたため、何が真に求められるかが解像度高くわかっていた

Slide 74

Slide 74 text

Slide 75

Slide 75 text

75 CONFIDENTIAL - © 2022 CoDMON Inc. 75 実際にどんな感じでやっているのか：事例紹介 Strangler patternとは ● 移行対象のサービスを稼働させつつ、横で代行となるサービスを構築する ● 並行稼働しながら徐々に新サービスに切り替える https://microservices.io/patterns/refactoring/strangler-application.html

Slide 76

Slide 76 text

Slide 77

Slide 77 text

Slide 78

Slide 78 text

Slide 79

Slide 79 text

Slide 80

Slide 80 text

Slide 81

Slide 81 text

Slide 82

Slide 82 text

Slide 83

Slide 83 text

Slide 84

Slide 84 text

Slide 85

Slide 85 text

Slide 86

Slide 86 text

Slide 87

Slide 87 text

Slide 88

Slide 88 text

Slide 89

Slide 89 text

Slide 90

Slide 90 text

90 CONFIDENTIAL - © 2022 CoDMON Inc. 90 実際にどんな感じでやっているのか：事例紹介 EC2 保護者向けサービス Amazon Aurora モノリス EC2 施設向けサービス AWS Fargate Amazon SQS Publisher Subscriber データ同期バッチ Amazon S3 AWS Fargate Amazon Aurora 新サービス ECS Fargate 資料管理サービス Amazon S3 Amazon S3 Amazon CloudFront

Slide 91

Slide 91 text

91 CONFIDENTIAL - © 2022 CoDMON Inc. 91 実際にどんな感じでやっているのか：事例紹介 Amazon Aurora 新サービス ECS Fargate 資料管理サービス Amazon S3 Amazon S3 EC2 保護者向けサービス Amazon Aurora モノリス EC2 施設向けサービス AWS Fargate Amazon SQS Publisher Subscriber データ同期バッチ Amazon S3 AWS Fargate Amazon CloudFront

Slide 92

Slide 92 text

Slide 93

Slide 93 text

93 CONFIDENTIAL - © 2022 CoDMON Inc. 93 実際にどんな感じでやっているのか：事例紹介テストの概要自動テスト（Gauge）+手動テストで移行バッチを担保するテスト観点自動テスト ● 移行したデータがS3やDBに入っているか ● 資料の状態の組み合わせなど網羅的に確認 ● 移行失敗によるロールバックの確認手動テスト ● データ移行前後の表示崩れがないかを確認 ● 移行バッチ実行による負荷のテスト ● 各種設定の確認(SQS,Datadog(log)など)

Slide 94

Slide 94 text

Slide 95

Slide 95 text

Slide 96

Slide 96 text

Slide 97

Slide 97 text

Slide 98

Slide 98 text

Slide 99

Slide 99 text

Slide 100

Slide 100 text

Slide 101

Slide 101 text

Slide 102

Slide 102 text

Slide 103

Slide 103 text

Slide 104

Slide 104 text

Slide 105

Slide 105 text

105 CONFIDENTIAL - © 2022 CoDMON Inc. 105 実際にどんな感じでやっているのか：事例紹介 EC2 保護者向けサービス Amazon Aurora モノリス EC2 施設向けサービス Amazon S3 移行前 Amazon Aurora 新サービス ECS Fargate 資料管理サービス Amazon S3 Amazon S3 Amazon CloudFront

Slide 106

Slide 106 text

106 CONFIDENTIAL - © 2022 CoDMON Inc. 106 実際にどんな感じでやっているのか：事例紹介 Amazon Aurora 新サービス ECS Fargate 資料管理サービス Amazon S3 Amazon S3 EC2 保護者向けサービス Amazon Aurora モノリス EC2 施設向けサービス Amazon S3 移行後 Amazon CloudFront

Slide 107

Slide 107 text

Slide 108

Slide 108 text

Slide 109

Slide 109 text

Slide 110

Slide 110 text

Slide 111

Slide 111 text

Slide 112

Slide 112 text

112 CONFIDENTIAL - © 2022 CoDMON Inc. 112 実際にどんな感じでやっているのか：事例紹介 Amazon Aurora 新サービス ECS Fargate 資料管理サービス Amazon S3 Amazon S3 EC2 保護者向けサービス Amazon Aurora モノリス EC2 施設向けサービス Amazon S3 移行前 Amazon CloudFront モバイルアプリ

Slide 113

Slide 113 text

113 CONFIDENTIAL - © 2022 CoDMON Inc. 113 実際にどんな感じでやっているのか：事例紹介 Amazon Aurora 新サービス ECS Fargate 資料管理サービス Amazon S3 Amazon S3 Amazon Aurora モノリス Amazon S3 移行後 Amazon CloudFront EC2 保護者向けサービス EC2 施設向けサービスモバイルアプリ

Slide 114

Slide 114 text

Slide 115

Slide 115 text

Slide 116

Slide 116 text

116 CONFIDENTIAL - © 2022 CoDMON Inc. 116 実際にどんな感じでやっているのか：事例紹介 ● データマイグレーション並行運用できるようにデータ同期を行った。網羅性の高い自動テストがあることで、不具合修正や細かな仕様変更に対し、回帰的なテストが行えた ● 施設向けサービス常時同期でデータ移行をしていたため、新旧サービスを並行稼働させることができ、一気に移行するということを回避したカナリアリリースを行い、少しずつ適応施設を増やしていった ● 保護者アプリフィーチャーフラグ・フェイルセーフ・段階リリースを利用し、安全を担保した状態でリリースまとめ

Slide 117

Slide 117 text

Slide 118

Slide 118 text

Slide 119

Slide 119 text

119 CONFIDENTIAL - © 2022 CoDMON Inc. 119 実際にどんな感じでやっているのか：事例紹介 ● Aを修正したら関係ないと考えていたBに影響が出る　→影響は資料サービス内に閉じている ● 複数ブランチ運用による複雑度の増加　→トランクベース開発による複雑度の低下 ● リリース後に１箇所デグレが起きると全てが戻ってしまう　→他のサービスの影響を受けない ● リリース調整のチーム間コミュニケーションの増加　→独立してデプロイできる ● どこか一箇所に問題があると、システム全体に波及してしまう　→資料サービス内だけに閉じており、他の影響も受けない

Slide 120

Slide 120 text

120 本日話す内容なぜマイクロサービスアーキテクチャへ移行しているか ● 取り組んでいる理由 ● 移行戦略実際にどんな感じでやっているのか ● 開発の進め方(XP) ● 事例紹介：資料管理サービスの移行やってみての感想・学びこれからについて 2 4 3 1

Slide 121

Slide 121 text

121 CONFIDENTIAL - © 2022 CoDMON Inc. 121 やってみての感想・学び ● XP導入による恩恵資料サービスは安全に素早くリリースができる状態になった。ペアプログラミングにより属人化がなくなり、メンバーそれぞれが得意分野で力を発揮しつつ、他の分野においても成長できた。 ● 自動テストを初期から入れたので安全に進めることができたテスト作成に時間を投資し続けることについては、強い気持ちが必要。途中で書かないほうが早いのではと感じる時が来たりする。 (今はチームメンバ全員が書いて良かったと思っています） ● 既存サービスとの関わりが難しい既存サービスの仕様や制約の調査を行うことが大切。リプレイスがユーザーの業務に影響を与えないように、トラブルがあった場合もすぐに切り戻せる体制を作っておく。 ● 初動の加速が重要初めて作成する基盤が多かったこともあり、プロジェクト完了に8ヶ月間を費やした。今回の経験を蓄えたイネイブリングチームを作ることで、次回以降の初動を早めていきたい。

Slide 122

Slide 122 text

122 CONFIDENTIAL - © 2022 CoDMON Inc. 122 やってみての感想・学び ● XP導入による恩恵資料サービスは安全に素早くリリースができる状態になった。ペアプログラミングにより属人化がなくなり、メンバーそれぞれが得意分野で力を発揮しつつ、他の分野においても成長できた。 ● 自動テストを初期から入れたので安全に進めることができたテスト作成に時間を投資し続けることについては、強い気持ちが必要。途中で書かないほうが早いのではと感じる時が来たりする。 (今はチームメンバ全員が書いて良かったと思っています） ● 既存サービスとの関わりが難しい既存サービスの仕様や制約の調査を行うことが大切。リプレイスがユーザーの業務に影響を与えないように、トラブルがあった場合もすぐに切り戻せる体制を作っておく。 ● 初動の加速が重要初めて作成する基盤が多かったこともあり、プロジェクト完了に8ヶ月間を費やした。今回の経験を蓄えたイネイブリングチームを作ることで、次回以降の初動を早めていきたい。

Slide 123

Slide 123 text

123 CONFIDENTIAL - © 2022 CoDMON Inc. 123 やってみての感想・学び ● XP導入による恩恵資料サービスは安全に素早くリリースができる状態になった。ペアプログラミングにより属人化がなくなり、メンバーそれぞれが得意分野で力を発揮しつつ、他の分野においても成長できた。 ● 自動テストを初期から入れたので安全に進めることができたテスト作成に時間を投資し続けることについては、強い気持ちが必要。途中で書かないほうが早いのではと感じる時が来たりする。 (今はチームメンバ全員が書いて良かったと思っています） ● 既存サービスとの関わりが難しい既存サービスの仕様や制約の調査を行うことが大切。リプレイスがユーザーの業務に影響を与えないように、トラブルがあった場合もすぐに切り戻せる体制を作っておく。 ● 初動の加速が重要初めて作成する基盤が多かったこともあり、プロジェクト完了に8ヶ月間を費やした。今回の経験を蓄えたイネイブリングチームを作ることで、次回以降の初動を早めていきたい。

Slide 124

Slide 124 text

124 CONFIDENTIAL - © 2022 CoDMON Inc. 124 やってみての感想・学び ● XP導入による恩恵資料サービスは安全に素早くリリースができる状態になった。ペアプログラミングにより属人化がなくなり、メンバーそれぞれが得意分野で力を発揮しつつ、他の分野においても成長できた。 ● 自動テストを初期から入れたので安全に進めることができたテスト作成に時間を投資し続けることについては、強い気持ちが必要。途中で書かないほうが早いのではと感じる時が来たりする。 (今はチームメンバ全員が書いて良かったと思っています） ● 既存サービスとの関わりが難しい既存サービスの仕様や制約の調査を行うことが大切。リプレイスがユーザーの業務に影響を与えないように、トラブルがあった場合もすぐに切り戻せる体制を作っておく。 ● 初動の加速が重要初めて作成する基盤が多かったこともあり、プロジェクト完了に8ヶ月間を費やした。今回の経験を蓄えたイネイブリングチームを作ることで、次回以降の初動を早めていきたい。

Slide 125

Slide 125 text

125 CONFIDENTIAL - © 2022 CoDMON Inc. 125 やってみての感想・学び ● XP導入による恩恵資料サービスは安全に素早くリリースができる状態になった。ペアプログラミングにより属人化がなくなり、メンバーそれぞれが得意分野で力を発揮しつつ、他の分野においても成長できた。 ● 自動テストを初期から入れたので安全に進めることができたテスト作成に時間を投資し続けることについては、強い気持ちが必要。途中で書かないほうが早いのではと感じる時が来たりする。 (今はチームメンバ全員が書いて良かったと思っています） ● 既存サービスとの関わりが難しい既存サービスの仕様や制約の調査を行うことが大切。リプレイスがユーザーの業務に影響を与えないように、トラブルがあった場合もすぐに切り戻せる体制を作っておく。 ● 初動の加速が重要初めて作成する基盤が多かったこともあり、プロジェクト完了に8ヶ月間を費やした。今回の経験を蓄えたイネイブリングチームを作ることで、次回以降の初動を早めていきたい。

Slide 126

Slide 126 text

126 本日話す内容なぜマイクロサービスアーキテクチャへ移行しているか ● 取り組んでいる理由 ● 移行戦略実際にどんな感じでやっているのか ● 開発の進め方(XP) ● 事例紹介：資料管理サービスの移行やってみての感想・学びこれからについて 2 1 4 3

Slide 127

Slide 127 text

Slide 128

Slide 128 text

Slide 129

Slide 129 text

Slide 130

Slide 130 text

130 ちなみに

Slide 131

Slide 131 text

Slide 132

Slide 132 text

Slide 133

Slide 133 text

133 CONFIDENTIAL - © 2022 CoDMON Inc. 133 なぜマイクロサービスアーキテクチャへ移行しているか https://tech.codmon.com/ent ry/2022/06/28/134446 https://speakerdeck.com/co dmoninc/ji-shu-de-fu-zhai-ni xiang-kihe-isok-keruzi-shi-h asukirufu-noguang-garinimox i-garuhua

Slide 134

Slide 134 text

134 コドモン採用ページ開発ブログコドモンでは一緒に働きたい仲間を募集しています！