「非常に残念ですが、切り戻しましょう...」システムリプレイスのアンチパターンに立ち向かったリーダーの話

Slide 1

Slide 1 text

2022.12.09 株式会社うるる　河本周時「非常に残念ですが、切り戻しましょう...」システムリプレイスのアンチパターンに立ち向かったリーダーの話

Slide 2

Slide 2 text

Copyright © 2022 ULURU inc. All Rights Reserved. 　株式会社うるる　河本周時プロフィール ● 年齢 : 1996年生まれの26歳 ● 入社 : 5年目(インターン入れると6年目) ○ 2018年に新卒としてJoin ● バックエンドエンジニアとして複数プロダクトを経験 ● 2年目にプロジェクトリーダーを経験 ● 現在はチームリーダーとして従事 ● バイク2台持ち ○ Ninja400 KRT ○ Z125 PRO

Slide 3

Slide 3 text

自社とサービスの紹介

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Slide 6

Slide 6 text

本日の発表内容について

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

双方向データ連携が必要になった背景について

Slide 10

Slide 10 text

Copyright © 2022 ULURU inc. All Rights Reserved. 　リプレイスについて1 ● バック/フロント/インフラ/DB全てを刷新! ● 下記制約のため新旧システムの並行稼働を行うことが決定...! ①ビッグバンリリースを避けるために段階リリースを選択 ②その過程でDBを分割 ③双方向データ連携が必要になった双方向データ連携は一般的に言われるアンチパターンですが、それを踏み抜きにいきました ! ビッグバンリリース  並行稼働 

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

プロジェクト進行上の課題と対策

Slide 14

Slide 14 text

Slide 15

Slide 15 text

Slide 16

Slide 16 text

Copyright © 2022 ULURU inc. All Rights Reserved. 　双方向連携に利用したツールの理解が困難【課題】 ● SymmetricDSというオープンソースの RDB同期ツールを利用 ● 日本語の文献がほぼない ● 変換の実現に時間がかかった ● 連携エラーの原因の特定がしづらい ● 連携エラーの解消が困難 ● 有償サポートが英語対応のみ SymmetricDS 公式ドキュメント

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Copyright © 2022 ULURU inc. All Rights Reserved. 　新旧それぞれのシステム設計とDB設計に対しての深い知識が必要【課題】 ● 旧DBのカラムを、新DBのどのカラムにどう変換して連携すれば良いのか調査が必要 ● カラムの型は一致しているか確認が必要 ● 連携と移行が必要なテーブルとデータの洗い出しが必要 ○ 誰に確認すれば良いのか不明瞭 ○ 不整合なデータの扱いが不明瞭 ● 連携と移行したデータは新旧どちらのアプリでも期待通りに表示されるようにする必要がある旧DB… 新DB… 旧システム… 新システム…

Slide 20

Slide 20 text

Copyright © 2022 ULURU inc. All Rights Reserved. 【対策】 ● ビジネスドメインのエキスパートに協力を依頼する ● 設計書やER図を取得した ● テーブルカラム単位のマッピングや変換表を作成　新旧システムの設計、ビジネスドメインの知識、 DBの制約、DB定義の差異などの理解が必要契約周りに詳しい新システムに詳しい顧客データに詳しい　新旧それぞれのシステム設計とDB設計に対しての深い知識が必要

Slide 21

Slide 21 text

Slide 22

Slide 22 text

Slide 23

Slide 23 text

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Copyright © 2022 ULURU inc. All Rights Reserved. 　限られた停止時間の中で複雑なリリース完遂が必要【対策】 ● リリース作業未経験者でも迷わずにできるレベルで細かい手順書を用意 (1200手順ほど) ● データ確認をなるべく自動化できるようにチェック用のスクリプトを用意した ● リリースリハーサルは、もしもに備えて、主担当以外のメンバーも実施して手順の理解に努めた手順書自動化スクリプト

Slide 27

Slide 27 text

ここまでにさまざまな課題や困難を乗り越えてきてようやくリリースができました!🎉🥳🎉

Slide 28

Slide 28 text

段階リリースの第1弾が終わり、第2弾のリリースに向けてやっと順調にプロジェクトが進んでいくと思っていたら...

Slide 29

Slide 29 text

「非常に残念ですが、切り戻しましょう...」

Slide 30

Slide 30 text

Slide 31

Slide 31 text

リリース後に発生した課題と対策

Slide 32

Slide 32 text

Slide 33

Slide 33 text

Slide 34

Slide 34 text

Copyright © 2022 ULURU inc. All Rights Reserved. 　解消が難しいエラーが発生【課題】 ● 本番リリースをした後にエラーが頻発 ● 開発用環境で再現しないため原因の追求が困難 ● 解消するにはDBにデータパッチを流す必要がある ● 一度エラーが発生すると後続処理が止まるため解消まで時間をかけられない WAKKAわっかんない...🥺 (※WAKKAは双方向連携プロジェクト名 )

Slide 35

Slide 35 text

Slide 36

Slide 36 text

Slide 37

Slide 37 text

Slide 38

Slide 38 text

Slide 39

Slide 39 text

Slide 40

Slide 40 text

Slide 41

Slide 41 text

もし同じ取り組みをするなら

Slide 42

Slide 42 text

Copyright © 2022 ULURU inc. All Rights Reserved. 　もし同じ取り組みをするなら ● 双方向連携する際に意識すると良いこと ○ 双方向連携するツールの事前検証を入念に行う ○ ステークホルダーを巻き込んで進める ○ データ移行する際は、並列処理が可能な設計をする ○ データ移行に耐えうるマシンスペックを事前に検証しておく ○ リリース手順書は誰が行っても迷わないようにする ○ リリースリハーサルは複数回行う

Slide 43

Slide 43 text

Slide 44

Slide 44 text

Copyright © 2022 ULURU inc. All Rights Reserved. 　ビッグバンリリースと双方向データ連携のリスク【ビッグバンリリースのリスク】 ● 動作確認にかなり時間がかかる ● 切り戻しが困難になる ● 不具合の切り分けが大変【双方向データ連携のリスク】 ● 過去データの移行が大変 ● データ不整合が生じる可能性がある ● 利用ツールの検証に時間がかかる ● データ連携が遅延すると影響大 ● 不具合調査に時間がかかる