DevOpsDaysTokyo2024_週5時間から始めた活動が組織の壁を越え__商用サービスの運用者を救った話.pdf

Slide 1

Slide 1 text

Slide 2

Slide 2 text

© DENSO CORPORATION All Rights Reserved. 2 冨田進 Susumu Tomita デンソークラウドサービス開発部 CCoE(Cloud Center of Excellence) 課 Software Engineer 2018年にデンソーへ入社現在はWebサービスのソフトウェア開発と CCoE を担当島津直道 Naomichi Shimazu デンソークラウドサービス開発部 CCoE 課寿司を握って食べるエンジニア 2017年にデンソーに入社現在は Web サービスのアーキテクチャ設計及び構築と非機能要件定義を担当自己紹介

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

© DENSO CORPORATION All Rights Reserved. 5 • Terraform 基礎トレーニング • 社内向け AWS セキュリティガイドライン • 運用筋トレーニング 👈今日はこの話をします • IT サービス運用における運用管理のスキルや知識を鍛えるトレーニング。Terrakoyaメンバーがトレーナーとなり、実際の現場の課題を一緒に解決していく。例 : AWSのコスト最適化、リリースプロセスの最適化 Terrakoyaがこれまでリリースしたプロダクト

Slide 6

Slide 6 text

Slide 7

Slide 7 text

© DENSO CORPORATION All Rights Reserved. Title / Month XX, 2023 (Please enter it from the "Insert" → "Header and Footer") 7 チームの立ち位置・登場人物自治体向けサービスチーム Terrakoyaチームパートナー自治体マネージャー営業チームトレーニングを提供トレーニーとして参加提案、要望ヒアリング作業依頼基盤刷新担当

Slide 8

Slide 8 text

© DENSO CORPORATION All Rights Reserved. 8 はじめに、実際にリリースチケットや作業ログをみて、具体的にどのようにリリースが行われているか分析した。その結果、次のことがわかった。 • 一カ月のマイルストンで開発、リリースが繰り返されていた • 自治体×機能ごとにリリースプロセスがあり、並行で行われていた • 開発、テストはバラバラに行われていたが、リリースとリリース後の確認を一度にまとめていた • 一度のリリースに 20 時間かかっている • リリース作業はパートナーへ委託しており、テスト環境、ステージング環境、本番環境へのリリース後に必ずデンソー側で確認作業を行っていた実物を見て、事実を押さえる

Slide 9

Slide 9 text

Slide 10

Slide 10 text

© DENSO CORPORATION All Rights Reserved. 11 営業チームに仮説を共有して、事実なのかどうか確かめた • 月1回のリリースを待たずに本番リリースできる機能がある • 体感では、8割のリリースは Config（設定ファイル）変更だけで済むものに見えている • リリース後の確認作業に工数がかかっている • パートナーとデンソーで重複している確認作業がある • デンソーで実施できる作業までパートナーに依頼してしてる • パートナーに依頼することでコミュニケーションや確認作業に工数がかかるが、現状の仕組みのままではデンソー側にタスクを戻すのが難しく、実現方法が見つかっていない • Config 変更をデンソーで行えると一番効果があるのではないか会話した結果、 Config 変更のリリースをデンソーだけで行えれば、大きな改善効果がありそうだということがわかる仮説を立てて、実際にやっている人にヒアリングして検証する

Slide 11

Slide 11 text

© DENSO CORPORATION All Rights Reserved. 12 その結果、次のことがわかった。 • デンソーの営業チームから直接パートナーに依頼が行われていた • Config の項目を決めるまでに複数回のやり取りをパートナーと行っていた • Config はエクセルの入力値を元にマクロを利用して、PHP のコードに変換されていた • エクセルマクロのコードはバージョン管理されておらず、どの顧客でどのマクロを利用して Config を生成したのかデンソーにはわからなかった • PHP のコードに変換した後にさらに手作業でコードの修正が行われた。また、どこを変更するのかリリース手順書に書かれていなかった Config の変更をデンソーだけで行えるようになるには、営業担当者の動きも含めた、リリースフロー全体に着目して設計が必要なことがわかった Config変更のリリースフローをさらに詳細に把握する

Slide 12

Slide 12 text

Slide 13

Slide 13 text

© DENSO CORPORATION All Rights Reserved. 14 • 巻き取れそうなリリースフローの全てに対して自動化を実施するのは現実的ではない • リリースを実施する人への導入負荷が大きい • 9月末の基盤刷新以降は使われなくなるのでできるだけ早く導入したい • まずは自動化する効果が大きい機能から着手することにした • 昨年度のリリース回数とリリース時間の実績を分析し、自動化する効果が大きい機能を特定した過去のリリース実績からどの機能リリースを自動化するかを決めたリリース実績を並べていつ、誰が、何に、どれくらいの時間をかけたかを分析

Slide 14

Slide 14 text

Slide 15

Slide 15 text

© DENSO CORPORATION All Rights Reserved. 16 技術的にできそうなのは分かったけれど、非エンジニアである営業がリリース作業を実施できるかどうかは、また別のお話特に Git を使って Config をレポジトリにプッシュするのが難しいと考えた難しそうならさらに実施しやすい形に作り込む必要があると考えていたそのため、営業にパイプラインの設計ができた段階でフィードバックをもらうやれそうです。と回答をいただく再度、営業にヒアリング

Slide 16

Slide 16 text

© DENSO CORPORATION All Rights Reserved. 17 技術的にできそうなのは分かったけれど、非エンジニアである営業がリリース作業を実施できるかどうかは、また別のお話特に Git を使って Config をレポジトリにプッシュするのが難しいと考えた難しそうならさらに実施しやすい形に作り込む必要があると考えていたそのため、営業にパイプラインの設計ができた段階でフィードバックをもらうやれそうです。と回答をいただく再度、営業にヒアリングいきなり作り込みすぎない実際に使う人の許容できる範囲を探る

Slide 17

Slide 17 text

© DENSO CORPORATION All Rights Reserved. 18 導入までにやるべきことが分かったので、自動化したリリースフローを運用開始できそうかを見積もった。リリースパイプラインを導入から、現行基盤が終了する2024年9月末まで運用した場合のコスト削減効果を見積もる。非エンジニアでもわかるように時間とお金でコスト削減効果を表現した。営業とマネージャーに提案し、ぜひやりましょうと前向きな返事をいただけた。想像していたよりも削減効果があり、営業もマネージャーもノリノリにリリース自動化の効果を見積もる

Slide 18

Slide 18 text

© DENSO CORPORATION All Rights Reserved. 19 導入までにやるべきことが分かったので、自動化したリリースフローを運用開始できそうかを見積もった。リリースパイプラインを導入から、現行基盤が終了する2024年9月末まで運用した場合のコスト削減効果を見積もる。非エンジニアでもわかるように時間とお金でコスト削減効果を表現した。営業とマネージャーに提案し、ぜひやりましょうと前向きな返事をいただけた。想像していたよりも削減効果があり、営業もマネージャーもノリノリにリリース自動化の効果を見積もる相手の立場に合わせて効果を表現する

Slide 19

Slide 19 text

© DENSO CORPORATION All Rights Reserved. 20 お客様の声成長・改善できたこと自分達では見直しができていなかった作業や気づいていなかったリスクを第三者視点でコメントを頂き、トレーニングではチームの弱点を明らかにし、自分達で一部対応ができるようになりました特に、トレーニングでは1回だけの改善に留まらず、確認すべき観点が理解できたため、継続的に自分達で対応できるようになりました Terrakoyaのトレーナーについて専門性が高いトレーナーの皆さんはAWSベストプラクティスの知識を保有しているだけでなく、サービスのシステム構成・運営体制、現場の課題の実態を理解した上で、自分たちに合ったトレーニングを提供して頂いたことで、納得感・安心感があったこと、成長している実感があったため、私はトレーニングを前向きに取り組むことができました