Tamach-sre-3_ANDPAD-shimaison93

by shimaison93

Embed

Start on current slide

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

© 2026 ANDPAD All Rights Reserved. Confidential Confidential ● 2016年新卒で百貨店に総合職として入社 ● 2018年 Horizontal SaaSのベンダーに入社 ● 2021年アンドパッドにCREとして入社 ● 2023年退社 → 24年にアンドパッドに再入社 💪 カレー、PlayStation、ボディビルが好き島根雄也 / Yuya Shimane @YEngine8 Profile｜経歴 3 自己紹介

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Slide 6

Slide 6 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential 6 マルチプロダクト戦略現場管理を効率化したい工事写真の撮影・整理・台帳作成を効率化したい顧客と円滑にコミュニケーションしたい・顧客への提出物をスムーズに作成したい工程管理の手間を減らしたい円滑にコミュニケーションしたい検査や是正指示を効率化したい経営・営業データを可視化したい受発注・請求書受領を効率化したいｚ社内での承認フローを効率化したい断熱リフォームの効果を可視化したい現地調査を効率化したい現場訪問の回数を減らしたい安全衛生管理を徹底したい社外リソースを活用したいシステム連携で効率性を上げたい施工管理案件概要資料ボード写真写真台帳黒板黒板 AI作成豆図AI キャプチャーデジタルサイン報告出力レイアウト電子納品おうちノート工程表横断マイルストーンチャット報告図面検査 Analytics 引合粗利管理受発注請求管理資料承認サーモ 3Dスキャン遠隔臨場入退場管理 BPO API連携アプリマーケット

Slide 7

Slide 7 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential 7 極端に遅いリクエストとは何か処理が完了するまで数十秒~数分以上も要するような、ユーザー体験を著しく損なう HTTPリクエストのこと非効率なデータベースクエリや大量のデータに対する集計処理などにより、応答時間が極端に長くなるようなケースが該当する事業成長に伴い、機能・ユーザー数・データ量も増え、リリース当初は高速だった処理であっても徐々に劣化し、結果的に処理が重くなってしまうことも…

Slide 8

Slide 8 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential 担当者の思考や作業が分断し、積み上がると膨大な待機時間（人件費の無駄）が発生し、組織全体の生産性が著しく低下する ● 業務効率の劇的な低下とコスト増 8 なぜ遅いリクエストが事業インパクトに繋がるのか：ユーザー側ユーザーは数秒の待機で離脱することもあり、本来得られたはずの売上を直接的に失うこともあるシステム遅延によりエンドユーザーに影響が発生し、企業のブランド毀損に直結する場合がある ● 機会損失 ● 社会的信頼の失墜

Slide 9

Slide 9 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential 重くて使えないという体験は即時の解約につながらなくとも、NPSを下げ、新規獲得の難易度を上げることにもなり得る ● Churnと収益悪化 9 なぜ遅いリクエストが事業インパクトに繋がるのか：アンドパッド側非効率な処理を力技でさばくべく、ハイスペックサーバーへの増強で一時的にしのぐ場合があり、売上に寄与しない原価率の上昇を招き得る障害対応やパフォーマンス改善にエンジニアのリソースが奪われ、新機能のリリースが遅れ、市場競争力が低下することにも繋がり得る ● インフラコストの肥大化 ● 市場競争力の低下

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential 特定のエンジニア以外はSlack上で通知された検知をさほど見てすらいない状況だった ● 対応の属人化 12 2021年頃までのオペレーションにおける課題検知はされている...エンドポイントもどこか分かる... しかしながら、ユーザーがどのように使っていて、どの程度影響があるかの解像度が高くなかった影響の度合いが読めないので、プロダクトチームに共有してもリリースの対応や修正作業等に追われ、優先順位がどんどん後回しにされてしまっていた ● 影響の度合いが不明瞭 ● 優先順位が後回しになりがち

Slide 13

Slide 13 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential 13 ANDPADのCREとは Customer Reliability Engineer 一般的にサービスを利用するユーザーに対してサービスの信頼性を保つことが求められており、アンドパッドでは顧客がサービスを利用して業務を円滑に進められるよう、技術的アプローチにより顧客の不安を迅速に解決することをミッションとしている。メンバー単位で見るとプロダクト毎に担当を割り当てつつ、CREチームとしては部門を横断する様な動きをしている。プロダクト単体では解決しづらい課題もCREを介すことでプロダクト間のコミュニケーションをより円滑に進めることが期待される。 SRE ● サービスの信頼性をコードや自動化で担保することが主責務 CRE ● 顧客システムの信頼性向上を支援することが主責務

Slide 14

Slide 14 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential ユーザーが何をしたかったのかという業務コンテキストを心得ているため、遅延が発生した際、Bug起因なのか、ユーザーが意図的にデータを一括ダウンロードしようとしたのかなど判別でき、False Positiveをフィルタリングして、本当に改修が必要な課題を届けやすくできる ● ユーザーの文脈でログを解釈できる 14 なぜCREが担当すべきか顧客の契約プランや利用状況を把握しやすいため、技術的な影響度だけでなくビジネス上の影響度を加味した判断が下せる ● ログから原因を特定し、開発者と対等に議論しつつ、同時にCS担当へ顧客にどう説明すべきかを翻訳して伝えることができる ● これにより、影響が深刻な場合でも初動対応と顧客コミュニケーションをスムーズに行うことが期待できる ● 業務影響に基づいて優先順位付けできる ● 開発者と Biz の翻訳者としての役割

Slide 15

Slide 15 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential 15 監視体制の変遷：2025年までプロジェクトチームが発足遅いリクエストの監視スタート運用をCREチームに移管 Slack通知 > 人力調査 > 集計プロダクトチームに連携エンタープライズの利用監視条件の詳細化自動化 2020年頃 2021年頃 ~ 2024 ~ 2025年記録の集計から本質的な改善に向けてリソースを集中

Slide 16

Slide 16 text

Slide 17

Slide 17 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential 17 CREチームで改善したこと 1. 検知体制の再考 a. 検知する度に調査する運用 → 検知数を集計して優先度を判断する運用 i. エンドポイントの傾向や事象の背景などが把握でき、様々な判断がし易くなった 2. 共有方法の再考 a. どうなった時点で、どこで、誰に対して、どの情報を共有するかを整理した 3. 効果検証 a. 検知 → 調査 → 共有 → 修正を繰り返した結果としてその後どう変わったかを検証 4. 業務平準化 a. どのメンバーであっても立ち回れるように業務フローを平準化検知体制の再考共有方法の再考効果検証業務平準化

Slide 18

Slide 18 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential 1 検知 ● Datadogから一定時間以上要したリクエストやエンタープライズの環境で遅いリクエストデータを自動で探す 2 集計・通知 ● 初検知の問題なのか or 既知の問題なのかを識別し、スプレッドシートに自動で書き込む ● チームメンバーから営業日毎に輪番で担当を1名割り振り、今日の担当者に Slackで集計結果を通知する 3 共有・修正 ● 問題を抱えたエンドポイントを所管するプロダクトチームに情報を共有し、必要に応じて修正対応を依頼 18 2026年2月時点の運用

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

Slide 22

Slide 22 text

Slide 23

Slide 23 text

© 2026 ANDPAD All Rights Reserved. Conﬁdential Conﬁdential 23 今後やっていきたいこと ● 同様の改善活動を横展開していきたい ○ 展開していないプロダクトにも展開したい ● フロントエンドでもモニタリングを強化したい ● そもそも遅いリクエストを本番環境で発生させないようにするための環境作りに寄与したい ○ 負荷テストの強化など何をどのようにやるかなどの具体策を絶賛検討中