障害特定が超爆速に！セブン&アイ・ネットメディアの秘密兵器〜チームの壁を超越！Observabilityで問題解決力アップ〜

障害特定が超爆速に！セブン&アイ・ネットメディアの秘密兵器〜チームの壁を超越！Observabilityで問題解決力アップ〜株式会社セブン＆アイ・ネットメディアクラウド・ソリューション部佐藤和弥/重信幸輝

Copyright Seven & i Net Media Co., Ltd. All Rights
Reserved 2 ◼ はじめに ⚫ 自己紹介 ⚫ 会社紹介/事業概要 ◼ 目的とゴール ◼ 本編 ⚫ 直面した課題と対策 ⚫ 導入効果とユースケース ⚫ まとめ ◼ 告知 ◼ 質疑応答アジェンダ

Reserved 3 はじめに

Reserved 4 佐藤和弥登壇者紹介重信幸輝新卒2年目、24歳。千葉県木更津市生まれ。 AWSを利用したシステムの運用・保守を担当する傍ら、エンジニアカルチャー醸成に尽力。趣味は作曲とDJ。最近のマイブームはAIを使い倒すこと。独立系Sierを経て、2019年に7NM入社。担当システムのインフラ全体を統括しつつ、横断的なアーキテクチャ検討や企画提案にも参画。趣味はギターと作曲、お絵描きなど。保有資格：AWS SAP/Google Cloud PCA/応用情報 etc… クラウド・ソリューション部主任クラウド・ソリューション部

Reserved 5 会社概要セブン＆アイグループ唯一のＩＴシステム会社として、日々グループのサービスを支えています Vision テクノロジーの力でビジネスの共創を実現することで、セブン＆アイグループの流通革新を推進し、グループの成長を支えるパートナー会社名株式会社セブン＆アイ・ネットメディア（Seven & i Net Media Co.,Ltd.） ---------------------------------------------------------------- 設立年月 2008年7月11日 ---------------------------------------------------------------- 資本金 76.65億円（資本準備金 76.55億円） ---------------------------------------------------------------- 事業内容セブン＆アイグループのデジタル戦略を支えるシステム企画、デザイン、開発、運用 ---------------------------------------------------------------- 従業員数 307名 ※受入出向者含む・外部出向者除く（2024年3月1日現在） ---------------------------------------------------------------- 所在地〒102-8436 東京都千代田区二番町4番地5 住友不動産二番町ファーストビル 2F ---------------------------------------------------------------- 役員概要代表取締役社長齋藤正記代表取締役常務執行役員中木孝取締役西村出取締役夏井康憲監査役奥誠司執行役員阪田徹執行役員田中盛男 ---------------------------------------------------------------- 認定パートナー資格 Salesforce認定コンサルティングパートナー AWS認定アドバンスドティアパートナー

Reserved 6 会社概要 ✓ セブン＆アイネットメディアは、グループ唯一のシステム子会社として、グループビジネスを理解し、事業課題やシステム課題を解決できるITビジネスパートナーになることを目指し、業務に取り組んでいます 7&iグループ各社 7&iグループ各社の ITビジネスパートナー･･･ベンダーを問わない中立的な立場からセブン＆アイ・グループ各社をご支援グループのビジネスとカルチャーを理解サービス開発から運用まで支援しサービスを理解各事業会社のシステムサービス開発と運用ノウハウ市場の技術トレンドを積極的に活用戦略パートナー実行パートナー

Reserved 7 会社概要 CCoE(クラウド活用推進組織)の取り組みに力を入れてます！！！ ➢ 目指す姿を定義し、活動を実施 ➢ 継続的な外部イベント登壇今日！ ➢ 各種ガイドライン・標準化、技術向上の取組み各種ガイドラインクラウド利用ガイドライン Terraform コーディングガイドセキュリティセキュリティサービス仕様書 https://www.sbbit.jp/article/sp/137568 R＆D プラットフォームエンジニアリング運用

Reserved 8 目的とゴール

Reserved 9 ◼ 昨年新卒だった重信のエピソードこんな経験、ありませんか？上長から障害調査の依頼されたけど、システム大きすぎてなにがなんやら・・・とりあえず片っ端から全部調査しようまずは申請提出して、コンソールに入るここがこうで、あれがああで… 頭の中ぐちゃぐちゃ… ﾅﾆﾓﾜｶﾗﾅｲ… これを解決してくれたのがObservability！！！障害原因の特定に時間がかかる。。。

Reserved 10 今日のセッションのゴールみなさん、Observabilityしてますか？こうなっている！！！！こんな状態の方も今日のセッションが完了する頃には… 経営・ビジネスに説明できる！ (アラートの無い)平和な世界を取り戻す！！！導入はしたけど定着しないんだよね・・・

Reserved 11 直面した課題と対策

Reserved 12 オンプレ時代…… インフラチームが直面した課題 Observabilityに着目 AWS Cloud AWSへ移行！！！性能が足りない！増設増強もう無理ぽよ次ウェーブまで時間が無いぞ！

Reserved 13 ◼ 「observe(観測)」+「ability(能力)」からなる造語。日本語では可観測性と呼ばれる。 ◼ 「ログ」「トレース」「メトリクス」といった主要シグナルに基づき、システムを外部から観察可能な状態にすること。 ※CNCFから引用 →アプリからインフラまで一気通貫でシステムの状態を分析・可視化できる。 Observabilityってなに？ https://github.com/cncf/tag-observability/blob/whitepaper-v1.0.0/whitepaper.md これを実現する製品としてAPMがありますが、本資料では呼称をObservaility製品に統一します。

Reserved 14 ◼ Observability製品の選定 ⚫ ベンダーさんに複数の製品を紹介してもらったり、他PJで使っていた製品を参考にしたりソリューション：Instanaの導入ポイント他社製品 Instana 導入コスト高額競合の1/4の価格（選定当時）ライセンス体系基本料金＋オプション多数オールインワンでシンプル（選定当時）分かりやすさ情報量が多いが玄人向け初心者に優しく使いやすい導入もワンライナー将来性製品によってまちまちマイクロサービス、コンテナ導入を見据えている第三者評価 G2やガートナーで Leader評価 Cool Vender 2016に選出されているが、選定当時は目立った評価無し結果、Instanaの導入を決定！マスコットのStan君 ※2023年のG2 Grid

Reserved 15 ここで問題が…

Reserved 16 1.AWS移行でパフォーマンスが改善、出番を失う… 2.インフラチーム以外で利用されない… 3.PJメンバーの交代による認知度の低下… 利用されないInstana… Instana解約！？しかし、愛着もあり活用前に解約したくもなく… 対策を試みる…!

Reserved 17 ◼ アプリケーションの処理が可視化されたことでトラブルシュート用ツールとして活用されるように！ ◼ 認知度向上は限定的… 対策① ユースケースの変更 IBM様※の協力を得て対策②布教活動へ長年の運用でパフォーマンス問題再燃再びInstanaに注目 ※IBM カスタマーサクセスチーム古川様問題① 対策① AWS移行でパフォーマンスが改善、出番を失う… 障害調査での活用

Reserved 18 対策② 社内での布教活動 ◼ Instana勉強会昨年度実績・第1回 Instanaの概要/ユースケースについて・第2回第1回のおさらい/イベント・アラートの活用法/性能試験でのInstana活用法・第3回モバイルアプリケーション監視/SLO・SLI監視累計参加人数 107名問題②＆③ 対策② インフラチーム以外で利用されない＆PJメンバーの交代による認知度の低下 Instana勉強会の実施勉強会資料当時新卒だった重信のメモ

Reserved 19 努力の結果…

Reserved 20 Instanaが認知されて、使われるように！！！ ◼ Instanaユーザ数：23名(勉強会実施前) ⇒ 51名（勉強会実施後） ◼ アクティブユーザ数：1人/月(勉強会実施前) ⇒ 10人以上/ 週(勉強会実施後) 布教は大成功でした！！！布教活動の結果・・・

Reserved 21 導入効果とユースケース

Reserved 22 ＜セブン＆アイ・ネットメディア流 Instanaの使い方＞ 1.障害原因特定の迅速化 2.事業会社向けのレポート 3.検証開発環境での性能試験導入効果とユースケース

Reserved 23 ◼ アプリの一部機能が正常動作しない障害が発生した時の話・・・障害報を受け、慌ててアプリを確認するもエラーは発生していないユースケース① 障害原因特定の迅速化 Demo環境障害部分が一目でわかるのがObservability！！！ 3時間かけても分からず… 5分で原因特定！ 97%短縮！

Reserved 24 ユースケース①障害原因特定の迅速化（デモ）デモ投影します

Reserved 25 ユースケース① 障害原因特定の迅速化（補足）・クラウド・実機・アラートこんなに確認するの結構面倒・・・入る前にも作業が沢山待っている・・・サクッと欲しい情報が手に入るObservability製品って結構便利！！！大規模システム保守の難しさ…

Reserved 26 ◼ 従来の方法ユースケース② 事業会社向けのレポート作成 ◼ Instanaを使った方法さまざまなツールで取ってきていた情報が1つにまとまっているので、マージする必要がほぼない！！！楽！！！ • 監視ツールA • アクセス量 • 監視ツールB • エラー件数 • 監視ツールC • レスポンスタイム

Reserved 27 今までは商用ワークロードでの話… 検証開発ワークロードでもちょっぴり使ってます！！！ユースケース③ 性能試験目標性能出ない！助けてくれ～～ DBが詰まってますね～

Reserved 28 まとめ

Reserved 29 まとめ Observabilityの重要性 Observability製品導入のメリットオンプレ、クラウド、SaaSが入り乱れる複雑怪奇な時代点ではなく面で俯瞰して分析していく機能が重要 Observability導入時の勘所製品選定はしっかりと！（それぞれの製品に強みがある）諦めない。入れて終わりじゃない。ステークホルダーと連携パフォーマンスモニタリング、チューニング障害特定の迅速化高度な分析、分かりやすいUI

Reserved 30 1. まだ利用できていない機能（外形監視、アプリクラッシュ通知、LLMモニタリングなど）の活用 2. 性能試験での本格利用 3. SLO/SLI定義をはじめビジネスサイドとの共通言語の構築。今後の挑戦、やってみたいことオブザーバビリティを拡げていく！

Reserved 31 みなさん、Observabilityしてますか？経営・ビジネスに説明できる！ (アラートの無い)平和な世界を取り戻す！！！

Reserved 32 告知

Reserved 33 今回紹介したInstanaのベンダーであるIBM様がなんと、、、今回のイベントにブースを出してます！！！お時間ある時にぜひお立ち寄りください！告知

Reserved 34 ブース場所 IBM様ブース Track A Track B Track C 展示 & LT 会場

Reserved 〒102―8436 東京都千代田区二番町4番地5 住友不動産二番町ファ―ストビル 2F https://www.7andinm.co.jp

障害特定が超爆速に！セブン&アイ・ネットメディアの秘密兵器〜チームの壁を超越！Observab...

障害特定が超爆速に！セブン&アイ・ネットメディアの秘密兵器〜チームの壁を超越！Observabilityで問題解決力アップ〜

Other Decks in Technology

Featured

Transcript