雲勉@オンライン【勉強会】24時間365日運用業務を支えるMSPの仕組み～クラウド技術を用いた運用業務とは？～【初心者向け】

Transcript

1. 2022/04/18 ～クラウド技術を用いた運用業務とは？～ (初心者向け)～ 雲勉@オンライン【勉強会】
 24時間365日運用業務を支えるMSPの仕組み
 上地航平
2. 2 本日のハッシュタグ #kumoben
 写真撮影 OK!

3. アイレットご紹介 – 会社概要 3 ▪ 社名 アイレット株式会社
 
 ▪ 所在地 〒105-6307 東京都港区⻁ノ⾨1-23-1 ⻁ノ⾨ヒルズ森タワー7F 設⽴2003年10⽉15⽇ 
 ▪ 資本⾦ 7,000万円
 
 ▪ 代表者名 岩永充正
 
 ▪ 従業員数 886人（2022年4月時点）
 
 ▪ 事業内容 ITコンサルティング、システム開発、
 システム保守・運⽤、
 サーバハウジング・ホスティング
 
 ▪ 主要株主 KDDI株式会社

4. アイレットご紹介 – AWS APNパートナー 4 cloudpackは、Amazon Elastic Compute Cloud （Amazon EC2）やAmazon Simple Storage Service （Amazon S3）をはじめとするAWSの各種プロダク トを利⽤する際の導⼊・設計から運⽤保守を含んだフルマネージドのサービスを提供し、バックアップや24時間365 ⽇の監視/障害対応、技術的な 問い合わせに対するサポートなどを ⾏っております。
 
 2013年6⽉4⽇には、AWSパートナーネットワーク（APN）において、 ⽇本初のAPNプレミアティアコンサルティングパートナーの ⼀社として認定された のをはじめ、その後9年連続で認定されています。 
 
 『APNプレミアティアコンサルティングパートナー』はAPNプログラムの中で最上位のパートナーであり、厳しいクライテリアを満たしたパートナーのみ が選出され、世界で128社のみが認定されています。9年連続で認定された ⽇本企業としては、cloudpack（アイレット）と株式会社野村総合研究所の 2社のみとなります。 

5. アイレットご紹介 – APN Consulting Partner of the Year 2019 – Japan
 5 AWSのパートナーネットワークに登録している企業が参加した「AWS Partner Summit Tokyo」の中で、数あるアワードの中で最も実績をあげたパート ナーであることを⽰す『APN Consulting Partner of the Year 2019 – Japan』を受賞しました。cloudpackは、同賞を5度 ⽬の受賞となります。
 
 『APN Consulting Partner of the Year 2019 – Japan』は、AWSが年間を通じて営業・技術・マーケティング分野においてパートナーとしての総合 ⼒を 判断し、AWSのビジネスに最も貢献したパートナーに贈られるものです。cloudpackは、2013年から継続的にプレミアコンサルティングパートナーとし て認定されているほか、業界に影響を与える多数のお客様事例のリリースや、数千台規模のマイグレーション案件、基幹システムの移 ⾏を⼿掛ける など、さらなるAWSビジネスの拡 ⼤に貢献しました。
 
 また、サーバーレスやマシンラーニングなどの新サービスも積極的に採 ⽤して成功させる⼀⽅で、エンタープライズ案件も推進してきた結果、著しい 売り上げ伸び率を達成 したことが評価されました。 

6. アイレットご紹介 - 弊社の代表するサービス 6 クラウドを活用し
 お客様のご要望に幅広くお応えする
 総合支援サービスです。
7. ▪ 上地　航平（うえち　こうへい）
 
 • クラウドインテグレーション事業部
 大阪第一グループ
 MSP運用セクション　メンバー
 • 前職：
 スケートボードインストラクター（9年間）
 • 2021年5月入社 
 （もうすぐ１年です！）
 
 → GoogleCloudの資格
 全冠をがんばってます！
 ０．講師自己紹介 7

8. 8 このセッションで得られること ① クラウド上の お客様のサーバーを どうやって監視しているのか？？ ② どのようなツールやソフトウェ アを使用して 実現しているのか？？
9. 9 • 会社説明と自己紹介 • MSPとは • クラウド技術を用いた運用業務とは？ • 運用業務に役立つツールの説明 PagerDuty を使って、運用業務を改善する • 自動化ツールとアラート削減活動　 • 質疑応答　(19:50~20:00)

10. 1．MSPとは
 10
 MSPとは？？
 - （M）マネージド（S）サービス（P）プロバイダの略称
 
 MSPの役割とは？？
 - お客様が利用しているコンピュータやネットワークなど
 システムの運用・保守・監視を提供する事業者

11. 1．MSPとは
 11
 MSPとは？？
 - （M）マネージド（S）サービス（P）プロバイダの略称
 
 MSPの役割とは？？
 - お客様が利用しているコンピュータやネットワークなど
 システムの運用・保守・監視を提供する事業者
 iret cloudpackのMSPは、 AWS（GCP…etc） をご利用のお客様に変わって、 AWS（GCP…etc） 上のサーバーを 24時間365日体制で有人監視しています！
12. 12 １００００ 何の数字？？
13. 13 約１００００台 お客様のサーバーを監視、保守している台数
14. 1．MSPとは
 14
 MSPとは？？
 - （M）マネージド（S）サービス（P）プロバイダの略称
 
 MSPの役割とは？？
 - お客様が利用しているコンピュータやネットワークなど
 システムの運用・保守・監視を提供する事業者
 iret cloudpackのMSPは、 AWS（GCP…etc） をご利用のお客様に変わって、 AWS（GCP…etc） 上のサーバーを 24時間365日体制で監視しています！ まとめ） cloudpackのMSPがお客様に変わって、 AWS（GCP…etc） 上のサーバーを24時間365日体制で有人監視致します。 ①　お客様は、24時間365日インフラの運用、監視業務を考えなくて済む！ ②　アプリ開発や主となる事業戦略にリソースを割くことができる！
15. 15 • 会社説明と自己紹介 • MSPとは • クラウド技術を用いた運用業務とは？ • 運用業務に役立つツールの説明 PagerDuty を使って、運用業務を改善する • 自動化ツールとアラート削減活動 　 • 質疑応答　(19:50~20:00)

16. オンプレでの、監視業務 16
17. オンプレでの監視業務 17 データセンター
18. オンプレでの監視業務 18 データセンター ①アラート発報 ② 1次対応
19. オンプレでの監視業務 19 データセンター ①アラート発報 ② 1次対応 復旧、調査
20. オンプレでの監視業務 20 データセンター ①アラート発報 ② 1次対応 復旧、調査 ③担当チーム ③お客様へ
21. オンプレでの運用業務 21 データセンター ①アラート発報 ② 1次対応 復旧、調査 ③担当チーム ③お客様へ どのようにクラウド上のお客様のサーバー
 監視・保守を行っているのか？？
22. クラウドでの、監視業務 22
23. 運用業務に役立つツールの説明 23 監視ツール インシデントツール MSPによる 一次対応 プロジェクト管理ツール コミュニケーションツール 担当チームによる 二次対応 24時間365日体制で監視
24. 運用業務に役立つツールの説明 24 監視ツール インシデントツール MSPによる 一次対応 プロジェクト管理ツール コミュニケーションツール 担当チームによる 二次対応 24時間365日体制で監視 クラウド上に お客様のサーバーが 存在している！！
25. 25 クラウド vs オンプレ の監視業務の違い ① データセンター内での勤務がありません！ 物理サーバーを触る機会がないため 　 ② 勤務場所は比較的自由です！ クラウド上にサーバーが存在し、 復旧や障害調査がクラウド上で行うため 　 
 クラウド上に お客様のサーバーが 存在している！！ 2. クラウド技術を用いた運用業務とは？　まとめ
26. 26 • 会社説明と自己紹介 • MSPとは • クラウド技術を用いた運用業務とは？ • 運用業務に役立つツールの説明 PagerDuty を使って、運用業務を改善する • 自動化ツールとアラート削減活動 　 • 質疑応答　(19:50~20:00)

27. 弊社のクラウド運用・保守体制 27
28. 弊社のクラウド運用・保守体制 28
29. 弊社のクラウド運用・保守体制 29 監視ツール 常に監視している
30. 弊社のクラウド運用・保守体制 30 監視ツール 常に監視している 0. 閾値（CPU80% ）超過
31. 弊社のクラウド運用・保守体制 31 監視ツール 常に監視している 1. アラートを発報 0. 閾値（CPU80% ）超過
32. ①監視ツール　New Relic 32 SaaS型の監視サービス
33. New Relicは、ここが便利！
 • CPU使用率 • メモリ使用率 などなどが取得できる 33
 APM（Application Performance Monitoring） エンドユーザー目線でアプリに遅延がないかどうか。評価が可能
34. 弊社のクラウド運用・保守体制 34 監視ツール 常に監視している 1. アラートを発報 0. 閾値（CPU80% ）超過
35. 弊社のクラウド運用・保守体制 35 監視ツール インシデントツール 常に監視している 2. インシデントを登録 1. アラートを発報 0. 閾値（CPU80% ）超過
36. ②インシデント管理ツール　PagerDuty 36 MSPメンバーは、24時間365日 PagerDutyの画面を監視しています！
37. 37 24時間365日ずっと、 監視してます！ トリプルディスプレイで 業務しますが 1つのディスプレイで PDの常時確認は欠かさない！
38. 弊社のクラウド運用・保守体制 38 監視ツール インシデントツール 常に監視している 2. インシデントを登録 MSPによる 一次対応 1. アラートを発報 24時間365日体制で監視 0. 閾値（CPU80% ）超過
39. 弊社のクラウド運用・保守体制 39 監視ツール インシデントツール 常に監視している 2. インシデントを登録 MSPによる 一次対応 3. インシデントの 調査・復旧対応 1. アラートを発報 24時間365日体制で監視 0. 閾値（CPU80% ）超過
40. 弊社のクラウド運用・保守体制 40 監視ツール インシデントツール 常に監視している 2. インシデントを登録 MSPによる 一次対応 3. インシデントの 調査・復旧対応 プロジェクト管理ツール 1. アラートを発報 24時間365日体制で監視 （wiki参照） 0. 閾値（CPU80% ）超過 4. お客様へ報告
41. 実際の操作画面
 41
 クリック
42. 実際の操作画面
 42
 NewRelicによる 発報されたアラートタイトル wiki(手順書)リンクが準備
43. wiki（手順書）・・・案件別に対応手順などが記載される。
 MSPメンバーは、wiki参照し
 調査・復旧対応を実施する
 43
 「CPU使用率」アラート を検知した場合は 「サービス動作確認」 を実行してね！ 「担当チーム」 へ連絡してね！
44. 44
 お客様へ、１次対応内容をご報告 インシデント登録 課題（お客様とのご連絡）
 
 ・・・インシデント発生時や障害対応
 　または、連絡事項などのやり取り

45. ①　wikiによる手順書管理
 45
 • ３種類のユーザーによる、権限管理が簡単 （管理者・ユーザ・ゲスト） • 案件プロジェクト単位で進捗管理が可能 • １アラート、１課題に沿ったインシデント管理が可能
 • 手順書のバージョン管理が可能となる。 いつ誰がどの内容を変更したか？が分かる。 • MarkDown記法が扱える。 書きやすく・読みやすい ②　課題による 　　お客様とのご連絡

46. 弊社のクラウド運用・保守体制 46 監視ツール インシデントツール 常に監視している 2. インシデントを登録 MSPによる 一次対応 3. インシデントの 調査・復旧対応 プロジェクト管理ツール 1. アラートを発報 24時間365日体制で監視 （wiki参照） 4. 復旧しない！原因不明！ コミュニケーションツール 担当チームによる 二次対応 5. 社内、担当チームへ連絡 0. 閾値（CPU80% ）超過
47. 47 • 会社説明と自己紹介 • MSPとは • クラウド技術を用いた運用業務とは？ • 運用業務に役立つツールの説明 PagerDuty を使って、運用業務を改善する • 自動化ツールとアラート削減活動 　 • 質疑応答　(19:50~20:00)

48. 48 2846
 何の数字？？
49. PagerDutyに上がってくる1日のインシデント件数が　2846件 49 MSPメンバーが2846件を、すべて監視しているのか？？ 　　答えは、Noです！ 
 ②　インシデント件数削減の取り組み！ １次対応可視化ダッシュボードを用いて、削減対象を担当チームへ共有する ①　自動化ツールで実現！ 　　インシデントを自動処理 してくれる
50. 50 • 自社開発ツール • 監視業務の一次対応を自動化するシステムで、略して「AMS」と呼称しています。 • 事前に決められたシナリオに一致する場合、１次対応とお客様連絡を自動処理します。 　（CPU使用率アラートを検知→サービス動作確認→お客様へご報告） • 2558 / 2846件　を自動処理している！ • AMSは災害に備え、システムを2リージョンで並行稼働させています。 また、高負荷時には仮想サーバを自動でスケールアウトし、可用性を向上しています。
 ①インシデントを自動処理してくれる！ ①　 AMS（Advanced Monitoring System ） 

51. 弊社のクラウド運用・保守体制 51 監視ツール インシデントツール 常に監視している 2. インシデントを登録 MSPによる 一次対応 3. インシデントの 調査・復旧対応 プロジェクト管理ツール 1. アラートを発報 24時間365日体制で監視 （wiki参照） 0. 閾値（CPU80% ）超過 4. お客様へ報告
52. 弊社のクラウド運用・保守体制 52 監視ツール インシデントツール 常に監視している 2. インシデントを登録 3. インシデントの 調査・復旧対応 プロジェクト管理ツール 1. アラートを発報 （wiki参照） 0. 閾値（CPU80% ）超過 4. お客様へ報告 MSPによる 一次対応 （自社開発ツール）
53. PagerDutyに上がってくる1日のインシデント件数が　2846件 53 MSPメンバーが2846件を、すべて監視しているのか？？ 　　答えは、Noです！ 
 ②　インシデント件数削減の取り組み！ １次対応可視化ダッシュボードを用いて 、削減対象を担当チームへ共有する ①　自動化ツールで実現！ 　　インシデントを自動処理してくれる
54. 54 • 一次対応状況ダッシュボード ◦ AMS ▪ AMSのトレース情報・対応結果 （インシデントを何件対応したか？） ◦ PagerDuty ▪ 発生したインシデント情報 （インシデントが何件登録されたか？？） インシデント件数削減の取り組み！ Redash

55. 55 • 一次対応状況ダッシュボード ◦ AMS ▪ AMSのトレース情報・対応結果 （インシデントを何件対応したか？） ◦ PagerDuty ▪ 発生したインシデント情報 （インシデントが何件登録されたか？？） インシデント件数削減の取り組み！ Redash
 S3バケット
56. 56 MTTR： 対応完了するまでに要した 平均時間
57. 57 MTTR： 対応完了するまでに要した 平均時間 MTTR： インシデントが対応完了するまでに要した平均時間 件数： 同一のインシデントを検知した数
58. 58 改善対象のインシデントと判断されたら 案件担当チームへ エスカレーションされる。
59. 59 アラート管理プロジェクトにて、進捗管理していく。 MSPメンバーが課題を起票 自動化ツールを用いたアラート削減改善活動も実施しています！
60. 60 • 会社説明と自己紹介 • MSPとは • クラウド技術を用いた運用業務とは？ • 運用業務に役立つツールの説明 PagerDuty を使って、運用業務を改善する • 自動化ツールとアラート削減活動 　 • 質疑応答　(19:50~20:00)

61. 中途向け会社説明会 61 「アイレットってどんな会社？」「cloudpackって具体的にどんな事業なの？」
 「オフィス環境は？」「これまでの経験を活かせそう？」など、
 少しでも興味がある方は、ぜひお気軽にご参加ください。