Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
監視運用の省人化と高レジリエンスな監視システムの提供_ShowNet2021 studio 2...
Search
ShowNet
PRO
July 01, 2021
Technology
0
11
監視運用の省人化と高レジリエンスな監視システムの提供_ShowNet2021 studio 20210414
ShowNet
PRO
July 01, 2021
Tweet
Share
More Decks by ShowNet
See All by ShowNet
【swonet.conf_ 2025】AI技術 x 高精度な監視データ収集で築くインテリジェントな運用・監視基盤
shownet
PRO
0
10
【swonet.conf_ 2025】ゼロトラストで支える広帯域セキュリティサービスと脅威監視基盤
shownet
PRO
0
7
【swonet.conf_ 2025】効率化と見える化で進化し続けるファシリティの構築
shownet
PRO
0
5
【swonet.conf_ 2025】ShowNet Watt Quest ~ネットワーク省電力化に向けた計測・分析~
shownet
PRO
0
4
【swonet.conf_ 2025】オープニングセッション
shownet
PRO
0
5
【swonet.conf_ 2025】ShowNet基礎知識
shownet
PRO
0
9
【swonet.conf_ 2025】ShowNet Media-X : ShowNetがつないだ放送のミライ
shownet
PRO
0
4
【swonet.conf_ 2025】AI基盤からエッジまで、多様化するネットワークとテストの進化
shownet
PRO
0
3
【swonet.conf_ 2025】SRv6 による k8s マルチテナント環境と次世代 AI ネットワーク/サービス基盤
shownet
PRO
0
6
Other Decks in Technology
See All in Technology
累計5000万DLサービスの裏側 – LINEマンガのKotlinで挑む大規模 Server-side ETLの最適化
ldf_tech
0
120
文字列操作の達人になる ~ Kotlinの文字列の便利な世界 ~ - Kotlin fest 2025
tomorrowkey
2
310
OpenCensusと歩んだ7年間
bgpat
0
300
20251029_Cursor Meetup Tokyo #02_MK_「あなたのAI、私のシェル」 - プロンプトインジェクションによるエージェントのハイジャック
mk0721
PRO
6
2.2k
様々なファイルシステム
sat
PRO
0
280
AIエージェントによる業務効率化への飽くなき挑戦-AWS上の実開発事例から学んだ効果、現実そしてギャップ-
nasuvitz
5
1.6k
データとAIで明らかになる、私たちの課題 ~Snowflake MCP,Salesforce MCPに触れて~ / Data and AI Insights
kaonavi
0
220
初海外がre:Inventだった人間の感じたこと
tommy0124
1
160
実践マルチモーダル検索!
shibuiwilliam
3
510
進化する大規模言語モデル評価: Swallowプロジェクトにおける実践と知見
chokkan
PRO
3
420
アノテーション作業書作成のGood Practice
cierpa0905
PRO
1
350
アウトプットから始めるOSSコントリビューション 〜eslint-plugin-vueの場合〜 #vuefes
bengo4com
3
1.9k
Featured
See All Featured
Faster Mobile Websites
deanohume
310
31k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
140
34k
How To Stay Up To Date on Web Technology
chriscoyier
791
250k
Into the Great Unknown - MozCon
thekraken
40
2.1k
Raft: Consensus for Rubyists
vanstee
140
7.2k
How to Create Impact in a Changing Tech Landscape [PerfNow 2023]
tammyeverts
55
3k
Rebuilding a faster, lazier Slack
samanthasiow
84
9.2k
GitHub's CSS Performance
jonrohan
1032
470k
Evolution of real-time – Irina Nazarova, EuRuKo, 2024
irinanazarova
9
1k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
48
9.7k
Put a Button on it: Removing Barriers to Going Fast.
kastner
60
4.1k
Become a Pro
speakerdeck
PRO
29
5.6k
Transcript
ShowNet2021 監視運用の省人化と 高レジリエンスな監視環境の提供
モニタリングコンセプト 監視運用の省人化と高レジリエンスな監視システムの提供
過去からの継続 監視運用の省人化と高レジリエンスな監視システムの提供 • 統合監視(SNMPを用いた全体監視) • ログ監視・xFlow監視 • syslog/xFlow/snmpトラップ転送 • 時刻ずれ監視
• パケット解析・可視化 • 仮想化基盤監視 • 各種監視サービスの連携
2019年からのトライ(2021年も継続) 監視運用の省人化と高レジリエンスな監視システムの提供 • アプリケーション品質監視 • 特定アプリケーションのボトルネック可視化・通知 • クラウドサービス型監視 • エージェント型監視サービスの普及
• アラートの一元化 • クラウドサービスへのアラート集約 • 継続的な通信計測による経路可視化 • ShowNet内外からのアクティブ監視による通信経路の可視化
監視運用の省人化と高レジリエンスな監視システムの提供 監視要件の変化 1. DCの構築 2. ネットワークの構築 3. サーバ・ストレージ基盤の構築 4. セキュリティサービスの構築
5. アプリケーションの安定稼働 6. プロバイダサービスの提供 プロバイダのサービスを 2週間で構築し提供 監視要件も都度変化する
変化する監視要件に追従するシステム設計 監視運用の省人化と高レジリエンスな監視システムの提供 • Hotstages前期(4/3〜4/4) • 温湿度監視、機器への死活監視、syslog受信監視 • Hotstage後期(4/5〜4/8) • 機器の設定監視、特定ログ/キーワード監視
• Deploy Day(4/8〜6/9) • Pod監視、syslog監視、xFlow監視、品質監視 • Interop Tokyo Day1〜3(4/14〜4/16) • 安定稼働のための監視 ※4/2は主に機器マウント
監視対象:トポロジに乗る全ての機器 監視運用の省人化と高レジリエンスな監視システムの提供
ターゲット数 監視運用の省人化と高レジリエンスな監視システムの提供 • 監視ターゲット • 機器総数:455(ネットワーク機器、仮想アプライアンス含む) • 監視項目 • 死活監視
• トラヒック監視 • 温湿度監視 • システムリソース監視 • ログ/xFlow/trap監視
2021年ログ総数 クラウドサービスとオンプレミス監視システムの融合 日付 ログ行数 4/5 794,469 4/6 16,401,930 4/7 18,411,243
4/8 50,507,812 4/9 170,417,324 4/10 208,446,505 4/11 183,080,233 日付 ログ行数 4/12 203,690,056 4/13 147,575,948 4/14 166,367,253 ログ行数:LogInsightでの日別暫定集計値 ※約 2000 messages/sec
2021年のShowNet監視 監視運用の省人化と高レジリエンスな監視システムの提供
クラウドサービス モニタリング機器
ShowNet2021 モニタリングコンセプト 監視運用の省人化と高レジリエンスな監視システムの提供 • 監視運用の省人化と高レジリエンスな監視システムの提供 オンプレミスShowNet環境 テレメトリ トラフィック分析 ログ解析 時刻監視
統合監視基盤 Cloud型監視 -環境非依存な監視システム アラート集約管理 -重複排除 -アラートの最適な分類 -多種多様な通知手法の提供 -詳細通信解析 -リアルタイム分析 -アノマリ検知 -即時性の高いログ検索 -ログの集約管理 -経路監視 -Flow監視 - 時刻同期監視 -機器リソース監視 -死活監視 監視アラートの通知 オペレータへの通知
ログ監視・可視化・高速検索 監視運用の省人化と高レジリエンスな監視システムの提供 ダッシュボード インタラクティブ分析
zabbix- proxy1 oracle zabbix- proxy2 監視運用の省人化と高レジリエンスな監視システムの提供 • 分散監視システムによるマルチクラウド・ハイブリッド クラウドのモニタリング System
AnswerG3 System Answer XC System Answer- pub Azure GCP zabbix-2 zabbix- proxy3 ECL2.0 Dynatrace ThousandEyes zabbix-1 ShowNet Azure監視 クラウド間監視 server server server server agentless agentbase クラウドからの監視 activegate serverserver
統合監視 監視運用の省人化と高レジリエンスな監視システムの提供
時刻監視 監視運用の省人化と高レジリエンスな監視システムの提供 ・・・ 時刻同期
データセンターインフラ管理 監視運用の省人化と高レジリエンスな監視システムの提供
xFlow監視 監視運用の省人化と高レジリエンスな監視システムの提供
サブテーマ 監視運用の省人化と高レジリエンスな監視システムの提供 • テレメトリを用いたトラフィック分析・アノマリ検知に よる運用の高度化 FlowInspector-10g Apresia22000- 24X2C8X-BR Vision X
MirrorTrrafic asr9904 FlowInspector-100g トラフィック詳細解析 バースト検知 asr9904 paragon-insight asr9902 c8201 ncs55a1 OpenConfigベース Telemetry
テレメトリ 監視運用の省人化と高レジリエンスな監視システムの提供 @flowinspector
監視運用の省人化と高レジリエンスな監視システムの提供 • 実トラヒックを用いたリアルタイム通信解析 Vision X Flowmon Probe Flowmon Collector TAPデバイスからの
トラフィク取得 Netflow MirrorTrrafic
SaaS型監視 監視運用の省人化と高レジリエンスな監視システムの提供
監視運用の省人化と高レジリエンスな監視システムの提供 • 機械学習によるアラート監視の最適化・効率化の実現 alert alert alert alert -重複排除 -アラートの最適な分類 -多種多様な通知手法の提供
SaaSでのアラート監視 監視運用の省人化と高レジリエンスな監視システムの提供 alert alert alert alert
協力いただいたいコントリビュータさま 監視運用の省人化と高レジリエンスな監視システムの提供