現状分析と予兆検知を融合した監視システムの確立 モニタリング-スタジオ

2022/6/15-6/17 に幕張メッセで開催されたInterop Tokyo 2022のShowNetスタジオでの講演資料です。

Transcript

1. 現状分析と予兆検知を融合した 監視システムの確立
3. モニタリング基盤
4. 変化する監視要件に追従するシステム設計 • Hotstages前期（6/3〜6/4） • 温湿度監視、機器への死活監視、syslog受信監視 • Hotstage後期（6/5〜6/8） • 機器の設定監視、特定ログ/キーワード監視 • Deploy Day（6/8〜6/9） • Pod監視、syslog監視、xFlow監視、品質監視 • Interop Tokyo Day1〜3（6/15〜6/17） • 安定稼働のための監視 ※6/3は主に機器マウント
5. 監視要件の変化 1. DCの構築 2. ネットワークの構築 3. サーバ・ストレージ基盤の構築 4. セキュリティサービスの構築 5. アプリケーションの安定稼働 6. プロバイダサービスの提供 プロバイダのサービスを ２週間で構築し提供 監視要件も都度変化する
6. モニタリングコンセプト
7. モニタリングテーマ2022 現状分析と予兆検知を融合した監視システムの確立 • 監視データを利用した予兆検知技術の運用への応用 • ハイブリッドクラウドを活用した高可用性な監視システムの実現 • トラフィック解析技術を駆使した進化するネットワーク詳細分析技術 モニタリング
8. モニタリングテーマ2022 現状分析と予兆検知を融合した監視システムの確立 現状分析 xFlow,SNMP,Syslog 詳細分析 パケット解析 経路解析 フィードフォワード 障害予測 キャパシティ予測 運用オペレーション 運用サポート 運用（障害）分析 運用サポート技術 アラート・ 統計情報 仮想基盤監視 クラウド監視
9. 監視データを利用した予兆検知技術の 運用への応用 • 「AI」「機械学習」といったキーワードを売りにした製 品をどのように運用に取り入れるか。 • 異常検知 • 急なネットワーク変化による変化のアラート検知 • キャパシティ予測 • コンピューターリソースの使用状況 • Syslog出力量 • CPU,メモリ,ディスク容量 映像品質の異常検知 トラフィック量予測
10. • オンプレミス・クラウド両方からのActive-Active監視 • 監視環境が地理的配置に依存しない構成 • クラウド内のリージョンを跨いだ冗長構成 ハイブリッドクラウドを活用した高可用性な 監視システムの実現 ShowNet Zabbix-1 System AnswerG3 [1-3] Azure ManagementNetwork Backup/Restore Zabbix-3 Zabbix-2 HA System AnswerG3 [1-3] Azure SQL Database West ThousandEyes- agent System AnswerG3 [1-3] East ThousandEyes- agent ShowNet機器群 監視 監視
11. ShowNetオンプレミス環境 Azure Flowmon Collector Logstare FlowInspe ctor-10G Zabbix6.0 R220 Pipeline SNMP trap Syslog sFlow NetFlow IPFIX アプリケーション間連携 System Answer XC ミラートラフィック Flowmon Probe Flowmon Collector-vm Zabbix-1 System Answer Logoption System Answer StatsOption SystemAnswer G3-[1-3] モニタリング ShowNet機器群 vRealizeNetwork Insight AX-Network- Manager FlowInspe ctor-100G EXA64100 #N-6 Rack PacketMaster EX5-[1-2] System AnswerG3 [1-3] Zabbix-3 Zabbix-2 監視トラフィックの集約・分散
12. トラフィック解析技術を駆使した進化する ネットワーク詳細分析技術 • リアルタイムトラフィック分析 • マイクロバースト・遅延値・品質値のリアルタイム測定 • リアルタイムlogの検索、監視、分析 • 映像トラフィックのシーケンス番号を識別し、jitter値をマイクロ秒オー ダで測定 • データプレーントラフィックからのフロー生成・分析 • ミラートラフィックからnetflow生成
13. モニタリングから見るShowNetの状況 • 監視ホスト数 :514 • 最大Syslog数/days：53,975,699 • 最大フロー/sec:4000 ※SNMP監視の結果から抽出 Syslog数/日 フロー/秒
14. モニタリングから見るShowNetの状況②
15. おわりに • 監視基盤のアーキテクチャで効率的に収集 • 多種多様な監視データをあらゆるツールで運用 • 監視基盤の安定稼働のためにクラウド・オンプレミス で冗長化
16. 協力いただいたいコントリビュータさま