【ShowNet 2026 展示会場内説明スライド】DC・クラウド_800G/1.6T時代の分散・セキュアAIデータセンター

800G/1.6T時代の分散・セキュアAIデータセンター

・800G/1.6T接続と長距離RDMAで実現する分散AI基盤
・多様なサービスを支えるセキュアなデータセンターネットワーク
・SRv6バックボーンと一体化したマルチテナントコンテナサービス基盤

Transcript

1. 800G/1.6T時代の分散・セキュア AIデータセンター ShowNet NOC DC/Cloudチーム 織学 岡大貴
2. DC/Cloud 今年のテーマ 800G/1.6T時代の分散・セキュアAIデータセンター 800G/1.6T接続と長距離RDMAで実現する分散AI基盤 多様なサービスを支えるセキュアなデータセンターネットワーク SRv6バックボーンと一体化したマルチテナントコンテナサービス 基盤 2
3. GPU Over APN Testbed GPU基盤 800G/1.6T RoCEv2 ネットワーク 分散推論コンテナ基盤 SRv6 によるマルチテナント コンテナサービス DPUスイッチ サービス仮想化基盤 3
4. 800G/1.6T接続と長距離RDMAで 実現する分散AI基盤 • 相互接続検証 1.6T-DR8 (2DR4) 800G-DR8 (2DR4) • 長距離RoCEv2 GPU over APN Testbed • ローカルLLMとAIエージェント 分散コンテナ推論基盤 AIエージェントによる運用支援 4
5. 800G/1.6T DC ネットワーク 1.6T 相互接続検証 1.6T 水冷スイッチ テスター機器との相互接続 1.6T負荷試験 800G IPファブリック 800G Breakout • 1x800G • 2x400G (800G-DR8 to 2x400G-DR4) • 8x100G (400G-DR4 to 100G-DR1) Fiber: 2xMPO12 / MPO-16 Transceiver: OSPF(RHS/IHS), QSFP 800G Spine/Leaf SW 5
6. 分散推論コンテナ基盤 GoAT: GPU over APN Testbed 札幌、三鷹、横浜、福岡のデータセン ターをIOWN APNで接続 Sterna: RDMA加速装置 推論サービス ShowNetのGPUサーバと各データセン ターのGPUサーバをまとめて一つの OpenShiftクラスタを構築 vLLM/llm-dによる分散推論基盤 種々のGPUサーバ • 遠隔地のベアメタル • ExpEtherによるPCIe over Ethernet接続GPU • 仮想マシンへのGPU/RoCE-NIC PCI Passthrough (仮想化基盤はHPE Morpheus VM Essentials) 6
7. 長距離RoCEv2検証  ShowNetのSRv6バックボーンを経由した RoCEv2通信を検証  Inner IPv4ヘッダのECN bitがOuter IPv6 SRHにコピーされることを確認  RDMAパフォーマンスの確認  チューニングなしでも帯域: 50Gbps 遅延: 500usec程度でRDMA自体は成立  最適化のためにはチューニングが必要 GPU over APN Testbed (札幌, 三鷹, 横浜, 福岡) Inner IPv4 Header ECN bit = 11 輻輳検知 RoCEv2通信 RoCEv2 UDP/IB ヘッダ IOWN APN ShowNet SRv6 Backbone Outer IPv6 Header ECN bit = 11 輻輳検知 ECN: 11 Congestion Experienced CNP Congestion Notification ShowNet DC NW GPU基盤 7
8. ShowNetサービスを支える仮想化基盤&NW Apstraによる統合管理 EVPN/VXLAN による L2/L3 VPN VRFごとにサービスを提供 HCI 仮想化基盤  Nutanix: Cisco UCS C240 3台のクラスタ SDWAN によるクラウド連携  Cisco 8550  NTTドコモビジネスSDPF NW機器の可視化  Nexus Dashboard  Apstra NTPサーバ  ShowNet全機器の時刻同期元
9. SRv6バックボーンと一体化したマルチテナント コンテナサービス基盤 Kubernetes で SRv6 uSID  マルチテナントサービス Cilium/JCNRによるマルチベンダー構成 いろんな技術で相互接続  ISIS: frr/JCNR(crpd)  BGP: Cilium/JCNR(crpd)  データプレーン: Cilium/JCNR(vRouter)  コンテナ基盤: OpenShift DHCP/DNS サービスを展開  VRF ごとにサービスを提供  JCNR: DHCP, DNS Authority  Cilium: DNS cache, Speedtest 9
10. コントリビュータ企業様一覧 10