Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
【shownet.conf_】革新と伝統を融合したファシリティ
Search
ShowNet
PRO
September 30, 2024
Technology
0
490
【shownet.conf_】革新と伝統を融合したファシリティ
SPEAKER
ShowNet NOCチームメンバー
山﨑俊彦(アルテリア・ネットワークス)
ShowNet
PRO
September 30, 2024
Tweet
Share
More Decks by ShowNet
See All by ShowNet
【shownet.conf_】ShowNet 2024 ~ Inter * Network ~
shownet
PRO
0
770
【shownet.conf_】ShowNet伝送改めShowNet APN 2024
shownet
PRO
0
640
【shownet.conf_】コンピューティング資源を統合した分散コンテナ基盤の進化
shownet
PRO
0
610
【shownet.conf_】ShowNet x 宇宙ネットワーク
shownet
PRO
0
580
【shownet.conf_】多様化するネットワーク環境を柔軟に統合するルーティングテクノロジー
shownet
PRO
0
560
【shownet.conf_】3Dアプローチで守るセキュリティ
shownet
PRO
0
560
【shownet.conf_】トポロジ図の歩き方
shownet
PRO
0
740
【shownet.conf_】AI技術とUX監視の応用でShowNetの基盤を支えるモニタリングシステム
shownet
PRO
0
560
【shownet.conf_】ローカル5Gを活用したウォーキングツアーの体感向上
shownet
PRO
0
520
Other Decks in Technology
See All in Technology
Incident Response Practices: Waroom's Features and Future Challenges
rrreeeyyy
0
160
適材適所の技術選定 〜GraphQL・REST API・tRPC〜 / Optimal Technology Selection
kakehashi
1
170
信頼性に挑む中で拡張できる・得られる1人のスキルセットとは?
ken5scal
2
530
Why does continuous profiling matter to developers? #appdevelopercon
salaboy
0
180
テストコード品質を高めるためにMutation Testingライブラリ・Strykerを実戦導入してみた話
ysknsid25
7
2.6k
Lexical Analysis
shigashiyama
1
150
Taming you application's environments
salaboy
0
180
Terraform未経験の御様に対してどの ように導⼊を進めていったか
tkikuchi
2
430
いざ、BSC討伐の旅
nikinusu
2
780
SSMRunbook作成の勘所_20241120
koichiotomo
2
130
フルカイテン株式会社 採用資料
fullkaiten
0
40k
ハイパーパラメータチューニングって何をしているの
toridori_dev
0
140
Featured
See All Featured
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
44
6.8k
個人開発の失敗を避けるイケてる考え方 / tips for indie hackers
panda_program
93
16k
It's Worth the Effort
3n
183
27k
The MySQL Ecosystem @ GitHub 2015
samlambert
250
12k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
10
720
Building Your Own Lightsaber
phodgson
103
6.1k
VelocityConf: Rendering Performance Case Studies
addyosmani
325
24k
Being A Developer After 40
akosma
86
590k
No one is an island. Learnings from fostering a developers community.
thoeni
19
3k
What's new in Ruby 2.0
geeforr
343
31k
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
28
9.1k
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
109
49k
Transcript
革新と伝統を 融合したファシリティ ShowNet NOC ファシリティチーム 山﨑, 宇田, 玄 1
ファシリティチームのミッション ➢ShowNetのファシリティに関わる設計から運用を担当 ✓ラックの管理 • 機器の搭載状況 • ラックの温湿度 • ラック単位の電力量 •
エアーフロー ✓光ファイバやLANケーブルの管理 • ラック内の配線ルール • ケーブルの利用可否を判定 等 はじめに 2
ShowNet2024のラック配置 はじめに 3 +Pod 9箇所 稼働機器:約445台 ※ラックマウント機器のみ, センサー等は含まない
構築スケジュール 搬入 • ラックの設置 • ラックにPDUの設置及び電力の供給 構築 • 機器をラックへ搭載、センサの設置 •
MDFの構築, 各種ケーブル配線 展開 • 各Hallの出展社向けへのShowNet サービス展開 運用 • ラック全体の温度、湿度、電力量 等の監視運用 撤収 • 機器のアンマウント • ラックの回収 はじめに 4 2024/5/30 2024/5/31 - 6/7 2024/6/8 - 6/11 2024/6/12 - 6/14 2024/6/14 搬入日 構築1日目 ファシリティチーム 5/30-6/2が繁忙期
ShowNet 2024 ファシリティチームテーマ ➢革新と伝統を融合したファシリティ ✓次世代コネクタを用いた更なる高密度化への挑戦 ✓センサーネットワークを活用したファシリティの可視化と運用 ✓愛用され続けるファシリティツールの活躍 5
次世代コネクタを用いた 更なる高密度化への挑戦 6
次世代コネクタを活用した挑戦 ➢MDF(Main Distributing Frame ) の構築と運用 ✓例年、ラック間を跨ぐ配線を1箇所へ集約 ✓ラック間を跨ぐ配線を削減 ➢様々なコネクタを活用してこれまでMDFの高密度化に挑戦 ✓2019
LC コネクタ ✓2021 - 2023 CS コネクタ ✓2024 SNコネクタ 次世代コネクタを用いた更なる高密度化への挑戦 7 2019年 2021年- 2023年
MDFの設計と実装 ➢NOC#N-5(MDF) ✓SN-MPOパッチパネル (前面 SN 72port <144芯>, 背面MPO-12 x 12port
➢各NOCラック ✓FC29N-24-10AF (前面LC 12 port<24芯>, 背面 MPO x 2port) ✓19RP-AP-104LC-S-M (LC 52 port, 104芯) 次世代コネクタを用いた更なる高密度化への挑戦 8 MDFラック NOC#N-5 NOC#N-6 NOC#N-4 NOC#N-3 NOC#N-7 前面 背面 LC-LC MPO - MPO SN-SN LC - MPO
ShowNet 2024 MDF 次世代コネクタを用いた更なる高密度化への挑戦 9 NOC#N-5 MDF NOC#1 ~ 14
(N-5除く)
高密度化と運用性の両立を求めて ➢高密度化と運用効率を考慮した結果 ✓MDF ラック(中継ラック) • 最大576芯(144芯x 4)のキャパシティ • SN コネクタによって
72 ports/1U を提供 ✓NOC ラック • 需要に応じて高密度パッチパネルを設置 • 2芯1コードの極細ケーブルをアサイン ✓ラック間ケーブル • MPO ケーブルによる敷設数削減 • パッチパネル要件に合う MPO-LC ケーブル 次世代コネクタを用いた更なる高密度化への挑戦 10 配線前のSNコネクタMDF コネクタ比較 SN LC SC
NOCラック機器へのパッチ提供 ➢LC パッチパネル ✓カセット型 FC29N-24-10AF (LC 12 port, 24芯) ✓1U型
19RP-AP-104LC-S-M (LC 52 port, 104芯) ➢2芯1コードの極細ケーブル ✓LC EZ-Flip 型パッチコード ✓Intelli-Cross® Pro LCユニブーツ 型コード ✓コネクタ付 2心ラウンドコード 次世代コネクタを用いた更なる高密度化への挑戦 11 NOC#N-8 NOC#N-7 NOC#N-3 104芯 パッチパネル 104芯 パッチパネル パッチパネル 装置 装置 装置 装置 装置 装置 古河電工 LC ジャンバー センコーアドバンス LC ジャンバー 精工技研 LC ジャンバー NOC#N-9 104芯 パッチパネル 装置 装置 一般的な LC ジャンバー
センサーネットワークを 活用したファシリティの 可視化と運用 12
ShowNet内の環境データ取得 ➢ラックに各種センサーを設置し、統合的に監視 ✓センサー数は約300個 ✓コントローラー数は約40個 ✓センサーネットワークの構築して統合監視 センサーネットワークを活用したファシリティの可視化と運用 13 各センサ情報を統括で表示 各社コントローラ +
センサー群 気流 温度/湿度 電流 Co2 電気錠 電力の情報を元にした気流解析
センサーの配置 ➢ラックの全面と背面に温湿度等のセンサーを設置 ➢分電盤に電流センサーを設置 センサーネットワークを活用したファシリティの可視化と運用 14 電力センサー コントローラ コントローラ
環境データの可視化と監視 ➢“Zabbix” と “garmit” で各センサ情報を統合 ✓電子錠を活用したラック施錠の状況確認と開錠 ✓ラック単位の温湿度を計測 ✓ブレーカ単位の電力測定 15 センサーネットワークを活用したファシリティの可視化と運用
ShowNet ラック内の温度監視 センサーネットワークを活用したファシリティの可視化と運用 16
ラック単位の温湿度 ➢ShowNet 期間中の温度と湿度 ✓温度: 30℃ を下回る値で運用 ✓湿度: 約 60% の湿度を推移
17 センサーネットワークを活用したファシリティの可視化と運用
電気錠を活用した遠隔オペレーション 18 AG452-G2-PSDX + 電気錠ターミナル ZABBIX garmit 開錠 or 施錠
電気錠機能付き ラックドアハンドル 電気信号 センサーネットワークを活用したファシリティの可視化と運用
ラック単位の電力情報 19 ➢分電盤にある全てのブレーカに電力センサを設置 ✓ブレーカ数:85個 (100V20A, 200V30A) ✓ShowNet(※) の消費電力と電流値:59.4KW, 408A ※ShowNetブース内のみ(PODは除く)
センサーネットワークを活用したファシリティの可視化と運用
電力のリアルタイム監視 ➢QRコードからラック単位の電流値を確認 ✓機器のマウント時に現在の状況と突入電流を確認できる センサーネットワークを活用したファシリティの可視化と運用 20
愛用され続ける ファシリティツールの活躍 21
ネットワーク機器の稼働を支える大黒柱 ➢今年は N-1..14, D-1..4, MOC, Stage, Pod へ計24台を配備 ✓業界で標準的な 42U
19インチラック ✓インテリジェンスなラックも導入 愛用され続けるファシリティツールの活躍 22
PDUと電源ケーブル ➢200V PDU が42台稼働中 ✓各ラックに0系, 1系の冗長構成 ➢電源ケーブル色分けによる可視化 ✓ケーブルの色で電源系統を判断 愛用され続けるファシリティツールの活躍 23
気流解析とエアーフロー ➢Tileflow 7.0 ✓構築前にラックのレイアウトをベースに気流シミュレーション ➢気流制御板 ✓現地でホットアイル/コールドアイルそれぞれの領域を構築 愛用され続けるファシリティツールの活躍 24
➢要件に応じた光ファイバケーブルとコネクタ形状 ✓ラック内で利用する物や踏まれても断線しないケーブル • 光ファイバと電線が一体化したもの • 一時敷設に適したドラム式のケーブル ✓各コネクタ • SC, LC,
MPO, SN 等 多種多様な光ファイバケーブル 25 愛用され続けるファシリティツールの活躍
ShowNet を支えるテスター ➢光ファイバケーブルの不良品を確認 ✓機器間や幕張メッセ Hall間の光ファイバケーブルをテスト • 断線や光レベルの劣化 等 ✓光ファイバコネクタの端面の検査 •
端面の汚れや焼け焦げを確認 愛用され続けるファシリティツールの活躍 26 SmartPocket WX-4500 OS1 MPO Lx FiberChek
ShowNet を支えるSFP/QSFP ➢純正品だけでなくサードパーティSFP/QSFPも利用 ➢100G-LR4, 400G-FR4 等 愛用され続けるファシリティツールの活躍 27
SFP/QSFP動作実績(1/2) 愛用され続けるファシリティツールの活躍 28 種別 型番 メーカ 動作確認機器 QSFPDD-400G-ZR+ - Macnica
Juniper ACX7348 Juniper PTX10002 QSFPDD-400G-FR4 WST-QD4-FR4-C Wavesplitter Velocity HS-3240 QSFPDD-400G-ZR+ (XR) - Infinera Juniper MX304 QSFP28-100G-LR4 QXP29B4-10D-3-1 X-one Technologies Cisco N9k-C9336C-FX2-1 Cisco N9K-C93180YC-FX3 Profitap Hauwei CE8855-32CQ4BQ Hauwei CE6885-48YS8CQ QSFP28-100G-LR4 FTLC1156RDPL2 NOC持込分 Juniper ACX7348 Juniper MX304 @flowinspector Hauwei CE6885-48YS8CQ QSFP28-100G-SR4 CFORTH-QSFP-100G-SR4 エイム電子 Profitap
SFP/QSFP動作実績(2/2) 愛用され続けるファシリティツールの活躍 29 種別 型番 メーカ 動作確認機器 SFP+_10G-LR CFORTH-SFP+-10G-LR エイム電子
BV-ntopng @FlowInspector Hauwei NE8000-M4-2 fx2 SFP+_10G-SR CFORTH-SFP+-10G-SR エイム電子 ParagonNEO HS-608MA-2X-PTP Hauwei NE8000-M4 SFP-T SFP-30TP CTS Cisco Catalyst 8500 pfs5010 TP4100 fos5112 Netpredy BOX
ファシリティコントリビューター 30