【swonet.conf_ 2026】SC2-07_AIと多様な観測データによるネットワーク運用革新

モニタリング分科会では、ShowNetの安定稼働を実現するための監視運用を担っています。多種多様な機器を運用するために、ログ監視・品質監視・リソース監視・アクティブ監視といったあらゆる側面での統合的な監視が求められます。SNMP・Syslog・xFlow・ストリーミングテレメトリ・パケット解析などの多様な観測データを収集・連携させ、ネットワーク品質からユーザ体験までを可視化する統合監視を実現しました。さらに今年は、複数の監視製品をMCPサーバ経由で接続し、LLMが製品固有のクエリやUI操作を介さず自然言語で監視情報を横断的に取得できる仕組みづくりに挑戦しました。本セッションでは、ShowNet 2026の監視システムのコンセプトと構築過程、そして監視運用で可視化した結果をご紹介します。

SPEAKER
ShowNet NOCチームメンバー
岩本 裕真（NTT）

Transcript

1. AIと多様な観測データによる ネットワーク運用革新 ShowNet NOCチームメンバー 岩本裕真
2. ShowNetにおける監視の必要性 • 安定したインターネットサービスの提供  出展者ブース・来場者・構築メンバーへのインターネットサービスの提供 • 構築中の予期せぬ障害  設定ミス・配線ミスと言った人為的なトラブル  配線の整理作業で意図せず作業対象外ケーブルが抜線される  機器のバグが起因となる障害の発見 • ShowNet特有の環境  データセンターとは違った厳しい環境での温湿度管理（外気からの影響を 強く受ける）
3. 監視対象：トポロジに乗る全ての機器 ・監視パケット転送 ・統合監視（SNMPを用いた全体監視） ・ログ監視・xFlow監視 ・光ファイバー監視 ・パケット解析・可視化 ・仮想化基盤監視 ・生成AI技術による運用補助 3
4. syslog モニタリング全体概要 xflow ・トラフィック分析 ・セキュリティ連携 ・エラー検知 ・log全文検索 センサーデータ snmp ・温度/湿度/Co2 ・trap通知 ・カウンタ情報get 物理監視 ・芯線の破断監視/センシング 各項目連携による 統合監視を実現 telemetry パケットキャプチャ ・リアルタイムデータ取得 ・push型のデータ出力 死活監視 ・icmp ping ・プロトコルベース ・L1〜L7トラフィック分析 ・映像ストリーミング監視 アクティブ監視 ・TWAMP ・ユーザー通信を模擬した監視 その他 ・エージェント監視 ・LLDP,時刻監視,etc.. 4
5. 変化する監視要件に追従するシステム設計 監視要件の変化 1. ラックマウント・監視網の構築 2. ネットワークの構築 3. サーバ・ストレージ基盤の構築 4. MoIP、モバイルサービスの構築 5. セキュリティサービスの構築 6. プロバイダサービスの提供 プロバイダのサービスを 5/29〜6/12の約2週間で 構築し提供 監視要件も都度変化する 5
6. 変化する監視要件に追従するシステム設計 Hotstage前期（5/29〜5/30） 温湿度監視、機器への死活監視、syslog受信監視 Hotstage後期（6/1〜6/5） snmp/syslog監視、xFlow監視、テレメトリ取得、アラート通知 Deploy Day（6/6〜6/9） 監視エージェント設置、品質監視、アラート条件精査 Interop Tokyo Day1〜3（6/10〜6/12） 安定稼働のための監視 6
7. 2026 モニタリングコンセプト AIと多様な観測データによるネットワーク運用革新 幅広い観測技術を組み合わせた次世代モニタリング ネットワーク品質からユーザ体験までを可視化する統合監視 監視製品とLLMの協調運用への挑戦
8. 幅広い観測技術を組み合わせた 次世代モニタリング
9. 監視トラフィック転送図 Syslog SNMP trap sFlow/NetFlow/IPFIX ミラートラフィック SDPFクラウド AWS ThousandEyesAgent Syslog解析AI基盤 (ソニービズネットワークス) System アプリケーション間連携 幕張メッセ ShowNet機器群 AnswerG3 [1-3] System AnswerG3 -XC NURO Biz Direct Connect経由 Telemetry collector e.g.)telegraf PacketMaster EX5-[1-2] SystemAnswer G3-[1-3] Streaming Telemetry 札幌・大阪 放送拠点 System Answer Logoption Zabbix7.0 ZS7700 EasyBlocks ZS-V700 Datadog agent FortiSwitch NMS Flowmon Apstra Flow Collector-VA Splunk-sf ＠FlowInspector ＠FlowInspector controller Flowmon Probe Flowmon Collector Net Captuer IOTA 10G+
10. 数字で見るモニタリング① • syslogホスト数：407 • Snmp trapホスト数：344 • Snmp get対象ホスト数：315 • flowホスト数：157 • 最大syslog数/day：365,040,030 Hotstage day1からのsyslog数の推移 10
11. 数字で見るモニタリング② syslog 送信ホスト数の推移 11
12. 数字で見るモニタリング③ 時間帯別 syslog 転送レート 日別 syslog 転送レート(平均・ピーク) 12
13. クラウド環境を利用した監視 AWS SDPF cloud SaaS 監視 nurobiz syslog解析AI基盤 Splunk Indexer ITOGUCHI Pagerduty Splunk SearchHead System AnswerG3 System AnswerG3 [1-3] XC 統合監視 Datadog 構成管理 テレメトリ 可視化 Cloud InterConnect インシデント 管理 MobileConnect ThousandEyes PCA Aruba UXI VisionWorks FortiTelemetry 統合監視 Internet 通信品質監視 Cloud InterConnect ManagementNetwork 監視 幕張メッセ内監視製品 13 13
14. 5Gを活用したモニタリング環境構築 • クラウド基盤との5G接続による迅速な監視環境の構築 ShowNet会場で利用されるPSU/PDUなどのログやテレメトリ データを設置場所に捉われずに収集 長期保存用ログ転送 Object Storage FG-51-5G ShowNet マネジメントNW mgmt PA-415-5G PSUs ION-1200-C5G-EXP トンネル (GRE) PDUs collector / forwarder 5G端末 docomo en-gNB Telemetry可視化 SIGN (Advanced) docomo business SIGN (Advanced)網 TEP vgw IoT Connect Gateway SDPF Cloud mec-gw logger/ telemetry （Splunk） 14
15. 光ファイバー監視 •Hall間光ファイバーの破断・損失監視、及びファイバーセンシングの取り組み (NOCラック) Viavi ONA 800 DTS Viavi FTH-5000 EXFO OTH-7000 ファイバー センシング (温度監視) OTDR (破断・損失監視) 監視対象芯線 ファイバ温度による光の散乱の差 を利用した温度測定 Hall6/8向け 15
16. デジタルツイン構成管理ソリューション • センサー監視情報と3Dモデルの重ね合わせによる環境モニタリング • ShowNetラックを3Dモデル化しデジタルツイン構成管理 16
17. 水冷ラックの監視 •水冷ラックの環境モニタリングでは水量・水圧・湿度等のメトリクスを収集 •漏水センサーを設置し、漏水検知時はNOCに自動オンコールする監視設計 水量 漏水センサー 水圧 湿度 17
18. 統合監視 アラート通知・管理 インシデント管理 SystemAnswerG3 • • • SNMP/SYSLOG監視 FlowCollectorとの一元管理 ユーザーエージェント監視 Zabbix • • • SNMP/SYSLOG監視 Telemetry監視 PTP環境の時刻監視 Splunk • • • 電話 syslog監視 フロー分析 テレメトリ可視化 NOC チャットツールへ通知 アラート通知 自動分析・ 回答Post 生成AI連携による障害分析 ＠FlowInspector
19. ネットワーク品質からユーザ体験 までを可視化する統合監視
20. ユーザ通信品質監視 ・TWAMP ・ ICMP ・ Traceroute ・ HTTP Request ・ DNS query ・監視エージェントを用いたサービス監視 ・出展者用ネットワークの正常性確認 ・ユーザー通信を模擬した品質測定 ・ TWAMPによる双方向遅延測定 全PODに監視エージェントを設置 20
21. アクティブ監視装置配置 (NOC/POD) 凡例 TWAMPエージェント UX監視エージェント Fusion JMEP Fusion JMEP HPE RoutingDirector HPE RoutingDirector Spirent VTP Spirent VTP HPE UXI FortiTelemetry FortiTelemetry FortiTelemetry IBC CX監視Option IBC CX監視Option Fusion JMEP Fusion JMEP HPE RoutingDirector HPE RoutingDirector HPE UXI FortiTelemetry FortiTelemetry IBC CX監視Option IBC CX監視Option Spirent VTP IBC CX監視Option IBC CX監視Option
22. ShowNet Media-X拠点間のTWAMPを用いた 高精度な遅延測定 各放送局ルータに Smart SFPを挿入し 双方向の品質測定 遠隔拠点→幕張 幕張→遠隔拠点 Cisco Provider Connectivity Assurance 22
23. 監視製品とLLMの協調運用 への挑戦
24. MCP利用したShowNet監視への挑戦 これまでの課題 • ネットワーク・サーバ運用では多種多様な監視製品のデータが必要となる • 機能の異なる監視データを比較するのは、非常に大変な労力 • 複数のモニタリング製品をMCPサーバ経由で接続し運用での利用を実証 • LLMであらゆる監視製品や監視機能を集約管理 • 製品特有のクエリやUI操作なしに自然言語で知りたい監視情報の取得 24
25. MCPとは • Model Context Protol • LLMが、外部システムの機能を利用するための標準的な接続方式 • MCPのToolはAIモデルが、必要に応じて呼び出せるものとして定義 https://modelcontextprotocol.io/docs/getting-started/intro 25
26. MCP Festa • あらゆるモニタリング製品をMCPサーバで繋ぐ相互接続デモを実施 • HotStageからMCPサーバの構築を開始しDeploy〜会期で本格的に運用に利用 • MCPサーバをShowNet仮想基盤で動作させ運用者に実際に利用してもらう 調査内容に応じて MCPサーバへ問い合わせ LLM1 MCP client プロンプト NOC STM Contributor LLM3 MCP client ・・・・ レスポンス LLM2 MCP client 返答内容の成形 APIによる問い合わせ NOC MCP server Zabbix 統合監視 NOC MCP server SystemAnswerG3 統合監視 NOC MCP server Flowmon FlowCollector Contributor MCP server Splunk Syslog/FlowCollector NOC MCP server Pagerduty アラート通知 Contributor MCP server Junos MCP Junos用制御 Contributor MCP server SmartGW リモートアクセス 結果の取得
27. MCP Festaデモ画面① プロンプト入力 回答結果 27
28. モニタリング MCP Festaデモ画面② 28
29. モニタリング LLM Judge による評価 • ShowNet期間中にMCPを利用したLLMによるクエリをLLM Judgeで評価 2.適切にツールを選定することができている割合 1.ツール呼び出しが実施されている割合 ラベル 定義 割合 called ツール種別の span が 1 つ以上あり、結果が記録されて いる 71% not_called ツール span がなく、ツールを使わずに回答 29% ラベル 定義 割合 correct ツール・パラメータが適切で、重要な欠落・誤 りがない 10% partially_correct 結論を変えない軽微な問題(冗長呼び出し、軽微 な時間ずれ、内蔵シェル代替) 36% incorrect ソース誤り、パラメータ誤り、必須呼び出しの 欠落、裏付けのない値(捏造) 27% not_applicable TOOL 型 span が存在しない(実行有無は 1. で評 価済み) 28% 29
30. モニタリング 協力いただいたコントリビュータさま ※50音順 30