ワークスペース監視 入門-RTI・セマンティックモデル・ミラーリングをモニタリング-（Getting Started with Workspace Monitoring: Monitoring RTI, Semantic Models, and Mirroring）

2025/11/5(水) 19:00~ Microsoft Data Analytics Day(Online) 勉強会にて発表します！ご参加ください！
▽勉強会URL
https://sqlserver.connpass.com/event/370892/

▽アーカイブ（Youtube）はこちら！
Coming soon

# 対象読者
・ワークスペース監視（モニタリング）について概要を知りたい方
・ミラーリングやセマンティックモデルをリアルタイムで分析したい方

# 目次
・ワークスペース監視とは
・今回のワークスペース監視のアーキテクチャ（ミラーリング中心）
・ワークスペース監視の導入
　・設定方法
　・自動作成されたアイテムをみてみる
　　・イベントストリーム
　　・イベントハウス
　　・KQLDB
・テンプレートを使って可視化する
　・テンプレの紹介
　・PBIレポートとリアルタイムダッシュボードがある
　・ミラー化DBのテンプレPBIレポートをみてみる
・ワークスペース監視（ミラー化DB）リアルタイムダッシュボードの作成
　・【参考】RTIのチュートリアルがおすすめ
　・リアルタイムダッシュボードの紹介
　・Git hubに公開
・ワークスペース監視データの長期蓄積
　・ワークスペース監視の制限事項
　・Pipeline経由でレイクハウスに蓄積
・ワークスペース監視のコストについて
・まとめ
・参考資料

👉関連 Qiita記事はこちら：
・Microsoft Fabricのワークスペース監視を有効化してみた-何ができる？取得できるログ・メトリクス一覧-　　
　　https://qiita.com/ReijiOtake/items/0789089064b8cc9652b6
・Microsoft Fabric ワークスペース監視ダッシュボードを構築する手順まとめ-テンプレートを使用-
　　https://qiita.com/ReijiOtake/items/2272f3da7ed4e9f4b516
・Fabricのワークスペース監視データを30日以上保持する暫定方法-Pipeline経由でレイクハウスに蓄積-
　　https://qiita.com/ReijiOtake/items/64f43c5c5c60d6dfc862

(English Description)
# Target Audience
・Those who want an overview of workspace monitoring
・Those interested in real-time analysis of mirroring and semantic models etc..

# Table of Contents
・What is Workspace Monitoring?
・Architecture of This Workspace Monitoring (Focused on Mirroring)
・Introduction to Workspace Monitoring
　・How to Configure
　・Reviewing Automatically Generated Items
　　・Event Stream
　　・Event House
　　・KQLDB
・Visualizing with Templates
　・Introduction to Templates
　・Includes PBI Reports and Real-Time Dashboards
　・Reviewing the Template PBI Report for Mirrored DB
・Creating a Real-Time Dashboard for Workspace Monitoring (Mirrored DB)
　・[Reference] RTI Tutorial Recommended
　・Overview of Real-Time Dashboard
　・Available on GitHub
・Long-Term Storage of Workspace Monitoring Data
　・Limitations of Workspace Monitoring
　・Storing in Lakehouse via Pipeline
・Cost of Workspace Monitoring
・Summary
・References

👉 Related Qiita Articles:
Enabled Microsoft Fabric Workspace Monitoring – What Can You Do? List of Logs and Metrics Available
https://qiita.com/ReijiOtake/items/0789089064b8cc9652b6
How to Build a Microsoft Fabric Workspace Monitoring Dashboard – Using Templates
https://qiita.com/ReijiOtake/items/2272f3da7ed4e9f4b516
Temporary Method for Retaining Fabric Workspace Monitoring Data for Over 30 Days – Store via Pipeline to Lakehouse
https://qiita.com/ReijiOtake/items/64f43c5c5c60d6dfc862

Transcript

1. Microsoft Data Analytics Day (Online) 勉強会 2025.11.05 大竹 礼二 ワークスペース監視 入門 RTI・セマンティックモデル・ミラーリングをモニタリング
2. 目次 • ワークスペース監視とは • 今回のワークスペース監視のアーキテクチャ（ミラーリング中心） • ワークスペース監視の導入 • 設定方法 • 自動作成されたアイテムをみてみる • イベントストリーム • イベントハウス • KQLDB • テンプレートを使って可視化する • テンプレの紹介 • PBIレポートとリアルタイムダッシュボードがある • ミラー化DBのテンプレPBIレポートをみてみる • ワークスペース監視（ミラー化DB）リアルタイムダッシュボードの作成 • 【参考】RTIのチュートリアルがおすすめ • リアルタイムダッシュボードの紹介 • Git hubに公開 • ワークスペース監視データの長期蓄積 • ワークスペース監視の制限事項 • Pipeline経由でレイクハウスに蓄積 • コストについて • まとめ
3. ワークスペース監視とは
4. ワークスペース監視とは ワークスペース内のさまざまな Fabric アイテムからログとメトリックを収集および整理する Microsoft Fabric データベースです ワークスペースの監視により、ワークスペース ユーザーは、ワークスペース内の Fabric アイテム に関連するログとメトリックにアクセスし て分析できます ワークスペースの監視の概要 - Microsoft Fabric | Microsoft Learn セマンティックモデル・イベントハウス・ミラー化DB・GraphQL
5. ワークスペース監視 で作成されるアイテム ワークスペース 連携元システム 今回のワークスペース監視のアーキテクチャ ~ミラーリング中心~ ここは定期ジョブ回している Direct Query テンプレートを 使用 自作 Microsoft Fabric ミラーリング オープン ミラーリング
6. ワークスペース監視の導入 とりあえず作ってみた
7. ワークスペース監視の導入 ~設定方法~ Microsoft Fabricのワークスペース監視を有効化してみた-何ができる？取得できるログ・メトリクス一覧- #PowerBI - Qiita
8. ワークスペース監視の導入 ~自動作成されたイベントストリームをみてみる~ 自動で作成される。編集は不可。
9. ワークスペース監視の導入 ~自動作成されたイベントハウスをみてみる~
10. ワークスペース監視の導入 ~自動作成されたKQLDBをみてみる~
11. ワークスペース監視の導入 ~自動作成されたKQLDBをみてみる~ ワークスペースの監視の概要 - Microsoft Fabric | Microsoft Learn
12. MirroredDatabaseTableExecution ~どんな列があるかみてみる~ ミラー化されたデータベース操作ログ - Microsoft Fabric | Microsoft Learn
13. テンプレートを使って可視化する
14. テンプレを使って可視化する ~テンプレの紹介~ Fabric Workspace Monitoring Report Templates
15. テンプレを使って可視化する ~PBI レポート・リアルタイムダッシュボードのテンプレートが用意されている~
16. テンプレを使って可視化する ~ミラー化DBのテンプレPBIレポート~
17. テンプレダッシュボードつくってみた ~ミラー化DBのテンプレPBIレポート ドリルダウン~
18. ワークスペース監視（ミラー化DB） リアルタイムダッシュボードの作成
19. その前に ~リアルタイムインテリジェンスのチュートリアルで学ぶ~ リアルタイムインテリジェンスについて学びたい方はチュートリアルを一度実施するのがおすすめです リアルタイム インテリジェンス チュートリアル - 概要 - Microsoft Fabric | Microsoft Learn
20. ワークスペース監視（ミラー化DB）リアルタイムダッシュボード作ってみた DEMOの時は５分とかでぐるぐる 回してもいいかも
21. ワークスペース監視（ミラー化DB）リアルタイムダッシュボード作ってみた DEMOの時は５分とかでぐるぐる 回してもいいかも 直近1週間のレプリケーション遅延時間 テーブルビュー 行数とレプリケーション遅延の相関 直近３時間のレプリケーション遅延時間 エラー状況 ソースタイプごとの テーブル数 テーブル数
22. Githubに公開しました。 ~ああ~ Git hubにリアルタイムダッシュボードのKQL公開しました
23. ワークスペース監視データの長期蓄積
24. ワークスペース監視の制限事項~ああ~ ワークスペースの監視の概要 - Microsoft Fabric | Microsoft Learn
25. Fabricのワークスペース監視データを30日以上保持する ~Pipeline経由でレイクハウスに蓄積~ Pipeline経由でレイクハウスに蓄積(定期実行) 詳しくはこちらご覧ください 検討したアプローチ ワークスペース監視のソースは、ワークスペース設定で自 作成されるイベントストリームにしか含まれていない 新しくイベントストリームを作成しても、そこからはワークス ペース監視のデータを参照できない さらに、この自動生成されたイベントストリームは編集不可 のため、宛先にレイクハウスを追加することもできない
26. ワークスペース監視のコストについて
27. ワークスペース監視によるCU消費 ワークスペースの監視の概要 - Microsoft Fabric | Microsoft Learn ワークスペース監視はCUを消費するが、容量の状態の影響を受けない
28. まとめ
29. まとめ ~ワークスペース監視をつかってみて~ おすすめ • 導入はシンプル。 テンプレートを使えば、簡単に可視化まで到達。 • 自動生成された KQL DB を活かして、 自分でリアルタイムダッシュボードを構築可能。 • ミラー化DBを監視したければ導入すべし！ 注意点 • Eventstream/EventhouseはCUを消費するが、 スロットリングの影響はない 感想 • RTIのチュートリアル ＋ SQLの知識 ＋ レポートイメージがあれば、 リアルタイムダッシュボードは作れる！ • 他のFabric提供のイベントソース(OneLakeイベント、ジョブイベントなど) も使ってリアルタイムダッシュボード作ってみたくなった。
30. 参考資料 ▼ ワークスペース監視 ワークスペースの監視の概要 - Microsoft Fabric | Microsoft Learn ワークスペースの監視を有効にする - Microsoft Fabric | Microsoft Learn サンプル テンプレートを使用して、Real-Time ダッシュボードまたは Power BI レポートでワークスペースの監視を視覚化する - Microsoft Fabric | Microsoft Learn ▼ ミラー化DBのワークスペース監視 ミラー化されたデータベース レプリケーションの監視 - Microsoft Fabric | Microsoft Learn ミラー化されたデータベース操作ログ - Microsoft Fabric | Microsoft Learn ▼Fabric Workspace Monitoring Report Templates fabric-toolbox/monitoring/workspace-monitoring-dashboards at main · microsoft/fabric-toolbox · GitHub ▼関連Qiita Microsoft Fabricのワークスペース監視を有効化してみた-何ができる？取得できるログ・メトリクス一覧- #PowerBI - Qiita Microsoft Fabric ワークスペース監視ダッシュボードを構築する手順まとめ-テンプレートを使用- #PowerBI – Qiita Fabricのワークスペース監視データを30日以上保持する暫定方法-Pipeline経由でレイクハウスに蓄積- #PowerBI - Qiita