第4回Snowflake中部 User Group 〜DWの設計や運用、みんなどうしてるの？ Snowflakeで迷うことディスカッション会～

この資料は 2025年5月30日(金)に開催したイベント「第4回 Snowflake 中部ユーザ会　〜DWの設計や運用、みんなどうしてるの？　Snowflakeで迷うことディスカッション会～」（https://techplay.jp/event/980596）のディスカッション用資料です。

Transcript

1. Snowflake 中部ユーザー会 中部地方に根付く企業と 異業種交流で共に歩む データ活用の未来 第4回!! Snowflakeで迷うこと ディスカッション会 オフライン限定 5/30 (Fri) 18:30 – 20:30 無料 DWの設計や運用、 みんなどうしてるの？
2. 本日のテーマ テーマ１： データパイプラインの処理構造 テーマ２： アカウント・データベース・スキーマの切り方 テーマ３： Snowflakeユーザーの配布 テーマ４～： Sli.doに投稿＆投票をお願いします！！ 2025.05.30 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 2
3. テーマ１： データパイプラインの処理構造 2025.05.30 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 3
4. テーマ１： データパイプラインの処理構造 • 一般的に3層構造（データレイク層、データウェアハウス層、データ マート層）が有名です。 最近ではこれにステージング層を加えた4層構造も見受けられます。 • また、データマート層は、データウェアハウスとBIツールの境界にもなり、 どちらでも実装できます。 • 実際、みなさんどうしてるんでしょうか？ 2025.05.30 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 4
5. テーマ１： データパイプラインの処理構造 2025.05.30 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 5 ステージング データ ウェアハウス データマート データレイク 生(なま)のまま 最低限の整備 基本素材 用途特化 （諸説あります・・） 2層型 3層型 4層型 (3.5層型)
6. テーマ１： データパイプラインの処理構造 2025.05.30 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 6 ステージング データ ウェアハウス データマート データレイク 補足：ＥＴＬの場合 （前ページは暗黙にＥＬＴを想定） データ ソース Ｅ Ｔ Ｌ ツ ー ル
7. テーマ２： アカウント・データベース・スキーマの切り方 2025.05.30 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 7
8. テーマ２： アカウント・データベース・スキーマの切り方 • Snowflakeのオブジェクトは、アカウント・データベース・スキーマと 階層があります。 • 各階層を何で切り分けるかには、いろいろな観点が考えられます。 • 会社、ビジネスドメイン、データソース、データパイプラインの処理階層、 データ活用側のプロジェクト、などなど。 • 実際、みなさんどうしてるんでしょうか？ 2025.05.30 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 8
9. テーマ２： アカウント・データベース・スキーマの切り方 • Snowflakeの構成 2025.02.xx 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 9 アカウント 法人 • 切り分ける要素 部門/ ビジネスドメイン データソース／ データ生産組織 本番／開発 プロジェクト ユースケース／ データ利用組織 データの 処理階層 アカウント データベース スキーマ テーブル テーブル テーブル アカウント データ ベース スキーマ スキーマ データ ベース
10. テーマ３： Snowflakeユーザーの配布 2025.02.xx 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 10
11. テーマ３： Snowflakeユーザーの配布 • Snowflakeのユーザーについて、２つの選択肢が存在します • 直接エンドユーザーに配布 • エンドユーザーには配布せずに、開発者（データエンジニア）だけに留める （エンドユーザーには、BIツールなどのユーザーを配布） • エンドユーザーに払い出す場合は、当然ながらSnowsightの使用 などいろいろできてしまうため、課題が生じるかもしれません。 • 実際、みなさんどうしてるんでしょうか？ 2025.05.30 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 11
12. BI等 ツール テーマ３： Snowflakeユーザーの配布 2025.02.xx 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 12 開発者 エンドユーザー ? ユーザー ユーザー ?
13. テーマ４～： （みんなで選びましょう！） 2025.05.30 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 13
14. テーマ４～： では、Sli.doの投稿＆投票結果を見てみましょう！！ 2025.05.30 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 14
15. おしまい 2025.02.xx 第4回 Snowflake 中部ユーザー会 – パネルディスカッション会 15