Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
「Snowflakeだけ」でMLOpsはどこまでできる? ~現時点の到達点と、更なる可能性~
Search
Sponsored
·
Ship Features Fearlessly
Turn features on and off without deploys. Used by thousands of Ruby developers.
→
Kaoru Sato
November 28, 2025
Technology
81
1
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
「Snowflakeだけ」でMLOpsはどこまでできる? ~現時点の到達点と、更なる可能性~
Kaoru Sato
November 28, 2025
Other Decks in Technology
See All in Technology
自律型AIエージェントは何を破壊するのか
kojira
0
150
Bucharest Tech Week 2026 - Reinventing testing practices in the AI era
edeandrea
PRO
1
140
Amazon Bedrock AgentCore ワークショップ JAWS UG TOHOKU / amazon-bedrock-agentcore-workshop-jawsug-tohoku-2026
gawa
9
670
"何を作るか"を任される エンジニアは、どう育つのか
yutaokafuji
1
590
LLMにもCAP定理があるという話
harukasakihara
0
290
新しいVibe Codingと”自走”について
watany
5
290
中期計画、2回作ってみた ~業務委託と正社員、両方の視点から~
demaecan
1
670
2026TECHFRESH畢業分享會 - Lightning Talk - 打造精準高效的 MCP 設計模式與測試實務
line_developers_tw
PRO
0
770
爆速でマルチプロダクトを立ち上げる時 事業・CTO目線で大事にしたい事
miyatakoji
0
100
Claude Codeをどのように キャッチアップしているか
oikon48
1
980
攻撃者視点で考えるDetection Engineering
cryptopeg
1
1.1k
[モダンアプリ勉強会]今更聞けないGit/GitHub入門
tsukuboshi
0
370
Featured
See All Featured
The Invisible Side of Design
smashingmag
302
52k
Building Flexible Design Systems
yeseniaperezcruz
330
40k
Between Models and Reality
mayunak
4
330
Why Mistakes Are the Best Teachers: Turning Failure into a Pathway for Growth
auna
0
160
Rebuilding a faster, lazier Slack
samanthasiow
85
9.5k
Navigating Weather and Climate Data
rabernat
0
220
Effective software design: The role of men in debugging patriarchy in IT @ Voxxed Days AMS
baasie
0
400
SEO in 2025: How to Prepare for the Future of Search
ipullrank
3
3.5k
The Anti-SEO Checklist Checklist. Pubcon Cyber Week
ryanjones
0
160
Agile Leadership in an Agile Organization
kimpetersen
PRO
0
160
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
35
2.5k
What the history of the web can teach us about the future of AI
inesmontani
PRO
1
610
Transcript
株式会社GA technologies Data / Applied ML / 部長 佐藤
薫 「Snowflakeだけ」でMLOpsはどこまでできる? ~現時点の到達点と、更なる可能性~ 1 2025/11/28 【SnowVillage&みん強コラボ企画】ここがヘンだよ!? Snowflake 〜 みんなが考えた最強のデータ基盤には、なんで Snowflakeが多いのか?
• 自己紹介・会社紹介 • まとめ・Takeaway • MLOpsが必要な理由 • SnowflakeでMLOpsを行うメリット
• リネージを実際に繋いでみた例 アジェンダ
• 自己紹介・会社紹介 • まとめ・Takeaway • MLOpsが必要な理由 • SnowflakeでMLOpsを行うメリット
• リネージを実際に繋いでみた例 アジェンダ
株式会社 GA technologies • Machine Learning関連 ◦ MLOps基盤の設計・開発・運用 (SageMaker
→ Airflow & MLflow → ?) ◦ アポ取得率や成約率などを予測し、 KPI運用や広告最適化に貢献 • 生成AI関連 ◦ Difyで生成AIの民主化 ◦ 顧客とAssetPlannerの面談文字起こしを様々な角度で構造化 佐藤 薫 / Sato Kaoru 4 主にデータサイエンスのキャリア 2011年 東京工業大学・大学院(現・東京科学大学) ストラスブール大学大学院交換留学(フランス) • 計量経済学・人口統計学 • 生活時間と人口動態の関係(クラスタリング・回帰分析) 2018年 2024年 2022年 アクサ生命保険株式会社 • データサイエンティスト • 新契約を自動査定する MLモデルの開発・運用 • 既契約者のアップセル・クロスセル確率を予測する MLモデルの開発・運用 • MLOps基盤の設計・開発・運用( Databricks) • データサイエンティストの新卒採用・育成
データ分析ツールの経験 5 データサイエンティストとして、様々な MLOps基盤を構築してきた 大学・大学院 アクサ生命 GA technologies
RStudio SageMaker Databricks MLflow Airflow Snowflake
6 会社紹介 / 株式会社GA technologies / RENOSY ※1 東京商工リサーチによる投資用不動産の売上実績(2025年3月調べ) ※2
東京商工リサーチによる投資用不動産会社の売上原価調査(2024年10月調べ)
外部サービス データカタログ 7 GA technologiesでのSnowflakeの使い方 Snowflakeを中心として様々なプロダクト・データが連携 データソース BIツール Reverse
ETL 内製サービス AGNT by RENOSY SUPPLIER by RENOSY MANAGE by RENOSY など ELT
• 自己紹介・会社紹介 • まとめ・Takeaway • MLOpsが必要な理由 • SnowflakeでMLOpsを行うメリット
• リネージを実際に繋いでみた例 アジェンダ
まとめ・Takeaway 参考 MLOps - Wikipedia 9 SnowflakeにもMLOps関連機能が揃い始め、統一基盤でリネージが繋がるメリットを生かせそう 2015年 “Hidden
Technical Debt in Machine Learning Systems” by Google 2018年 更なる可能性 課題:ModelからTableはまだ繋がらない(e.g., 予測結果を再利用するとリネージが切れる) 対策:現時点でもdbt上でカスタムすれば結合は可能 将来:ロードマップには載っているようなので、将来的に改善される可能性 2025年 SnowflakeもMLOps関連機能を多数発表 各社がMLOps機能を開発・公開し始める e.g., MLflow(Databricks), SageMaker 現時点の到達点 MLOpsに必要な機能が一通り揃い、リネージも Modelまで繋がるように 1. dbtでRAW層からSTG層やMART層を経てFEATURE層まで管理 2. Feature ViewとDatasetを作成するPythonをStageにDeploy 3. SnowparkのML Pipelineの学習・推論ImageをBuildし、Repositoryにpush 4. TerraformでProcedureとTaskをデプロイ
MLOpsに関わる機能のリリース日 10 2024年〜2025年にかけて MLOpsに必要な機能が一気に揃ってきた 2024年 • Snowflake Model
Registry(2024年3月3日一般公開) • Snowpark Container Services: Monitoring Services(2024年4月17日一般公開) • Snowpark Container Services(2024年8月1日一般公開) • Snowflake Feature Store(2024年9月25日一般公開) • Data & ML Lineage(2024年11月4日プレビュー公開) • ML Observability(?) • Snowflake Notebooks on Container Runtime for AWS(2025年3月17日一般公開) • Snowflake Datasets(2025年3月20日一般公開) • ML Explainability visualizations(2025年7月8日一般公開) • multiple replicas of a Snowpark Container Services job service(2025年8月7日プレビュー公開) • Using Snowsight to monitor data quality(2025年9月9日プレビュー公開) • Workspaces(2025年9月11日一般公開) • Snowflake-managed network rules(2025年10月21-23日一般公開) • Snowflake Machine Learning Experiments(2025年11月4日プレビュー公開) • dbt projects on Snowflake(2025年11月6日一般公開) 2025年
• 自己紹介・会社紹介 • まとめ・Takeaway • MLOpsが必要な理由 • SnowflakeでMLOpsを行うメリット
• リネージを実際に繋いでみた例 アジェンダ
Data ScienceとMLOps 12 Data ScientistがNotebookで作ったモデルを、 MLOps Engineerが再現性と保守性高く実装する Data Science
EDA 学習 Notebook
MLOps Data ScienceとMLOps 13 抽出 自動化(CI/CD/CT) 学習 コード管理(イメージ・ワークフロー) 管理
推論 監視 Data Science EDA 学習 Notebook Data ScientistがNotebookで作ったモデルを、 MLOps Engineerが再現性と保守性高く実装する
• 自己紹介・会社紹介 • まとめ・Takeaway • MLOpsが必要な理由 • SnowflakeでMLOpsを行うメリット
• リネージを実際に繋いでみた例 アジェンダ
MLOps DataOps データ基盤全体 15 Snowflakeであれば、 DataOpsとMLOpsを統合することができる 抽出 自動化(CI/CD/CT)
学習 コード管理(イメージ・ワークフロー・インフラ) 管理 推論 監視 リネージ管理 収集 蓄積 加工 EDA セキュリティ
MLOps DataOps データ基盤全体 16 Data Engineerと協業可能になり、インフラやセキュリティの管理コストが低減 抽出 自動化(CI/CD/CT)
学習 コード管理( イメージ・ワークフロー・インフラ) 管理 推論 監視 リネージ管理 収集 蓄積 加工 EDA セキュリティ
MLOps DataOps データ基盤全体 17 Analytical Engineer・Data Analystと協業可能になり、特徴量の管理コストが低減 抽出
自動化(CI/CD/CT) 学習 コード管理(イメージ・ワークフロー・インフラ) 管理 推論 監視 リネージ管理 収集 蓄積 加工 EDA セキュリティ
MLOps DataOps データ基盤全体 18 DataOpsとMLOpsの世界を超えてリネージが繋がることで、 MLモデルの管理コストが低減 抽出 自動化(CI/CD/CT)
学習 コード管理(イメージ・ワークフロー・インフラ) 管理 推論 監視 リネージ管理 収集 蓄積 加工 EDA セキュリティ
MLOps DataOps リネージ管理できると嬉しいこと 19 MLモデルの予測結果が再度データモデリングされ、 BIツールなどに提供されている場面を想定 抽出 自動化(CI/CD/CT)
学習 コード管理(イメージ・ワークフロー・インフラ) 管理 推論 監視 リネージ管理 収集 蓄積 加工 EDA セキュリティ
MLOps DataOps リネージ管理できると嬉しいこと 20 ある日突然、あるカラムの廃止がエンジニア側から伝えられたとする 抽出 自動化(CI/CD/CT) 学習
コード管理(イメージ・ワークフロー・インフラ) 管理 推論 監視 リネージ管理 収集 蓄積 加工 EDA セキュリティ
MLOps DataOps リネージ管理できると嬉しいこと 21 リネージが繋がっていないと、どのモデルで使われているかすぐに分からず、事故が起きる 抽出 自動化(CI/CD/CT) 学習
コード管理(イメージ・ワークフロー・インフラ) 管理 推論 監視 リネージ管理 収集 蓄積 加工 EDA セキュリティ
MLOps DataOps リネージ管理できると嬉しいこと 22 その結果、予測結果の利用先でも、事故が起きる 抽出 自動化(CI/CD/CT) 学習
コード管理(イメージ・ワークフロー・インフラ) 管理 推論 監視 リネージ管理 収集 蓄積 加工 EDA セキュリティ
• 自己紹介・会社紹介 • まとめ・Takeaway • MLOpsが必要な理由 • SnowflakeでMLOpsを行うメリット
• リネージを実際に繋いでみた例 アジェンダ
実際に試してみた 24 参考 ML リネージトレース: ML データフロー | Snowflake
Documentation RAW層からModelまでリネージが繋がっている
dbt projects on Snowflakeと組み合わせた例 25 RAW層からModelを経て予測結果まで リネージが繋がっている 参考
Snowflake ML モデルを dbt データパイプラインに組み込む - Speaker Deck dbt-snowflakeでPython modelのCustom Materializationを実装する ~Stored Procedure編~ - LayerX エンジニアブログ [便利]dbtでStreamlit in Snowflakeのコードを管理しよう!
• 自己紹介・会社紹介 • まとめ・Takeaway(再掲) • MLOpsが必要な理由 • SnowflakeでMLOpsを行うメリット
• リネージを実際に繋いでみた例 アジェンダ
まとめ・Takeaway(再掲) 参考 MLOps - Wikipedia 27 SnowflakeにもMLOps関連機能が揃い始め、統一基盤でリネージが繋がるメリットを生かせそう 2015年 “Hidden
Technical Debt in Machine Learning Systems” by Google 2018年 更なる可能性 課題:ModelからTableはまだ繋がらない(e.g., 予測結果を再利用するとリネージが切れる) 対策:現時点でもdbt上でカスタムすれば結合は可能 将来:ロードマップには載っているようなので、将来的に改善される可能性 2025年 SnowflakeもMLOps関連機能を多数発表 各社がMLOps機能を開発・公開し始める e.g., MLflow(Databricks), SageMaker 現時点の到達点 MLOpsに必要な機能が一通り揃い、リネージも Modelまで繋がるように 1. dbtでRAW層からSTG層やMART層を経てFEATURE層まで管理 2. Feature ViewとDatasetを作成するPythonをStageにDeploy 3. SnowparkのML Pipelineの学習・推論ImageをBuildし、Repositoryにpush 4. TerraformでProcedureとTaskをデプロイ
Data本部、積極採用中です! 不動産投資も興味あれば名刺交換しましょう! AIソリューションエンジニア MLOpsエンジニア アナリティクス・エンジニア データアナリスト データエンジニア