Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Python と Snowflake はズッ友だょ!~ Snowflake の Python ...
Search
あれ
April 23, 2024
Technology
2
330
Python と Snowflake はズッ友だょ!~ Snowflake の Python 関連機能をふりかえる ~
2024/04/22「
PyData Okinawa Meetup #42
」登壇資料です。
あれ
April 23, 2024
Tweet
Share
More Decks by あれ
See All by あれ
5分でわかる! Snowpark Container Service
__allllllllez__
0
490
私が trocco を推す理由
__allllllllez__
2
760
SPCS で実現する dbt All in Snowflake の世界
__allllllllez__
3
560
External Network AccessとStreamlitでデータロードアプリ作ってみた
__allllllllez__
0
460
異形頭の作りかた
__allllllllez__
0
1.1k
💰年度末予算消化祭💰 Large Memory Instance で 画像分類してみた
__allllllllez__
0
460
Other Decks in Technology
See All in Technology
2025年春に見直したい、リソース最適化の基本
sogaoh
PRO
0
470
50人の組織でAIエージェントを使う文化を作るためには / How to Create a Culture of Using AI Agents in a 50-Person Organization
yuitosato
6
3.3k
いつも初心者向けの記事に助けられているので得意分野では初心者向けの記事を書きます
toru_kubota
2
270
AIエージェントの地上戦 〜開発計画と運用実践 / 2025/04/08 Findy W&Bミートアップ #19
smiyawaki0820
26
8.6k
似たような課題が何度も蘇ってくるゾンビふりかえりを撲滅するため、ふりかえりのテーマをフォーカスしてもらった話 / focusing on the theme
naitosatoshi
0
400
Spice up your notifications/try!Swift25
noppefoxwolf
2
350
DETR手法の変遷と最新動向(CVPR2025)
tenten0727
2
1.2k
All You Need Is Kusa 〜Slackデータで始めるデータドリブン〜
jonnojun
0
140
はじめてのSDET / My first challenge as a SDET
bun913
1
210
バックオフィス向け toB SaaS バクラクにおけるレコメンド技術活用 / recommender-systems-in-layerx-bakuraku
yuya4
3
330
”知のインストール”戦略:テキスト資産をAIの文脈理解に活かす
kworkdev
PRO
9
4.2k
AWSのマルチアカウント管理 ベストプラクティス最新版 2025 / Multi-Account management on AWS best practice 2025
ohmura
4
210
Featured
See All Featured
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
129
19k
Scaling GitHub
holman
459
140k
Speed Design
sergeychernyshev
29
880
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
32
5.1k
Docker and Python
trallard
44
3.3k
VelocityConf: Rendering Performance Case Studies
addyosmani
328
24k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
178
53k
Build The Right Thing And Hit Your Dates
maggiecrowley
35
2.6k
Fantastic passwords and where to find them - at NoRuKo
philnash
51
3.1k
Optimizing for Happiness
mojombo
377
70k
The Straight Up "How To Draw Better" Workshop
denniskardys
232
140k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
251
21k
Transcript
Python と Snowflake は ズッ友だょ! ~ Snowflake の Python 関連機能をふりかえる
~ DATUM STUDIO株式会社 梶谷 美帆 2024/04/22
© 2024 DATUM STUDIO Co. Ltd. 自己紹介 【名前】 梶谷 美帆
/ Miho Kajiya またの名を「あれ(@__allllllllez__)」 広報さんに超カッコよく撮影していただいた 【所属】 DATUM STUDIO株式会社 データエンジニアリング本部 2024 Data Superheroes Data Superhero のすがた
© 2024 DATUM STUDIO Co. Ltd. Python と Snowflake
© 2024 DATUM STUDIO Co. Ltd. 実は、Snowflake には Python で使える強力な機能が
たくさんあるのです
© 2024 DATUM STUDIO Co. Ltd. 5 Python と Snowflake
実は、Snowflake には Pythonで使える強力な機能がたくさんあるのです • Snowflake Connector for Python • Snowpark for Python • Python UDFs / UDTFs • Snowpark Stored Procedures for Python • Streamlit in Snowflake • Python Worksheet • Snowpark ML • Snowflake API for Python • Snowflake Notebook(2024/4/22時点でプライベートプレビュー) 思ったより多い、そして似た名前が多い
© 2024 DATUM STUDIO Co. Ltd Python と Snowflake ~
機能編 Snowflake Connector for Python ✓ 最も基本的なライブラリ。SQL 実行により全ての標準操作を行える Snowpark for Python ✓ Spark ライクな Dataframe API でデータ操作を行えるライブラリ。UDFs / UDTFs、SPROCの開発を簡単にするAPIも提供されており、Python 開発に便利 Streamlit in Snowflake ✓ Streamlit によるデータアプリケーションを Snowflake 上で実行、操作できる 各機能を簡単に説明するとこんな感じ Python Worksheet ✓ Snowflake UI上で Python ストアドプロシージャを作成・実行できるエディタ Snowpark ML ✓ 前処理、学習と推論、管理、モデルの展開をすべてSnowflake内で実行可能とな るライブラリ。Snowpark ML Development と Snowpark ML Ops からなる Snowflake API for Python ✓ Snowflake オブジェクトの管理を主とするライブラリ。タスクグラフやコンテナ (SPCS)などをコードで管理可能になる、DevOps に向けたパッケージ Snowflake Notebook ✓ いわゆる Notebook。Snowflake UI上でインタラクティブに Python・SQL の実 行、可視化が可能になる
© 2024 DATUM STUDIO Co. Ltd. 7 Summit 2022/06 発表/PrPr
2023/03 PuPr 2024/02 GA Python Worksheet Python と Snowflake ~ 歴史編 Snowflake 公開以来、多くの Python 関連機能が追加されてきました。特に 2022 年の Snowflake Summit 以降は続々と新機能が発表されています GA:一般提供 PuPr:公開プレビュー PrPr:非公開プレビュー Summit Summit 2021 発表/PrPr 2022/06 PuPr 2022/11 GA Snowpark for Python & Python UDFs / UDTFs, Stored Proceduresなどなど 2022/06 発表/PrPr 2023/09 PuPr 2023/12 GA(AWS) Streamlit in Snowflake 2023/06 PuPr 2024/01 GA (Modeling API のみ) Snowpark ML 2024/01 PuPr Snowflake API for Python 2023/11 発表/PrPr Snowflake Notebook 2015/12 GA Snowflake Connector for Python 2022 2023 2024 Snow day
© 2024 DATUM STUDIO Co. Ltd. Python と Snowflake で
実際、何ができる?
© 2024 DATUM STUDIO Co. Ltd. Snowflake と Python でできること
• Streamlit in Snowflake で外部 からデータロードするアプリ • APIのURLと、APIのホストを許 可するExternal Access integrationを指定して、ポチッ とな!するだけ
© 2024 DATUM STUDIO Co. Ltd. Snowflake と Python でできること
• Snowpark Container Services で Snowflake に JupyterLab 環 境を構築 • Snowflake で完結する Python 分析環境、できちゃいます
© 2024 DATUM STUDIO Co. Ltd. 今後の Python 関連アップデート展望
© 2024 DATUM STUDIO Co. Ltd. 今後の Python 関連アップデート展望 6月に開催する
Data Cloud Summit 2024。「Python Data Pipelines」セッションの予定あり
© 2024 DATUM STUDIO Co. Ltd. 今後の Python 関連アップデート展望 6月に開催する
Data Cloud Summit 2024。「Python Data Pipelines」セッションの予定あり \ \DevOps、分析、データエンジニアリングで怒涛のアップデートの予感!/ / Python API、native Notebook、パイプライン運用のための最新機能
© 2024 DATUM STUDIO Co. Ltd. これからも Python で使える 機能がどんどん増えていきそう
© 2024 DATUM STUDIO Co. Ltd. Snowflake と Python はこれからもずっと
一緒ってコト…?
© 2024 DATUM STUDIO Co. Ltd. Snowflake と Python は
ズッ友だょ!!!
© 2024 DATUM STUDIO Co. Ltd. おしまい