Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Python と Snowflake はズッ友だょ!~ Snowflake の Python ...
Search
あれ
April 23, 2024
Technology
2
360
Python と Snowflake はズッ友だょ!~ Snowflake の Python 関連機能をふりかえる ~
2024/04/22「
PyData Okinawa Meetup #42
」登壇資料です。
あれ
April 23, 2024
Tweet
Share
More Decks by あれ
See All by あれ
Backlog ユーザー棚卸しRTA、多分これが一番早いと思います
__allllllllez__
1
60
Python フレンドリーなクラウドデータプラットフォーム Snowflake のお話 ~ データ分析基盤のアレもコレも Python でやってみよう
__allllllllez__
0
67
5分でわかる! Snowpark Container Service
__allllllllez__
0
680
私が trocco を推す理由
__allllllllez__
2
820
SPCS で実現する dbt All in Snowflake の世界
__allllllllez__
3
630
External Network AccessとStreamlitでデータロードアプリ作ってみた
__allllllllez__
0
510
異形頭の作りかた
__allllllllez__
0
1.3k
💰年度末予算消化祭💰 Large Memory Instance で 画像分類してみた
__allllllllez__
0
470
Other Decks in Technology
See All in Technology
作曲家がボカロを使うようにPdMはAIを使え
itotaxi
0
140
プロダクトエンジニアリング組織への歩み、その現在地 / Our journey to becoming a product engineering organization
hiro_torii
0
130
生成AI時代 文字コードを学ぶ意義を見出せるか?
hrsued
1
610
【TiDB GAME DAY 2025】Shadowverse: Worlds Beyond にみる TiDB 活用術
cygames
0
1.1k
より良いプロダクトの開発を目指して - 情報を中心としたプロダクト開発 #phpcon #phpcon2025
bengo4com
1
3.1k
「Chatwork」の認証基盤の移行とログ活用によるプロダクト改善
kubell_hr
1
200
20250625 Snowflake Summit 2025活用事例 レポート / Nowcast Snowflake Summit 2025 Case Study Report
kkuv
1
330
Lambda Web Adapterについて自分なりに理解してみた
smt7174
5
130
エンジニア向け技術スタック情報
kauche
1
290
急成長を支える基盤作り〜地道な改善からコツコツと〜 #cre_meetup
stefafafan
0
130
生まれ変わった AWS Security Hub (Preview) を紹介 #reInforce_osaka / reInforce New Security Hub
masahirokawahara
0
240
Oracle Cloud Infrastructure:2025年6月度サービス・アップデート
oracle4engineer
PRO
2
280
Featured
See All Featured
Code Review Best Practice
trishagee
68
18k
Learning to Love Humans: Emotional Interface Design
aarron
273
40k
GraphQLの誤解/rethinking-graphql
sonatard
71
11k
Faster Mobile Websites
deanohume
307
31k
Let's Do A Bunch of Simple Stuff to Make Websites Faster
chriscoyier
507
140k
10 Git Anti Patterns You Should be Aware of
lemiorhan
PRO
657
60k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
194
16k
Fight the Zombie Pattern Library - RWD Summit 2016
marcelosomers
233
17k
Optimising Largest Contentful Paint
csswizardry
37
3.3k
Optimizing for Happiness
mojombo
379
70k
Agile that works and the tools we love
rasmusluckow
329
21k
Building Applications with DynamoDB
mza
95
6.5k
Transcript
Python と Snowflake は ズッ友だょ! ~ Snowflake の Python 関連機能をふりかえる
~ DATUM STUDIO株式会社 梶谷 美帆 2024/04/22
© 2024 DATUM STUDIO Co. Ltd. 自己紹介 【名前】 梶谷 美帆
/ Miho Kajiya またの名を「あれ(@__allllllllez__)」 広報さんに超カッコよく撮影していただいた 【所属】 DATUM STUDIO株式会社 データエンジニアリング本部 2024 Data Superheroes Data Superhero のすがた
© 2024 DATUM STUDIO Co. Ltd. Python と Snowflake
© 2024 DATUM STUDIO Co. Ltd. 実は、Snowflake には Python で使える強力な機能が
たくさんあるのです
© 2024 DATUM STUDIO Co. Ltd. 5 Python と Snowflake
実は、Snowflake には Pythonで使える強力な機能がたくさんあるのです • Snowflake Connector for Python • Snowpark for Python • Python UDFs / UDTFs • Snowpark Stored Procedures for Python • Streamlit in Snowflake • Python Worksheet • Snowpark ML • Snowflake API for Python • Snowflake Notebook(2024/4/22時点でプライベートプレビュー) 思ったより多い、そして似た名前が多い
© 2024 DATUM STUDIO Co. Ltd Python と Snowflake ~
機能編 Snowflake Connector for Python ✓ 最も基本的なライブラリ。SQL 実行により全ての標準操作を行える Snowpark for Python ✓ Spark ライクな Dataframe API でデータ操作を行えるライブラリ。UDFs / UDTFs、SPROCの開発を簡単にするAPIも提供されており、Python 開発に便利 Streamlit in Snowflake ✓ Streamlit によるデータアプリケーションを Snowflake 上で実行、操作できる 各機能を簡単に説明するとこんな感じ Python Worksheet ✓ Snowflake UI上で Python ストアドプロシージャを作成・実行できるエディタ Snowpark ML ✓ 前処理、学習と推論、管理、モデルの展開をすべてSnowflake内で実行可能とな るライブラリ。Snowpark ML Development と Snowpark ML Ops からなる Snowflake API for Python ✓ Snowflake オブジェクトの管理を主とするライブラリ。タスクグラフやコンテナ (SPCS)などをコードで管理可能になる、DevOps に向けたパッケージ Snowflake Notebook ✓ いわゆる Notebook。Snowflake UI上でインタラクティブに Python・SQL の実 行、可視化が可能になる
© 2024 DATUM STUDIO Co. Ltd. 7 Summit 2022/06 発表/PrPr
2023/03 PuPr 2024/02 GA Python Worksheet Python と Snowflake ~ 歴史編 Snowflake 公開以来、多くの Python 関連機能が追加されてきました。特に 2022 年の Snowflake Summit 以降は続々と新機能が発表されています GA:一般提供 PuPr:公開プレビュー PrPr:非公開プレビュー Summit Summit 2021 発表/PrPr 2022/06 PuPr 2022/11 GA Snowpark for Python & Python UDFs / UDTFs, Stored Proceduresなどなど 2022/06 発表/PrPr 2023/09 PuPr 2023/12 GA(AWS) Streamlit in Snowflake 2023/06 PuPr 2024/01 GA (Modeling API のみ) Snowpark ML 2024/01 PuPr Snowflake API for Python 2023/11 発表/PrPr Snowflake Notebook 2015/12 GA Snowflake Connector for Python 2022 2023 2024 Snow day
© 2024 DATUM STUDIO Co. Ltd. Python と Snowflake で
実際、何ができる?
© 2024 DATUM STUDIO Co. Ltd. Snowflake と Python でできること
• Streamlit in Snowflake で外部 からデータロードするアプリ • APIのURLと、APIのホストを許 可するExternal Access integrationを指定して、ポチッ とな!するだけ
© 2024 DATUM STUDIO Co. Ltd. Snowflake と Python でできること
• Snowpark Container Services で Snowflake に JupyterLab 環 境を構築 • Snowflake で完結する Python 分析環境、できちゃいます
© 2024 DATUM STUDIO Co. Ltd. 今後の Python 関連アップデート展望
© 2024 DATUM STUDIO Co. Ltd. 今後の Python 関連アップデート展望 6月に開催する
Data Cloud Summit 2024。「Python Data Pipelines」セッションの予定あり
© 2024 DATUM STUDIO Co. Ltd. 今後の Python 関連アップデート展望 6月に開催する
Data Cloud Summit 2024。「Python Data Pipelines」セッションの予定あり \ \DevOps、分析、データエンジニアリングで怒涛のアップデートの予感!/ / Python API、native Notebook、パイプライン運用のための最新機能
© 2024 DATUM STUDIO Co. Ltd. これからも Python で使える 機能がどんどん増えていきそう
© 2024 DATUM STUDIO Co. Ltd. Snowflake と Python はこれからもずっと
一緒ってコト…?
© 2024 DATUM STUDIO Co. Ltd. Snowflake と Python は
ズッ友だょ!!!
© 2024 DATUM STUDIO Co. Ltd. おしまい