Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
データマネジメントを個人が気軽に学べる機会を
Search
TomoyukiMurakami
April 19, 2020
Technology
1
840
データマネジメントを個人が気軽に学べる機会を
TomoyukiMurakami
April 19, 2020
Tweet
Share
More Decks by TomoyukiMurakami
See All by TomoyukiMurakami
10分で分かるデータ民主化
greenmidori
0
780
AI民主化時代のツール活用
greenmidori
0
650
データを資産にする取り組み
greenmidori
1
790
DLG Cross 第1回オープニングトーク
greenmidori
0
73
スポンサードセッション_今後の流れ.pdf
greenmidori
0
73
データラーニングアカデミー_データサイエンティストを目指す人のためのキャリア戦略
greenmidori
1
130
第1回データラーニングギルドオフ会_オープニングトークトーク
greenmidori
0
820
データ分析入門以前ロードマップ
greenmidori
0
840
Other Decks in Technology
See All in Technology
夢の印税生活 / Life on Royalties
tmtms
0
180
Amazon S3 Vectorsは大規模ベクトル検索を低コスト化するサーバーレスなベクトルデータベースだ #jawsugsaga / S3 Vectors As A Serverless Vector Database
quiver
2
1k
2025新卒研修・Webアプリケーションセキュリティ #弁護士ドットコム
bengo4com
3
9.7k
o11yツールを乗り換えた話
tak0x00
2
1.7k
20250807 Applied Engineer Open House
sakana_ai
PRO
2
640
Delegate authentication and a lot more to Keycloak with OpenID Connect
ahus1
0
240
Amazon Bedrock AgentCore でプロモーション用動画生成エージェントを開発する
nasuvitz
6
290
GCASアップデート(202506-202508)
techniczna
0
220
[CV勉強会@関東 CVPR2025 読み会] MegaSaM: Accurate, Fast, and Robust Structure and Motion from Casual Dynamic Videos (Li+, CVPR2025)
abemii
0
110
Oracle Base Database Service:サービス概要のご紹介
oracle4engineer
PRO
1
20k
AIドリブンのソフトウェア開発 - うまいやり方とまずいやり方
okdt
PRO
8
290
ABEMAにおける 生成AI活用の現在地 / The Current Status of Generative AI at ABEMA
dekatotoro
0
450
Featured
See All Featured
Designing Experiences People Love
moore
142
24k
Git: the NoSQL Database
bkeepers
PRO
431
65k
YesSQL, Process and Tooling at Scale
rocio
173
14k
Building Applications with DynamoDB
mza
96
6.6k
Music & Morning Musume
bryan
46
6.7k
KATA
mclloyd
32
14k
The Web Performance Landscape in 2024 [PerfNow 2024]
tammyeverts
9
770
Optimising Largest Contentful Paint
csswizardry
37
3.4k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
23
1.4k
Keith and Marios Guide to Fast Websites
keithpitt
411
22k
The Straight Up "How To Draw Better" Workshop
denniskardys
236
140k
How to train your dragon (web standard)
notwaldorf
96
6.2k
Transcript
データマネジメントを 個人が気軽に学べる機会を
アウトライン ◉ 個人がデータマネジメントを学ぶ上での課題 ◉ データラーニングギルドでの取り組み ◉ データマネジメントをどのように学ぶ? 2
村上智之 データ分析コンサルタント ✓ データ分析組織の立上 ✓ 立上時のデータ整理 ✓ 課題の設定と分析課題への ✓ データ分析におけるPM
教育・コミュニティ ✓ オンラインサロンの運営 ✓ データ分析スクール運営 ✓ 200名以上の教育経験 3
データマネジメントを 学ぶ上での課題 ~個人で学ぶ際のハードル~ 1 4
Q.どうやってデータマネジメントを学びましたか? (or 学ぶ予定ですか?) 5
A. 実践 & 実践 環境に合わせた学習が重要 座学で学習できることはあるが、実際の問題に合わせて 柔軟に対応する必要があるためデータマネジメントの学 習において実践経験がかなり重要な要素を占める。 6
データマネジメントを個人で学ぶ上での課題 ◉ データが無い or 綺麗すぎる ◉ コストがかかる ◉ 組織や前提状況が無いので実践できない 7
データが無い! 既にマネジメントされている データマネジメントでは様々なデータを集めて来てマネ ジメントをする必要があるが、世の中で提供されている データの多くは既にマネジメントされており整っている。 8
コストが高い! クラウドインフラが前提 大規模なデータを使ったり、マネージドのサービスを使 ったりしようとすると、結構コストがかかる。下手する と月に数万円とかかかったりするので、結構大変。 9
組織が無い! 課題の捏造はしんどい どんなデータを集めて来て、どういった頻度で誰が見た いか、どこまで権限を付けるかなどの課題を解くことで 理解が深まるが、実組織が無いとイメージし辛い。 10
Q. どうやってデータマネジメントを学んだらいいの? 11
データラーニングギルド 12
データラーニングギルド 13 データ分析人材や分析プロジェクトに 関わる人材と交流できる データ分析に関する最新情報から、 自分に合った情報が手に入る データ分析人材としてのステージに 合ったロールモデルを見つけられ、 自分に合ったキャリア設計ができる 分析プロジェクト、学習、キャリア構築
など、分析人材としての活動に対して、 適切なフィードバックが貰える データ分析人材としての自分の立ち位置 を正確に測ることができる環境 データ分析人材が分析人材として活躍し、 その価値を最大限発揮できるように、 後押しして貰える お互いの得意領域に関する知識を交換 したり、作業を負担し合ったりといった 活動を推奨 マッチング 情報収集 情報選定 キャリア プランニング フィードバック 評価 エンパワーメント 相互補助
データラーニングギルド での事例紹介 ~データマネジメントの学習環境を作る~ 2 14
事例紹介 ◉ 分析コンペでのデータマネジメント事例1 ◉ 分析企画でのデータマネジメント事例2 ◉ 上記の事例を学習コンテンツ化 15
GCP上に環境を構築 Slackのデータを分析するコンペの企画 として「GCPに分析用のデータを蓄積 するデータパイプラインを構築してみ る」という課題を設定して、パイプラ インを構築するようなコンペを実施。 データ分析コンペでの事例 体制図 16 企画者
リーダー メンバー メンバー メンバー
構築したパイプラインの例 17 GCP GCE Slack GCS BigQuery Data Portal APIリクエスト
APIレスポンス ファイル アップロード cronで 日次実行 データロード データ参照
複数人でのデータ共有 Slack分析コンペで構築したデータパイ プラインのデータと、他企画のデータ を統合、共有することによって、デー タマネジメントにおいて重要なシステ ム間連携、ドキュメンテーションに関 して学習することが可能に。 分析企画での事例 アウトプット例 18
現在構築中のパイプラインの例 19
データラーニングギルドにおけるデータマネジメント学習 ◉ データ、インフラ、ツール、組織や前提を提供 ◉ 経験者によるフィードバックが受けられる環境の提供 ◉ コンテンツ化による学習内容の共有 20
データマネジメント 学習のススメ ~データマネジメントの学び方~ 3 21
データマネジメント学習のススメ ◉ まずは座学で重要なことをザっと把握しよう ➢ データマネジメントが30分で分かる本がおススメ! ◉ 課題に紐づいた実践経験が積めるよう意識しよう! ➢ 有償無償問わず、オンラインコミュニティでデータ分析基盤の構 築をしたい所は多くあるはずなので、提案してみよう!
22
まとめ ◉ データマネジメントを個人で学習するのは大変! ◉ デーラーニングギルドでは学べる環境を作ってます!! ◉ データマネジメントを学ぶ際は実践を積めるように意識 をしよう!!! 23