Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
FivetranとSnowflakeでSalesforceデータ分析環境をお手軽構築
Search
Hiroyoshi Oba
June 19, 2020
Technology
0
2.6k
FivetranとSnowflakeでSalesforceデータ分析環境をお手軽構築
Hiroyoshi Oba
June 19, 2020
Tweet
Share
Other Decks in Technology
See All in Technology
プロダクトの成長に合わせたアーキテクチャの段階的進化と成長痛、そして、ユニットエコノミクスの最適化
kakehashi
PRO
1
110
ソフトウェア エンジニアとしての 姿勢と心構え
recruitengineers
PRO
22
11k
AIエージェントの活用に重要な「MCP (Model Context Protocol)」とは何か
masayamoriofficial
0
220
浸透しなさいRFC 5322&7208
hinono
0
130
実践アプリケーション設計 ②トランザクションスクリプトへの対応
recruitengineers
PRO
4
1.1k
Webアクセシビリティ入門
recruitengineers
PRO
3
1.3k
Yahoo!ニュースにおけるソフトウェア開発
lycorptech_jp
PRO
0
530
知られざるprops命名の慣習 アクション編
uhyo
11
2.8k
努力家なスクラムマスターが陥る「傍観者」という罠と乗り越えた先に信頼があった話 / 20250830 Takahiro Sasaki
shift_evolve
PRO
2
120
【 LLMエンジニアがヒューマノイド開発に挑んでみた 】 - 第104回 Machine Learning 15minutes! Hybrid
soneo1127
0
180
Preferred Networks (PFN) とLLM Post-Training チームの紹介 / 第4回 関東Kaggler会 スポンサーセッション
pfn
PRO
1
280
「AI2027」を紐解く ― AGI・ASI・シンギュラリティ
masayamoriofficial
0
140
Featured
See All Featured
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
PRO
185
54k
Building a Scalable Design System with Sketch
lauravandoore
462
33k
Documentation Writing (for coders)
carmenintech
73
5k
Code Reviewing Like a Champion
maltzj
525
40k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
23
1.4k
RailsConf 2023
tenderlove
30
1.2k
Balancing Empowerment & Direction
lara
3
600
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
46
7.6k
The Illustrated Children's Guide to Kubernetes
chrisshort
48
50k
Become a Pro
speakerdeck
PRO
29
5.5k
What's in a price? How to price your products and services
michaelherold
246
12k
Statistics for Hackers
jakevdp
799
220k
Transcript
Fivetran と Snowflake で Salesforce データ分析環境をお手軽構築 データアナリティクス事業本部 プロダクト営業部 2020年6月19日 大場
裕喜
2 目次 • 本日登場するサービスと位置づけ • 本セッションを思い立った背景 • 登場するサービスの紹介 • Fivetran
とは • Snowflake とは • Fivetran(Snowflake)のデモ・画面紹介 • まとめ
3 自己紹介 データアナリティクス事業本部 プロダクト営業部 大場 裕喜(おおば ひろよし) • 経歴 •
2014年2月1日入社(7年目) • AWS 営業 • データ分析基盤のSI営業 • データ分析関連プロダクト営業 • 趣味 • ランニングとドラム
4 本日登場するサービスと位置づけ CRM データパイプライン 顧客情報を 一元的に管理 各種データソースか らデータを取得して いい感じにデータ ベースに格納
データウェアハウス (DWH) クラウドネイティブ なアーキテクチャを 採用した DWH
5 思い立った背景
6 わたしたちの業務:チーム構成 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
7 営業ミーティング 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
週次定例(フォーキャスト) 数字の着地見込みや、目標達成に向けた課題およびアクションをすり合わせる
8 フォーキャストレポートを試作
9 フォーキャストレポートを試作(ツール) CRM データプレップ 顧客情報を 一元的に管理 データを取得・加工 BI データの可視化 レポーティング
顧客 案件 商品
10 運用してみた結果 • 定例ミーティングの中で実データを見ながら 議論できるようになった • 各チームのメンバーから いろんなリクエスト が...
11 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
12 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
リードから受注まで追いたい
13 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
リードの行動履歴も一緒に見たい
14 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
購入いただいたお客さまが 問い合わせされているか見たい
15 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
問い合わせされているユーザの 契約情報を知りたい
16 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
チーム(システム)横断でみたい
17 Alteryx で取得・加工してもよいが... • ワークフローで作れる ので作ってもよいが... • 最新のデータをDB に 蓄積して、いつでも使
えるようにしたい
18
19 想定する構成 データソース パイプライン データウェアハウス ▪ ▪ ▪ ▪ ▪
▪ ▪ ▪
20 今日のお話 データソース パイプライン データウェアハウス ▪ ▪ ▪ ▪ ▪
▪ ▪ ▪
21 Fivetran とは • データパイプライン as a Service • メンテナンス不要
• コーディング不要 • 150以上のコネクタを用意 • 事前に定義されたスキーマ
22 Modern Data Stack Architecture Diagram Source Layer Ingestion Layer
Strage, Compute & Transformation BI Layer Data Pipeline Data Warehouse Business Intelligence Tools
23 Snowflake とは クラウドテクノロジをベースに構築された完全なデータウェアハウス クラウドテクノロ ジベースで構築 SQL データウェア ハウス サービスとして提供
Snowflake のビジョン お客様が1か所にまとめられたすべてのデータに アクセスできるようすることで、いつでも、どこ でも、何人のユーザーがアクセスして実行可能な 意思決定を行えるようにします。 Snowflake からのご提案 クラウドテクノロジをベースにゼロから構築された 次世代のデータウェアハウスは、データ分析の課題 を解決します。
24 クラウドデータプラットフォーム
25 クラウドデータプラットフォーム S M Sales Data Science S Structured &
semi-structured クラウドサービス トランザクション管理 セキュリティ クエリ計画・最適化 メタデータ管理 L M ETL/ELT Snowpipe XS タスク&ストリーム 論理モデル
26 Snowflake の概要紹介とデモ動画 https://www.youtube.com/watch?v=0QNXoKjnWOo
27 Demo • Fivetran の画面の紹介 • Connector の設定(Salesforce) • Destination
の設定(Snowflake) • データ連携 • Snowflake • データの確認
28 本日ご紹介した一連の手順をご紹介 https://dev.classmethod.jp/articles/fivetran-trial/
29 Fivetran 対応データソース https://fivetran.com/directory
30
31 Fivetran 提供の ER 図 • 連携先にどういう形でテーブルが格納されているか… について、ER 図を公開してくれています。
32 コスト感
33 Fivetran • 費用に関しては別途ブログにまとめます。
34 Snowflake 【試算の前提】 • AWS クラウド • Tokyo リージョン •
Standard エディション • ストレージ:1TB, 50%圧縮と仮定 • ウェアハウス:medium, 1日5時間, 20日 • 1ドル120円試算 【月額費用】 • 約138,300円
35 分析基盤の構成例 各種SaaS パイプライン データウェアハウス BI・BA 各種DB ETL セルフサービス データ準備・分析
データプラットフォーム 可視化 Salesforce・ Pardot・Zendesk など RDBMS AWS Glue・Talend・ Informatica など ▪ ▪ ▪ ▪ ▪ ▪ ▪ ▪
36 さいごに • Fivetran を使うと Salesforce や Zendesk などの SaaS
のデー タを簡単にDBに連携できそう • Snowflake に格納しておけばパフォーマンス、コストなどの観点 でスマートにデータを使える • データソース側のアカウントの調整がつけば 数日 で作れる • ご興味のある方はトライアルをお試しください (Snowflake:30日、Fivetran:14日)
37 参考情報のURL • Snowflake トライアルリンク https://trial.snowflake.com/?owner=classmethodlead&plan=enterprise&cloud=aws®ion=ap -northeast-1 • Snowflake の
Partner Connect を使って Fivetran のトライアルを始める https://dev.classmethod.jp/articles/fivetran-trial/ • Fivetran × Snowflake × LookerでZendesk データ分析環境をお手軽に構築 https://dev.classmethod.jp/articles/fivetran-snowflake-looker/
38 参考情報のURL:はじめの一步シリーズ • Snowflake https://www.youtube.com/watch?v=0QNXoKjnWOo • Looker https://www.youtube.com/watch?v=tuQu4p_Oqzw • Alteryx
https://youtu.be/lvVFTXef_jk • データ分析 https://www.youtube.com/watch?v=KsRs2iBITyg&t=768s
None