Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
FivetranとSnowflakeでSalesforceデータ分析環境をお手軽構築
Search
Hiroyoshi Oba
June 19, 2020
Technology
0
2.6k
FivetranとSnowflakeでSalesforceデータ分析環境をお手軽構築
Hiroyoshi Oba
June 19, 2020
Tweet
Share
Other Decks in Technology
See All in Technology
第4回Snowflake 金融ユーザー会 Snowflake summit recap
tamaoki
1
300
20250705 Headlamp: 專注可擴展性的 Kubernetes 用戶界面
pichuang
0
290
american airlines®️ USA Contact Numbers: Complete 2025 Support Guide
supportflight
1
110
OpenTelemetryセマンティック規約の恩恵とMackerel APMにおける活用例 / SRE NEXT 2025
mackerelio
2
590
関数型プログラミングで 「脳がバグる」を乗り越える
manabeai
2
210
AWS CDK 入門ガイド これだけは知っておきたいヒント集
anank
3
220
サイバーエージェントグループのSRE10年の歩みとAI時代の生存戦略
shotatsuge
3
350
赤煉瓦倉庫勉強会「Databricksを選んだ理由と、絶賛真っ只中のデータ基盤移行体験記」
ivry_presentationmaterials
2
380
オーティファイ会社紹介資料 / Autify Company Deck
autifyhq
10
130k
ビギナーであり続ける/beginning
ikuodanaka
3
780
IPA&AWSダブル全冠が明かす、人生を変えた勉強法のすべて
iwamot
PRO
2
190
AIエージェントが書くのなら直接CloudFormationを書かせればいいじゃないですか何故AWS CDKを使う必要があるのさ
watany
6
1.1k
Featured
See All Featured
Understanding Cognitive Biases in Performance Measurement
bluesmoon
29
1.8k
No one is an island. Learnings from fostering a developers community.
thoeni
21
3.4k
The World Runs on Bad Software
bkeepers
PRO
69
11k
Building Better People: How to give real-time feedback that sticks.
wjessup
367
19k
The Illustrated Children's Guide to Kubernetes
chrisshort
48
50k
Fantastic passwords and where to find them - at NoRuKo
philnash
51
3.3k
The MySQL Ecosystem @ GitHub 2015
samlambert
251
13k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
138
34k
Bootstrapping a Software Product
garrettdimon
PRO
307
110k
Testing 201, or: Great Expectations
jmmastey
43
7.6k
ReactJS: Keep Simple. Everything can be a component!
pedronauck
667
120k
Designing for Performance
lara
610
69k
Transcript
Fivetran と Snowflake で Salesforce データ分析環境をお手軽構築 データアナリティクス事業本部 プロダクト営業部 2020年6月19日 大場
裕喜
2 目次 • 本日登場するサービスと位置づけ • 本セッションを思い立った背景 • 登場するサービスの紹介 • Fivetran
とは • Snowflake とは • Fivetran(Snowflake)のデモ・画面紹介 • まとめ
3 自己紹介 データアナリティクス事業本部 プロダクト営業部 大場 裕喜(おおば ひろよし) • 経歴 •
2014年2月1日入社(7年目) • AWS 営業 • データ分析基盤のSI営業 • データ分析関連プロダクト営業 • 趣味 • ランニングとドラム
4 本日登場するサービスと位置づけ CRM データパイプライン 顧客情報を 一元的に管理 各種データソースか らデータを取得して いい感じにデータ ベースに格納
データウェアハウス (DWH) クラウドネイティブ なアーキテクチャを 採用した DWH
5 思い立った背景
6 わたしたちの業務:チーム構成 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
7 営業ミーティング 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
週次定例(フォーキャスト) 数字の着地見込みや、目標達成に向けた課題およびアクションをすり合わせる
8 フォーキャストレポートを試作
9 フォーキャストレポートを試作(ツール) CRM データプレップ 顧客情報を 一元的に管理 データを取得・加工 BI データの可視化 レポーティング
顧客 案件 商品
10 運用してみた結果 • 定例ミーティングの中で実データを見ながら 議論できるようになった • 各チームのメンバーから いろんなリクエスト が...
11 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
12 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
リードから受注まで追いたい
13 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
リードの行動履歴も一緒に見たい
14 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
購入いただいたお客さまが 問い合わせされているか見たい
15 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
問い合わせされているユーザの 契約情報を知りたい
16 各チームで活用しているサービス 営業 カスタマーサクセス インサイド営業 フィールド営業 営業オペレーション カスタマーサポート 技術コンサル マーケティング
チーム(システム)横断でみたい
17 Alteryx で取得・加工してもよいが... • ワークフローで作れる ので作ってもよいが... • 最新のデータをDB に 蓄積して、いつでも使
えるようにしたい
18
19 想定する構成 データソース パイプライン データウェアハウス ▪ ▪ ▪ ▪ ▪
▪ ▪ ▪
20 今日のお話 データソース パイプライン データウェアハウス ▪ ▪ ▪ ▪ ▪
▪ ▪ ▪
21 Fivetran とは • データパイプライン as a Service • メンテナンス不要
• コーディング不要 • 150以上のコネクタを用意 • 事前に定義されたスキーマ
22 Modern Data Stack Architecture Diagram Source Layer Ingestion Layer
Strage, Compute & Transformation BI Layer Data Pipeline Data Warehouse Business Intelligence Tools
23 Snowflake とは クラウドテクノロジをベースに構築された完全なデータウェアハウス クラウドテクノロ ジベースで構築 SQL データウェア ハウス サービスとして提供
Snowflake のビジョン お客様が1か所にまとめられたすべてのデータに アクセスできるようすることで、いつでも、どこ でも、何人のユーザーがアクセスして実行可能な 意思決定を行えるようにします。 Snowflake からのご提案 クラウドテクノロジをベースにゼロから構築された 次世代のデータウェアハウスは、データ分析の課題 を解決します。
24 クラウドデータプラットフォーム
25 クラウドデータプラットフォーム S M Sales Data Science S Structured &
semi-structured クラウドサービス トランザクション管理 セキュリティ クエリ計画・最適化 メタデータ管理 L M ETL/ELT Snowpipe XS タスク&ストリーム 論理モデル
26 Snowflake の概要紹介とデモ動画 https://www.youtube.com/watch?v=0QNXoKjnWOo
27 Demo • Fivetran の画面の紹介 • Connector の設定(Salesforce) • Destination
の設定(Snowflake) • データ連携 • Snowflake • データの確認
28 本日ご紹介した一連の手順をご紹介 https://dev.classmethod.jp/articles/fivetran-trial/
29 Fivetran 対応データソース https://fivetran.com/directory
30
31 Fivetran 提供の ER 図 • 連携先にどういう形でテーブルが格納されているか… について、ER 図を公開してくれています。
32 コスト感
33 Fivetran • 費用に関しては別途ブログにまとめます。
34 Snowflake 【試算の前提】 • AWS クラウド • Tokyo リージョン •
Standard エディション • ストレージ:1TB, 50%圧縮と仮定 • ウェアハウス:medium, 1日5時間, 20日 • 1ドル120円試算 【月額費用】 • 約138,300円
35 分析基盤の構成例 各種SaaS パイプライン データウェアハウス BI・BA 各種DB ETL セルフサービス データ準備・分析
データプラットフォーム 可視化 Salesforce・ Pardot・Zendesk など RDBMS AWS Glue・Talend・ Informatica など ▪ ▪ ▪ ▪ ▪ ▪ ▪ ▪
36 さいごに • Fivetran を使うと Salesforce や Zendesk などの SaaS
のデー タを簡単にDBに連携できそう • Snowflake に格納しておけばパフォーマンス、コストなどの観点 でスマートにデータを使える • データソース側のアカウントの調整がつけば 数日 で作れる • ご興味のある方はトライアルをお試しください (Snowflake:30日、Fivetran:14日)
37 参考情報のURL • Snowflake トライアルリンク https://trial.snowflake.com/?owner=classmethodlead&plan=enterprise&cloud=aws®ion=ap -northeast-1 • Snowflake の
Partner Connect を使って Fivetran のトライアルを始める https://dev.classmethod.jp/articles/fivetran-trial/ • Fivetran × Snowflake × LookerでZendesk データ分析環境をお手軽に構築 https://dev.classmethod.jp/articles/fivetran-snowflake-looker/
38 参考情報のURL:はじめの一步シリーズ • Snowflake https://www.youtube.com/watch?v=0QNXoKjnWOo • Looker https://www.youtube.com/watch?v=tuQu4p_Oqzw • Alteryx
https://youtu.be/lvVFTXef_jk • データ分析 https://www.youtube.com/watch?v=KsRs2iBITyg&t=768s
None