Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :C...
Search
CData Software Japan
February 16, 2024
0
66
あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :CData Sync のご紹介
HeatWavejp Meetup#06 の資料
CData Software Japan
February 16, 2024
Tweet
Share
More Decks by CData Software Japan
See All by CData Software Japan
CData Sync V25.3 アップデートをプロダクトスペシャリストが大解説 Open Table Format (Delta Lake)、Db2 for i CDC 機能など~
cdataj
0
6
BI ツールはもういらない?Amazon RedShift & MCP Server で試みる新しいデータ分析アプローチ
cdataj
0
240
NetSuite MCP Server とAI エージェントで未入金処理のオペレーション最適化を実現
cdataj
0
150
kintone とRemote MCP Server で実現する次世代BI? “AI Agent”による営業活動の圧倒的効率化
cdataj
1
160
レガシーDWH からSnowflake へのモダナイゼーション・データパイプライン刷新ポイント
cdataj
0
22
CData Sync V25.2 アップデートをプロダクトスペシャリストが大解説 Microsoft Fabric 連携やSAP ERP CDC 機能など~
cdataj
0
27
電気自動車 Tesla の公式API をPostman から実行し、車両データを取得・分析してみよう!
cdataj
0
19
NetSuite MCP ServerとAIエージェントで未入金処理のオペレーション最適化を実現
cdataj
0
67
「データ統合の長い旅路の終着点とは?」〜現場の『壁』を打ち破るモダンアーキテクチャと CData Virtuality〜
cdataj
0
36
Featured
See All Featured
The Illustrated Children's Guide to Kubernetes
chrisshort
49
51k
The Invisible Side of Design
smashingmag
302
51k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
48
9.7k
Become a Pro
speakerdeck
PRO
29
5.6k
Embracing the Ebb and Flow
colly
88
4.9k
The Language of Interfaces
destraynor
162
25k
CSS Pre-Processors: Stylus, Less & Sass
bermonpainter
359
30k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
132
19k
For a Future-Friendly Web
brad_frost
180
10k
No one is an island. Learnings from fostering a developers community.
thoeni
21
3.5k
Designing for humans not robots
tammielis
254
26k
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
jcasabona
34
2.5k
Transcript
あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :CData Sync のご紹介 2024/02/15 HeatWavejp
Meetup #06
2 自己紹介 © 2024 CData Software Inc. CData Software Japan
合同会社 Sales Manager 小島 一剛 好きなこと:ダッシュボード作成 趣味:ゴルフ、ソフトボール、BBQ
3 本日お伝えしたいこと © 2024 CData Software Inc. MySQL HeatWave に取り込めるデータはファイル
やデータベースからだけじゃない! Salesforce, SAP, Dynamics, ServiceNow, Workday, Netsuite, kintone, Google Analytics, SharePoint, S3, box, Sansan … And more(400+)
4 CData Syncとは © 2024 CData Software Inc. SaaSなどのアプリケーション, データベース,
ファイルなどにあるデータを ノーコードでMySQL HeatWaveに複製(レプリケーション)出来るツール SaaSやオンプレミスアプリケーション, データベース, ファイルなど 400(API Profile含む)を超えるデータソース データソース MySQL HeatWave
5 特徴 | 1. 業界最多級のデータソース © 2024 CData Software Inc.
400を超えるSaaSやオンプレミスアプリケーション, データベース, ファイルなど Marketing CRM & ERP Collaboration Big Data & NoSQL File & API Accounting E-Commerce RDBMS
6 サポートされているデータソース © 2023 CData Software Inc. — CONFIDENTIAL –
DO NOT DUPLICATE OR DISTRIBUTE Drivers Profiles and more… 人気の国産サービス/アプリケーションにも対応
7 特徴 | 2. 柔軟な分析を可能とするELT方式 © 2024 CData Software Inc.
データ収集・蓄積にかかる時間・コストを圧倒的に削減 データ分析基盤 データソース 収集 蓄積 (同期先) 加工 分析・可視化 データの発生源 (オンプレミス・クラウド) 用途別などに 加工 加工データを 利活用 データをためる (オンプレミス・ クラウド) データを集める (プログラム・ ツール) データの発生源 (オンプレミス・ クラウド) E(Extract) L(Load) T(Transform) CData Sync
8 特徴 | 3. シンプルな設定 3ステップ、ノーコードでデータパイプライン処理を作成 1. データソースと接続 2. 同期先(HeatWave)と接続
3. 複製ジョブの設定&実行 •管理コンソールにログインし、400を 超えるクラウドアプリケーション、 データベース、データウェアハウスな どのデータソースを選択 •接続したいデータソースへの接続は通 常、データソースのWeb インター フェースへのログインだけで完了 •データをレプリケーションする同期 先 (MySQL)を選択 •同期先への接続は通常、データソー スと同様Web インターフェースへのロ グインだけで完了 •同期ジョブの設定にてオブジェクト (テーブルや項目)、処理方式(洗い 替え or 差分など)や条件(一部のレ コードのみ)を指定 •作成したジョブの実行スケジュール (日次・月次など)を設定&実行 © 2024 CData Software Inc.
9 特徴 | 4. 標準SQLをはじめ柔軟なジョブ作成 ジョブの設定オプション(例) 新規テーブル作成 or 既存テーブルへの同期
スケジューリング カラムマッピング、フィルタ カスタムクエリ(SQL) 高度な設定 並列処理 スキーマ変更の追従 洗い替え or レコード追加 ヒストリーモード データプレビュー ログと履歴 © 2024 CData Software Inc.
10 特徴 | 5. 高度な差分更新 差分更新で通信量を抑え、高速な同期処理を実現 1回目は”全件” 2回目以降は”差分” レコード レコード
レコード レコード レコード レコード レコード レコード API コール数を 削減! SaaS系データソースは、レコードの最終更新日時を、RDB系は変更履歴(Change Data Capture) を使用して変更のあったレコード(差分)のみを更新! レコード レコード レコード レコード 更新無し 更新無し 更新あり 更新無し 更新無し 更新あり 更新無し 更新無し レコード データ量が減って 高速化 © 2024 CData Software Inc.
11 特徴 | 6. OCIは勿論!どこにでも配置が可能 OCI・オンプレミス・AWSお好みの環境に © 2024 CData Software
Inc.
12 特徴 | 6. OCIは勿論!どこにでも配置が可能 OCI・オンプレミス・AWSお好みの環境に © 2024 CData Software
Inc.
13 © 2023 CData Software Inc. | www.cdata.com
14 手順はこちら👇 https://www.cdata.com/jp/blog/sync-heatwave © 2024 CData Software Inc.
15 トライアル版のご案内 https://www.cdata.com/jp/sync/download/ © 2024 CData Software Inc.
16 まとめ MySQL HeatWave に取り込めるデータはファイル やデータベースからだけじゃない! Salesforce, SAP, Dynamics, ServiceNow,
Workday, Netsuite, kintone, Google Analytics, SharePoint, S3, box, Sansan, kintone … And more(400+) オフライン会場にお越しの皆様、懇親会にてお声がけください! オンラインでご参加の皆様、 チャット、もしくはX( ハッシュタグ #HeatWavejp ) でのご質問お待ちしてます! © 2024 CData Software Inc.