Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :C...
Search
CData Software Japan
February 16, 2024
0
33
あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :CData Sync のご紹介
HeatWavejp Meetup#06 の資料
CData Software Japan
February 16, 2024
Tweet
Share
More Decks by CData Software Japan
See All by CData Software Japan
AWS re:Invent 2024 Build an app using AWS App Studio
cdataj
0
29
CData 製品を使って不動産API を可視化!実際に注文住宅を買ってみるまでの話
cdataj
2
140
SAP 連携徹底解説! CData Sync を利用した SAP ERP から DWH への連携ポイント
cdataj
0
81
AWS App Studio を触ってみよう! API 連携してみよう!
cdataj
0
240
CData Virtuality 日本ローンチイベントのKeynote
cdataj
0
580
CData Virtuality を活かせるキーシナリオと製品デモ
cdataj
0
580
CData Syncを使って自社システムとHeatWaveを連携させる方法
cdataj
0
14
CData Lunch Seminar:CData Sync の主な機能と特徴
cdataj
0
36
事例に学ぶ!AWS とCDataSync を使った データ分析基盤の設計から導入効果まで
cdataj
0
19
Featured
See All Featured
Designing for Performance
lara
604
68k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
330
21k
We Have a Design System, Now What?
morganepeng
51
7.3k
A better future with KSS
kneath
238
17k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
127
18k
Fontdeck: Realign not Redesign
paulrobertlloyd
82
5.3k
Stop Working from a Prison Cell
hatefulcrawdad
267
20k
A designer walks into a library…
pauljervisheath
204
24k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
33
1.9k
For a Future-Friendly Web
brad_frost
175
9.4k
Writing Fast Ruby
sferik
628
61k
Building an army of robots
kneath
302
44k
Transcript
あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :CData Sync のご紹介 2024/02/15 HeatWavejp
Meetup #06
2 自己紹介 © 2024 CData Software Inc. CData Software Japan
合同会社 Sales Manager 小島 一剛 好きなこと:ダッシュボード作成 趣味:ゴルフ、ソフトボール、BBQ
3 本日お伝えしたいこと © 2024 CData Software Inc. MySQL HeatWave に取り込めるデータはファイル
やデータベースからだけじゃない! Salesforce, SAP, Dynamics, ServiceNow, Workday, Netsuite, kintone, Google Analytics, SharePoint, S3, box, Sansan … And more(400+)
4 CData Syncとは © 2024 CData Software Inc. SaaSなどのアプリケーション, データベース,
ファイルなどにあるデータを ノーコードでMySQL HeatWaveに複製(レプリケーション)出来るツール SaaSやオンプレミスアプリケーション, データベース, ファイルなど 400(API Profile含む)を超えるデータソース データソース MySQL HeatWave
5 特徴 | 1. 業界最多級のデータソース © 2024 CData Software Inc.
400を超えるSaaSやオンプレミスアプリケーション, データベース, ファイルなど Marketing CRM & ERP Collaboration Big Data & NoSQL File & API Accounting E-Commerce RDBMS
6 サポートされているデータソース © 2023 CData Software Inc. — CONFIDENTIAL –
DO NOT DUPLICATE OR DISTRIBUTE Drivers Profiles and more… 人気の国産サービス/アプリケーションにも対応
7 特徴 | 2. 柔軟な分析を可能とするELT方式 © 2024 CData Software Inc.
データ収集・蓄積にかかる時間・コストを圧倒的に削減 データ分析基盤 データソース 収集 蓄積 (同期先) 加工 分析・可視化 データの発生源 (オンプレミス・クラウド) 用途別などに 加工 加工データを 利活用 データをためる (オンプレミス・ クラウド) データを集める (プログラム・ ツール) データの発生源 (オンプレミス・ クラウド) E(Extract) L(Load) T(Transform) CData Sync
8 特徴 | 3. シンプルな設定 3ステップ、ノーコードでデータパイプライン処理を作成 1. データソースと接続 2. 同期先(HeatWave)と接続
3. 複製ジョブの設定&実行 •管理コンソールにログインし、400を 超えるクラウドアプリケーション、 データベース、データウェアハウスな どのデータソースを選択 •接続したいデータソースへの接続は通 常、データソースのWeb インター フェースへのログインだけで完了 •データをレプリケーションする同期 先 (MySQL)を選択 •同期先への接続は通常、データソー スと同様Web インターフェースへのロ グインだけで完了 •同期ジョブの設定にてオブジェクト (テーブルや項目)、処理方式(洗い 替え or 差分など)や条件(一部のレ コードのみ)を指定 •作成したジョブの実行スケジュール (日次・月次など)を設定&実行 © 2024 CData Software Inc.
9 特徴 | 4. 標準SQLをはじめ柔軟なジョブ作成 ジョブの設定オプション(例) 新規テーブル作成 or 既存テーブルへの同期
スケジューリング カラムマッピング、フィルタ カスタムクエリ(SQL) 高度な設定 並列処理 スキーマ変更の追従 洗い替え or レコード追加 ヒストリーモード データプレビュー ログと履歴 © 2024 CData Software Inc.
10 特徴 | 5. 高度な差分更新 差分更新で通信量を抑え、高速な同期処理を実現 1回目は”全件” 2回目以降は”差分” レコード レコード
レコード レコード レコード レコード レコード レコード API コール数を 削減! SaaS系データソースは、レコードの最終更新日時を、RDB系は変更履歴(Change Data Capture) を使用して変更のあったレコード(差分)のみを更新! レコード レコード レコード レコード 更新無し 更新無し 更新あり 更新無し 更新無し 更新あり 更新無し 更新無し レコード データ量が減って 高速化 © 2024 CData Software Inc.
11 特徴 | 6. OCIは勿論!どこにでも配置が可能 OCI・オンプレミス・AWSお好みの環境に © 2024 CData Software
Inc.
12 特徴 | 6. OCIは勿論!どこにでも配置が可能 OCI・オンプレミス・AWSお好みの環境に © 2024 CData Software
Inc.
13 © 2023 CData Software Inc. | www.cdata.com
14 手順はこちら👇 https://www.cdata.com/jp/blog/sync-heatwave © 2024 CData Software Inc.
15 トライアル版のご案内 https://www.cdata.com/jp/sync/download/ © 2024 CData Software Inc.
16 まとめ MySQL HeatWave に取り込めるデータはファイル やデータベースからだけじゃない! Salesforce, SAP, Dynamics, ServiceNow,
Workday, Netsuite, kintone, Google Analytics, SharePoint, S3, box, Sansan, kintone … And more(400+) オフライン会場にお越しの皆様、懇親会にてお声がけください! オンラインでご参加の皆様、 チャット、もしくはX( ハッシュタグ #HeatWavejp ) でのご質問お待ちしてます! © 2024 CData Software Inc.