Upgrade to PRO for Only $50/Year—Limited-Time Offer! 🔥
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :C...
Search
CData Software Japan
February 16, 2024
0
32
あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :CData Sync のご紹介
HeatWavejp Meetup#06 の資料
CData Software Japan
February 16, 2024
Tweet
Share
More Decks by CData Software Japan
See All by CData Software Japan
CData 製品を使って不動産API を可視化!実際に注文住宅を買ってみるまでの話
cdataj
1
44
SAP 連携徹底解説! CData Sync を利用した SAP ERP から DWH への連携ポイント
cdataj
0
68
AWS App Studio を触ってみよう! API 連携してみよう!
cdataj
0
220
CData Virtuality 日本ローンチイベントのKeynote
cdataj
0
560
CData Virtuality を活かせるキーシナリオと製品デモ
cdataj
0
560
CData Syncを使って自社システムとHeatWaveを連携させる方法
cdataj
0
14
CData Lunch Seminar:CData Sync の主な機能と特徴
cdataj
0
34
事例に学ぶ!AWS とCDataSync を使った データ分析基盤の設計から導入効果まで
cdataj
0
18
レガシーシステム Db2 for i の大規模データをGoogle BigQuery に連携したケースにおけるELT処理ポイント解説 #dbts2024
cdataj
0
64
Featured
See All Featured
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
191
16k
Principles of Awesome APIs and How to Build Them.
keavy
126
17k
A Modern Web Designer's Workflow
chriscoyier
693
190k
Navigating Team Friction
lara
183
15k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
330
21k
Designing for humans not robots
tammielis
250
25k
How GitHub (no longer) Works
holman
310
140k
Optimizing for Happiness
mojombo
376
70k
Visualization
eitanlees
145
15k
JavaScript: Past, Present, and Future - NDC Porto 2020
reverentgeek
47
5.1k
Thoughts on Productivity
jonyablonski
67
4.3k
VelocityConf: Rendering Performance Case Studies
addyosmani
326
24k
Transcript
あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :CData Sync のご紹介 2024/02/15 HeatWavejp
Meetup #06
2 自己紹介 © 2024 CData Software Inc. CData Software Japan
合同会社 Sales Manager 小島 一剛 好きなこと:ダッシュボード作成 趣味:ゴルフ、ソフトボール、BBQ
3 本日お伝えしたいこと © 2024 CData Software Inc. MySQL HeatWave に取り込めるデータはファイル
やデータベースからだけじゃない! Salesforce, SAP, Dynamics, ServiceNow, Workday, Netsuite, kintone, Google Analytics, SharePoint, S3, box, Sansan … And more(400+)
4 CData Syncとは © 2024 CData Software Inc. SaaSなどのアプリケーション, データベース,
ファイルなどにあるデータを ノーコードでMySQL HeatWaveに複製(レプリケーション)出来るツール SaaSやオンプレミスアプリケーション, データベース, ファイルなど 400(API Profile含む)を超えるデータソース データソース MySQL HeatWave
5 特徴 | 1. 業界最多級のデータソース © 2024 CData Software Inc.
400を超えるSaaSやオンプレミスアプリケーション, データベース, ファイルなど Marketing CRM & ERP Collaboration Big Data & NoSQL File & API Accounting E-Commerce RDBMS
6 サポートされているデータソース © 2023 CData Software Inc. — CONFIDENTIAL –
DO NOT DUPLICATE OR DISTRIBUTE Drivers Profiles and more… 人気の国産サービス/アプリケーションにも対応
7 特徴 | 2. 柔軟な分析を可能とするELT方式 © 2024 CData Software Inc.
データ収集・蓄積にかかる時間・コストを圧倒的に削減 データ分析基盤 データソース 収集 蓄積 (同期先) 加工 分析・可視化 データの発生源 (オンプレミス・クラウド) 用途別などに 加工 加工データを 利活用 データをためる (オンプレミス・ クラウド) データを集める (プログラム・ ツール) データの発生源 (オンプレミス・ クラウド) E(Extract) L(Load) T(Transform) CData Sync
8 特徴 | 3. シンプルな設定 3ステップ、ノーコードでデータパイプライン処理を作成 1. データソースと接続 2. 同期先(HeatWave)と接続
3. 複製ジョブの設定&実行 •管理コンソールにログインし、400を 超えるクラウドアプリケーション、 データベース、データウェアハウスな どのデータソースを選択 •接続したいデータソースへの接続は通 常、データソースのWeb インター フェースへのログインだけで完了 •データをレプリケーションする同期 先 (MySQL)を選択 •同期先への接続は通常、データソー スと同様Web インターフェースへのロ グインだけで完了 •同期ジョブの設定にてオブジェクト (テーブルや項目)、処理方式(洗い 替え or 差分など)や条件(一部のレ コードのみ)を指定 •作成したジョブの実行スケジュール (日次・月次など)を設定&実行 © 2024 CData Software Inc.
9 特徴 | 4. 標準SQLをはじめ柔軟なジョブ作成 ジョブの設定オプション(例) 新規テーブル作成 or 既存テーブルへの同期
スケジューリング カラムマッピング、フィルタ カスタムクエリ(SQL) 高度な設定 並列処理 スキーマ変更の追従 洗い替え or レコード追加 ヒストリーモード データプレビュー ログと履歴 © 2024 CData Software Inc.
10 特徴 | 5. 高度な差分更新 差分更新で通信量を抑え、高速な同期処理を実現 1回目は”全件” 2回目以降は”差分” レコード レコード
レコード レコード レコード レコード レコード レコード API コール数を 削減! SaaS系データソースは、レコードの最終更新日時を、RDB系は変更履歴(Change Data Capture) を使用して変更のあったレコード(差分)のみを更新! レコード レコード レコード レコード 更新無し 更新無し 更新あり 更新無し 更新無し 更新あり 更新無し 更新無し レコード データ量が減って 高速化 © 2024 CData Software Inc.
11 特徴 | 6. OCIは勿論!どこにでも配置が可能 OCI・オンプレミス・AWSお好みの環境に © 2024 CData Software
Inc.
12 特徴 | 6. OCIは勿論!どこにでも配置が可能 OCI・オンプレミス・AWSお好みの環境に © 2024 CData Software
Inc.
13 © 2023 CData Software Inc. | www.cdata.com
14 手順はこちら👇 https://www.cdata.com/jp/blog/sync-heatwave © 2024 CData Software Inc.
15 トライアル版のご案内 https://www.cdata.com/jp/sync/download/ © 2024 CData Software Inc.
16 まとめ MySQL HeatWave に取り込めるデータはファイル やデータベースからだけじゃない! Salesforce, SAP, Dynamics, ServiceNow,
Workday, Netsuite, kintone, Google Analytics, SharePoint, S3, box, Sansan, kintone … And more(400+) オフライン会場にお越しの皆様、懇親会にてお声がけください! オンラインでご参加の皆様、 チャット、もしくはX( ハッシュタグ #HeatWavejp ) でのご質問お待ちしてます! © 2024 CData Software Inc.