Upgrade to Pro — share decks privately, control downloads, hide ads and more …

あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :C...

CData Software Japan
February 16, 2024
35

あらゆるSaaS データをノーコードで MySQL HeatWave へレプリケーション :CData Sync のご紹介

HeatWavejp Meetup#06 の資料

CData Software Japan

February 16, 2024
Tweet

More Decks by CData Software Japan

Transcript

  1. 2 自己紹介 © 2024 CData Software Inc. CData Software Japan

    合同会社 Sales Manager 小島 一剛 好きなこと:ダッシュボード作成 趣味:ゴルフ、ソフトボール、BBQ
  2. 3 本日お伝えしたいこと © 2024 CData Software Inc. MySQL HeatWave に取り込めるデータはファイル

    やデータベースからだけじゃない! Salesforce, SAP, Dynamics, ServiceNow, Workday, Netsuite, kintone, Google Analytics, SharePoint, S3, box, Sansan … And more(400+)
  3. 4 CData Syncとは © 2024 CData Software Inc. SaaSなどのアプリケーション, データベース,

    ファイルなどにあるデータを ノーコードでMySQL HeatWaveに複製(レプリケーション)出来るツール SaaSやオンプレミスアプリケーション, データベース, ファイルなど 400(API Profile含む)を超えるデータソース データソース MySQL HeatWave
  4. 5 特徴 | 1. 業界最多級のデータソース © 2024 CData Software Inc.

    400を超えるSaaSやオンプレミスアプリケーション, データベース, ファイルなど Marketing CRM & ERP Collaboration Big Data & NoSQL File & API Accounting E-Commerce RDBMS
  5. 6 サポートされているデータソース © 2023 CData Software Inc. — CONFIDENTIAL –

    DO NOT DUPLICATE OR DISTRIBUTE Drivers Profiles and more… 人気の国産サービス/アプリケーションにも対応
  6. 7 特徴 | 2. 柔軟な分析を可能とするELT方式 © 2024 CData Software Inc.

    データ収集・蓄積にかかる時間・コストを圧倒的に削減 データ分析基盤 データソース 収集 蓄積 (同期先) 加工 分析・可視化 データの発生源 (オンプレミス・クラウド) 用途別などに 加工 加工データを 利活用 データをためる (オンプレミス・ クラウド) データを集める (プログラム・ ツール) データの発生源 (オンプレミス・ クラウド) E(Extract) L(Load) T(Transform) CData Sync
  7. 8 特徴 | 3. シンプルな設定 3ステップ、ノーコードでデータパイプライン処理を作成 1. データソースと接続 2. 同期先(HeatWave)と接続

    3. 複製ジョブの設定&実行 •管理コンソールにログインし、400を 超えるクラウドアプリケーション、 データベース、データウェアハウスな どのデータソースを選択 •接続したいデータソースへの接続は通 常、データソースのWeb インター フェースへのログインだけで完了 •データをレプリケーションする同期 先 (MySQL)を選択 •同期先への接続は通常、データソー スと同様Web インターフェースへのロ グインだけで完了 •同期ジョブの設定にてオブジェクト (テーブルや項目)、処理方式(洗い 替え or 差分など)や条件(一部のレ コードのみ)を指定 •作成したジョブの実行スケジュール (日次・月次など)を設定&実行 © 2024 CData Software Inc.
  8. 9 特徴 | 4. 標準SQLをはじめ柔軟なジョブ作成 ジョブの設定オプション(例)  新規テーブル作成 or 既存テーブルへの同期

     スケジューリング  カラムマッピング、フィルタ  カスタムクエリ(SQL)  高度な設定  並列処理  スキーマ変更の追従  洗い替え or レコード追加  ヒストリーモード  データプレビュー  ログと履歴 © 2024 CData Software Inc.
  9. 10 特徴 | 5. 高度な差分更新 差分更新で通信量を抑え、高速な同期処理を実現 1回目は”全件” 2回目以降は”差分” レコード レコード

    レコード レコード レコード レコード レコード レコード API コール数を 削減! SaaS系データソースは、レコードの最終更新日時を、RDB系は変更履歴(Change Data Capture) を使用して変更のあったレコード(差分)のみを更新! レコード レコード レコード レコード 更新無し 更新無し 更新あり 更新無し 更新無し 更新あり 更新無し 更新無し レコード データ量が減って 高速化 © 2024 CData Software Inc.
  10. 16 まとめ MySQL HeatWave に取り込めるデータはファイル やデータベースからだけじゃない! Salesforce, SAP, Dynamics, ServiceNow,

    Workday, Netsuite, kintone, Google Analytics, SharePoint, S3, box, Sansan, kintone … And more(400+) オフライン会場にお越しの皆様、懇親会にてお声がけください! オンラインでご参加の皆様、 チャット、もしくはX( ハッシュタグ #HeatWavejp ) でのご質問お待ちしてます! © 2024 CData Software Inc.