【Oracle Cloud ウェビナー】今さら聞けないデータ連携！OCIが提供する各サービス総まとめ

Oracle Cloud ウェビナーシリーズ情報: https://oracle.com/goto/ocws-jp
セッション動画: https://go.oracle.com/ocws-jp-ondemand

Transcript

1. 今さら聞けないデータ連携！ OCIが提供する各サービス総まとめ Oracle Cloud ウェビナー 日本オラクル株式会社 事業戦略統括 事業開発本部 Senior Business Development Manager 谷川 信朗
2.  クラウド上でのデータ連携をとりまく状況  OCI上で提供されている関連サービスの御紹介  お客様事例の御紹介  まとめ、および Q&A 本日お話しさせて頂く内容 Copyright © 2023, Oracle and/or its affiliates 2
3.  クラウド上でのデータ連携をとりまく状況  OCI上で提供されている関連サービスの御紹介  お客様事例の御紹介  まとめ、および Q&A 本日お話しさせて頂く内容 Copyright © 2023, Oracle and/or its affiliates 3
4. 既存ビジネスから新規創出ビジネスまで、 デジタル産業をささえるデータ資産 Copyright © 2023, Oracle and/or its affiliates 4 DATA CAPITAL メタバース IoT 5G AI NFT 自動走行 FinTech Smart City デジタルツイン
5. より流動性を増すことで加速するデジタルビジネス デジタル産業をささえるデータ資産 Copyright © 2023, Oracle and/or its affiliates 5 オンプレミス ローカル クラウド パブリック クラウド データ 分析 アルゴ リズム アプリ データ 分析 アルゴ リズム アプリ データ 分析 アルゴ リズム アプリ 供給 需要 供給 需要 供給 需要
6. データが生成されたポイントから、データを利用する多くのポイントまで効 率的に届けることが肝要 Copyright © 2023, Oracle and/or its affiliates 6
7. データを主役としたアーキテクチャデザインに向けて データ連携にとってのデータ基盤のカタチ Copyright © 2023, Oracle and/or its affiliates 7 centralize? or decentralize? 集中化 分散化
8. “Tech architecture is mirror of people orgs” いずれが正解かではなく、組織やビジネスにとっていずれが適しているか Copyright © 2023, Oracle and/or its affiliates 8 エグゼクティブ 企画・マーケティング 営業 会計,人事等 IT 関連企業 取引先 【centralize】 • 事業や組織構造がシンプルで安定性が求められる • インフラのコストメリットが明確 • データに関する責任や権限をIT側が持つ など 【decentralize】 • 事業や組織構造が多様で迅速性が求められる • ビジネスに合わせた機敏性の高いITが必要 • データに関する責任や権限を事業側が持つ など IT 既存事業A 既存事業B 人事 新規事業 会計 エグゼクティブ SaaSサービス (HCM,ERP etc) 関連企業, 取引先 共通/共有の データや連携手段
9. データ連携を考える上で、今まで以上に判断の分かれてくる要件 Copyright © 2023, Oracle and/or its affiliates 9 Real-time? or Bulk/Batch? リアルタイム性 非リアルタイム性
10. データドリブンな意思決定に重要な要素「リアルタイム性」 Copyright © 2023, Oracle and/or its affiliates 10 “By integrating real-time operational data and analytics, companies can make better operational and strategic decisions.” (引用) MIT Sloan School of Management：“Digital transformation has evolved. Here’s what’s new” https://mitsloan.mit.edu/ideas-made-to-matter/digital-transformation-has-evolved-heres-whats- new (※参考意訳) “リアルタイムのオペレーションデータと分析を統合することで、 企業はより良いオペレーションと戦略的な意思決定を行うことができます”
11.  クラウド上でのデータ連携をとりまく状況  OCI上で提供されている関連サービスの御紹介  お客様事例の御紹介  まとめ、および Q&A 本日お話しさせて頂く内容 Copyright © 2023, Oracle and/or its affiliates 11
12. Oracle Cloud Infrastructure が提供するデータ連携の主要サービス Copyright © 2023, Oracle and/or its affiliates 12 リアルタイムなデータメッシュを 実現するサービス ETL/ELT要件に対応した データ統合サービス データベースのBuilt onで提供する データ変換サービス メッセージバスによる連携向け イベントストリーミングサービス プログラミングベースの フルマネージドSparkサービス エンタープライズな アプリケーション統合サービス 3rd Party 製品との協業 GoldenGate GoldenGate Stream Analytics Data Integration Data Catalog Data Transforms Data Flow Streaming Integration Cloud DWH + 3rd Party Products
13. Oracle Cloud Infrastructure が提供するデータ連携の主要サービス Copyright © 2023, Oracle and/or its affiliates 13 ETL/ELT要件に対応した データ統合サービス データベースのBuilt onで提供する データ変換サービス メッセージバスによる連携向け イベントストリーミングサービス プログラミングベースの フルマネージドSparkサービス エンタープライズな アプリケーション統合サービス 3rd Party 製品との協業 Data Integration Data Catalog Data Transforms Data Flow Streaming Integration Cloud DWH + 3rd Party Products リアルタイムなデータメッシュを 実現するサービス GoldenGate GoldenGate Stream Analytics
14. 一般的な考え方 “Data Mesh” とは Copyright © 2023, Oracle and/or its affiliates 14 app events data events Apps / IoT ACID 1 2 3 4 5 6 7 1 2 3 4 5 6 7 microservices data products event ledgers streaming systems of truth decentralized / distributed / multi-cloud / edge どこでも動作するAPI駆動のセキュアなサービスメッシュ（K8S、Dockerなど） データプロダクトのKPI、SLA｜ビジネスドメインのモデリング｜出所と説明可能性 データエンジニアとデータプロダクトマネージャーのための直感的なセルフサービス・ユーザー・インターフェース • 様々なビジネスドメインにおけるデータ利用者主導での「データ・プロダクト」に重点を置き、分散したデータ環境を適切なテクノロジー で構成するアーキテクチャ • データに対する責任や権利が利用者側にあることを明確にすることで、集約型におけるデータ利活用のボトルネックを解決、利活用 を促進することが可能
15. 運用データ(SoR)と分析データストアを、 データオブジェクト、トランザクションの連続的なメッシュとして結合 Oracleが考える Trusted Data Mesh のコンセプトイメージ Copyright © 2023, Oracle and/or its affiliates 15 Data Lake Data Lake Data Lake DW / Mart DW / Mart DW / Mart DW / Mart DW / Mart DATA MESH ODS ODS Systems of Record Systems of Analysis microservices apps Converged Database KVP Doc OLTP OLTP Converged Database DW / Mart Graph DW / Mart データ・プロダクトは、メッシュを越えてどこにでもパッケージングして届けることが可能
16. https://www.oracle.com/jp/integration/what-is-data-mesh/#use-cases 参考：7つのData Mesh ユースケース Copyright © 2023, Oracle and/or its affiliates 16 1. Application modernization 2. Data availability and continuity 3. Event sourcing and transaction outbox 4. Event-driven integration 5. Streaming ingest (for analytics) 6. Streaming data pipelines 7. Streaming analytics Data mesh use cases summary
17. Dynamic Data Fabric and Trusted Data Mesh using the Oracle GoldenGate Platform 参考：Data Mesh に関する Oracle の Technology Brief Copyright © 2023, Oracle and/or its affiliates 17 英語版(原文)： https://www.oracle.com/jp/a/ocom/docs/techbrief -enterprisedatameshandgoldengate.pdf 日本語翻訳版： https://www.oracle.com/jp/a/ocom/docs/techbrief -enterprisedatameshandgoldengate-ja.pdf
18. フルマネージド型データレプリケーション(Change Data Capture)サービス サービス概要/特徴 • OCI GoldenGate は、Oracle GoldenGateをベースと したフルマネージド型のデータレプリケーションサービスです • OCI GoldenGate は、接続対象データベースのパフォーマ ンスへの影響を最小限に抑えながら、リアルタイムの変更 データをキャプチャして、OLTP、DWH、ODS、レポート・シ ステムなどに伝搬します こんな課題に役立ちます • OLTPシステムとDWHシステムの間で、変更差分データをリ アルタイムに連携させたい • オンプレミスDBのデータをクラウド上のDBにリアルタイム連携 させたい • クラウド上のDB間でリアルタイムデータ連携をしたい サービス価格 • Oracle Cloud Infrastructure - GoldenGate: ¥188.174 [OCPU/時間] Oracle Cloud Infrastructure - GoldenGate GUIで操作する フルマネージド型 GoldenGate サービス オンプレミスと クラウドを繋ぐ リアルタイムな データ連携 マルチリージョン、 マルチクラウドでの リアルタイムな データ連携 Copyright © 2023, Oracle and/or its affiliates 18 * 2023年5月現在
19. 実績ある優れたソフトウェアテクノロジー The GoldenGate Platform Copyright © 2023, Oracle and/or its affiliates 19 Oracle GoldenGate the most trusted solution for data integration 84% 1000’s #1 of customers of Fortune 100 use GoldenGate in real-time data & Data Fabric Strategy
20. オンプレミスからハイブリッド、マルチクラウドまで膨大な組合せをサポート Oracle GoldenGate Platformが実現するEnterprise Solution Copyright © 2023, Oracle and/or its affiliates 20
21. マーケットをリードするリアルタイムデータソリューションをフルマネージド型サービスとして提供 Oracle Cloud Infrastructure GoldenGate Copyright © 2023, Oracle and/or its affiliates 21 リアルタイム・データ・ソリューション フルマネージド & オートスケール 柔軟なユースケースを実現 Changed data capture(CDC)を ベースとしたリアルタイム・データ連携によ り、リアルタイムなDWH/Lakehouseに よるタイムリーなインサイトの獲得や、常 時データ利活用可能なBusiness Continuity構成の実現が可能 フルマネージド型のサービス提供により 運用のオーバヘッドを大幅に削減すると ともに、負荷状況に合わせたオートス ケール機能によって設計時の負担削減 とコスト最適化を実現可能 片方向連携によるリアルタイム DWH/Lakehousや、双方向連携に よるActive-Active構成、オンプレミス を含めたマルチクラウド連携構成など、 幅広いユースケースを実現するための構 成が可能
22. リアルタイムなトランザクションデータの伝搬をサポート 様々なユースケースをサポート Copyright © 2023, Oracle and/or its affiliates 22 On-Premises to Cloud Multi-Region SaaS to OCI Multi-Cloud Streaming Ingest Delta/ Data Lakehouse Ingest Big Data Capture リアルタイムトランザクションを オンプレミスからクラウドへ伝搬 ドメインやリージョンを跨いでの データ可用性の実現 Oracle SaaS のトランザクション データを連携 マルチクラウド環境でのリアルタイム トランザクションの伝搬 メッセージング基盤からの リアルタイムトランザクション連携 Data/Delta Lakesへの リアルタイムデータ供給 様々なBig Data からの リアルタイム伝搬
23. • 新型コロナ禍以降、需要はこれまで以上に急拡大し、サービスを支え るシステム基盤への負荷も想定を超えて高まり、ユーザーや加盟店の ユーザビリティを損なわず、高いパフォーマンスで安定稼働が可能なシ ステム基盤の再構築が急務に • 現在の2倍以上のオーダーを処理できるシステムを目指し、更新系に オンプレミスのOracle Exadata、参照系にOracle Exadata Database Serviceを導入し、安定したサービス提供に不可欠な優 れた性能、高可用性を最適なコストで実現 • 従来システムで課題となっていた更新系と参照系のデータ同期には、 優れたコスト・パフォーマンスで大量の更新差分データをリアルタイムに レプリケーションできるOCI GoldenGateを採用 • 更新系データベースのバックアップおよびレプリケーションにはデータ保護 専用のエンジニアド・システムであるOracle Database Zero Data Loss Recovery Applianceを導入し、徹底的にデータロスを排除 する仕組みを構築 出前館 様 Copyright © 2023, Oracle and/or its affiliates 23 オラクルのハイブリッド・クラウド構成でサービス 需要の急拡大に対応する強力なシステム基盤を 実現 “お客様や加盟店にご不便をおかけしない処理性能と安定性を実現 することを最優先としシステムを更改しました。『Oracle Exadata』の パフォーマンスには大いに期待しています。また、従来システムで課題 だった更新系/参照系間の遅延のないデータ同期も、『OCI GoldenGate』によって実現できていますし、参照系データベースを 『Oracle Exadata Database Service』でクラウド化し、ハイブリッ ド・クラウド構成にしたことで、コストの最適化も図ることができました。 ビジネス機会を損なわない安定性と可用性を確保でき、現在の当社 ビジネスの状況に合った投資ができた手応えがあります。" 株式会社出前館 執行役員 プロダクト本部 本部長 米山 輝一 氏
24. システム概要 • 新型コロナ禍以降、需要はこれまで以上に急拡大し、ユーザーや加 盟店のユーザビリティを損なわず、高いパフォーマンスで安定稼働が 可能なシステム基盤の再構築が急務に • サービスを支えるシステム基盤は、オーダーを受けてデリバリーするまで のトランザクションを処理する更新系データベースと、これを同期した 参照系データベースで構成 導入効果 • 更新系にオンプレミスのOracle Exadata、参照系にOracle Exadata Database Serviceを導入し、安定したサービス提供に不 可欠な優れた性能、高可用性を最適なコストで実現 • サービス負荷に応じた柔軟なリソース調整が可能に • 従来システムで課題となっていた更新系と参照系のデータ同期には、 優れたコスト・パフォーマンスで大量の更新差分データをリアルタイムに レプリケーションできるOCI GoldenGateを採用 • 更新系データベースのバックアップおよびレプリケーションにはデータ保 護専用のエンジニアド・システムであるOracle Database Zero Data Loss Recovery Applianceを導入し、徹底的にデータロスを排除す る仕組みを構築 • 従来18時間も必要だったフルバックアップ処理を大幅に短縮 オラクルのハイブリッド・クラウド構成でサービス需要の急拡大に対応する強力なシステム基盤を実現 システム構成イメージ 利用サービス・製品 • Oracle Exadata(更新系), Oracle Exadata Database Service(参照系) • OCI GoldenGate • Oracle Database Zero Data Loss Recovery Appliance • Oracle Consulting Service 顧客事例：出前館様 Copyright © 2023, Oracle and/or its affiliates 24 https://www.oracle.com/jp/news/announcement/demae-can-powers-service-infrastructure-with-oracle-2023-03-22/
25. OCI GoldenGate によるマルチクラウド連携 海外顧客事例：American Airlines様 Copyright © 2023, Oracle and/or its affiliates 25 Youtubeでお客様が実際にプレゼンテーションをされていますので、是非ご参照下さい。 https://www.youtube.com/watch?v=F2g9qWgIRec&ab_channel=oraclegoldengate
26. 膨大なストリーミング・データに対するリアルタイム処理を実現 サービス概要/特徴 • Oracle Stream Analyticsは、IoTデータ、パイプライン、 ログデータ、ソーシャル・メディアといったStreamデータをリア ルタイムに分析的計算処理するテクノロジーを提供します • Oracle Stream Analyticsを使用すると、大量のデータ をリアルタイムでフィルタ処理、集計、相関付けおよび分析す ることが可能です こんな課題に役立ちます • 異なるソースからのデータを混合/変換し、複雑なイベント処 理パイプラインを構築したい • 時系列データ内のパターンを検出し、リアルタイムな処理を 実行したい • 処理されたデータ・ストリームを視覚化することにより、操作 ダッシュボードを構築したい • 機械学習を使用して、現在のイベントをスコアリングし、次の イベントを予測したい サービス価格 • ¥132.972 [OCPU/時間] * 別途IaaS部分の費用が必要 Oracle Stream Analytics for Oracle Cloud Infrastructure Copyright © 2023, Oracle and/or its affiliates 26 * 2023年5月現在
27. Sub-second Scale event processing for race analytics SailGP Copyright © 2023, Oracle and/or its affiliates 27 Race Telemetry in Real-Time • SailGP telemetry equipment, using wireless access via a 4G network allows race control to push courses, mark positions, race timer control and conversational chatter to the chart plotter on each support and race boat • 30K data points per second, tranforms into one stream from 10 in the past. ➢ Oracle GoldenGate Stream Analytics ➢ Apache Kafka, Ignite & Spark application ➢ Oracle Cloud Infrastructure (OCI) https://sailgp.com/news/sailgp-launches-second-season-with-oracle-cloud- technologies/
28. Data Mesh & Streaming Analytics Copyright © 2023, Oracle and/or its affiliates 28 Racing Venue (edge IT) Oracle Cloud Infrastructure GoldenGate Stream Analytics Autonomous DB OCI Block Storage Maintenance and Decision Support Data (MDSS) Race Boat Telemetry Gateway OCI Streaming Pi M D S S Analytics Cloud Private LTE Mesh Stream Correlation, Alerting, Dashboards and Continuous ETL: Data Visualization on Historic Race Data:
29. https://blogs.oracle.com/oracle4engineer/post/oci-goldengateoci-goldengate-stream-analytics-stream-analytics-jp ※日本語翻訳版ブログ記事 OCI GoldenGate Stream Analytics の発表 Copyright © 2023, Oracle and/or its affiliates 29
30. Reach out to your Oracle contact for significant savings on your registration! Copyright © 2023, Oracle and/or its affiliates 30
31. Oracle Cloud Infrastructure が提供するデータ連携の主要サービス Copyright © 2023, Oracle and/or its affiliates 31 データベースのBuilt onで提供する データ変換サービス メッセージバスによる連携向け イベントストリーミングサービス プログラミングベースの フルマネージドSparkサービス エンタープライズな アプリケーション統合サービス 3rd Party 製品との協業 Data Transforms Data Flow Streaming Integration Cloud DWH + 3rd Party Products リアルタイムなデータメッシュを 実現するサービス GoldenGate GoldenGate Stream Analytics ETL/ELT要件に対応した データ統合サービス Data Integration Data Catalog
32. GUIベースのクラウドETLサービス サービス概要/特徴 • OCI Data Integration は、様々なデータ変換処理を行 うためのETL機能と、コーディング無しで設計するグラフィカル なインタフェースを提供します • OCI Data Integration により、簡単にデータの準備、統 合、ロードを行うことが可能です こんな課題に役立ちます • データサイエンスやアナリティクスに使用されるデータレイクへ の大規模なデータのロードと変換を効率的に実行したい • 分析目的で使用されるDW(自律型データウェアハウスなど) へのスケーラブルなデータロードと変換を効率的に実行した い サービス価格 • Oracle Cloud Infrastructure - Data Integration - Workspace(ETL開発時): ¥22.4 [Workspace Usage Per Hour] • Oracle Cloud Infrastructure - Data Integration(ETL実 行時): ¥5.6 [Gigabyte of Data Processed Per Hour] • Oracle Cloud Infrastructure - Data Integration - Pipeline Operator Execution(Pipeline/Schedule実行時): ¥42.0 [Execution Hour] Oracle Cloud Infrastructure - Data Integration Copyright © 2023, Oracle and/or its affiliates 32 * 2023年5月現在
33. GUIベースのフルマネージド型ETLサービス Oracle Cloud Infrastructure Data Integration Copyright © 2023, Oracle and/or its affiliates 33 ノーコード・データフロー設計 直感的なユーザー・インターフェイスと豊 富なコンポーネントにより、生産性の高 いETL/ELT処理のデータフロー設計や マッピング設計が可能 GUIによるインタラクティブなデータプリパ レーションやプロファイリングにより、ユー ザー自身でのデータ検証やデータ調整 を可能 処理内容に応じて最適な実行コードを 生成し、Spark ETLによる大量データ の並列処理や、SQLプッシュダウンによ るE-LT処理をフルマネージドで切り替え 実行可能 データ没入型エクスペリエンス フルマネージド型ETLエンジン
34. 開発者の生産性を最大化 “No Code Data Flow Design” Copyright © 2023, Oracle and/or its affiliates 34
35. Oracle Cloud に最適化された接続性 • Oracle Cloud および オンプレミス環境のデータ ソースに接続が可能 • Oracle Autonomous Database (ADW/ATP) • Oracle Database & Exadata DB Systems • Oracle Object Storage: CSV, JSON, Parquet, Avro • MySQL / PostgreSQL / Apache Hive • Microsoft SQL Server & Azure SQL Database • Amazon RDS (MySQL, Oracle, Microsoft SQL Server) • Oracle Fusion Applications, Salesforce • その他(*マニュアルをご参照ください) [ベネフィット] • Oracle Cloudに最適化された接続性 • 使いやすいネイティブアダプタの拡張セット Broad Connectivityの提供 Copyright © 2023, Oracle and/or its affiliates 35
36. 業界をリードするパフォーマンス • ETLとE-LTの両方の処理をサポート • 高性能なエンジンで実行するコードを生成 • 分散データ処理のためのSparkベースのETL • DBMSエンジン上でのE-LT処理のプッシュダウン最適 化 • ソースデータベースとターゲットデータベースが Autonomous Data Warehouseインスタンスなどの 同じデータアセットである場合、完全なSQLプッシュダウ ン処理をサポート [ベネフィット] • データを大規模に処理するための高効率な実行 • 完全に管理されたサーバーレスランタイム Spark ETLまたはSQLプッシュダウンを搭載 Copyright © 2023, Oracle and/or its affiliates 36 Integration Execution Service Optimizer Spark Execution
37. https://www.oracle.com/customers/hearst-case-study/ 顧客事例：HEARST様 Copyright © 2023, Oracle and/or its affiliates 37 • Hearst社は、情報・サービス・メディアを提供する世界有数 の企業で、事業には、健康、交通、テレビ、新聞、雑誌など があります。 • Fusion Cloud や ADW,OACはもちろん、Azure PowerBI もマルチクラウド使用しています。 • OCI Data Integrationを使用して、オブジェクトストレージ からADWへの複雑なロジックとエンドツーエンドの自動化で ソースデータを取り込み、エンリッチし、変換しています。 “Autonomous Data WarehouseとOCI Integrationを 備えたOracle Data Platformを使用することで、運用コストを 80%削減し、プロジェクトの納期を短縮することができました。” - Kim Kohlman, Vice President of HCM Operations, Hearst.
38. メタデータを集約しデータ資産を有効に活用 サービス概要/特徴 • OCI Data Catalog は、Oracle Cloud上のデータ資産 を発見、検索、整理、強化、およびトレースするためのイン ベントリサービスを提供します • OCI Data Catalog には、Business Glossary 機能が 組み込まれており、正しく信頼できるデータ資産を有効に活 用することが可能です こんな課題に役立ちます • Oracle Cloud 上のObject Storage (CSV,Excel,ORC,Avro,Parquet,JSON)、Database、 ATP/ADW、MySQL、Hive、Kafkaに存在するメタデータ を統合管理したい • アナリスト、データサイエンティスト、データスチュワードなどの データプロフェッショナルの分析プロジェクトやデータサイエンス プロジェクトに、単一ビューでのデータディスカバリーを提供し たい サービス価格 • 無償 (OCIリソースに対する課金も不要) 【さらなるデータ利活用基盤のために有益なサービス】 Oracle Cloud Infrastructure - Data Catalog Copyright © 2023, Oracle and/or its affiliates 38 * 2023年5月現在
39. Oracle Cloud Infrastructure が提供するデータ連携の主要サービス Copyright © 2023, Oracle and/or its affiliates 39 メッセージバスによる連携向け イベントストリーミングサービス プログラミングベースの フルマネージドSparkサービス エンタープライズな アプリケーション統合サービス 3rd Party 製品との協業 Data Flow Streaming Integration Cloud DWH + 3rd Party Products リアルタイムなデータメッシュを 実現するサービス GoldenGate GoldenGate Stream Analytics ETL/ELT要件に対応した データ統合サービス Data Integration Data Catalog データベースのBuilt onで提供する データ変換サービス Data Transforms
40. Oracle Database + Exadata + AI/機械学習による自律化 Autonomous Databaseを構成するテクノロジー Autonomous Database Automated Data Center Operations and Machine Learning Complete Infrastructure Automation Complete Database Automation Oracle Cloud Copyright © 2023, Oracle and/or its affiliates 40
41. データ利活用を促進するセルフサービス・ツール群を提供：インスタンスを作成すれば、すぐに利用可能 Autonomous DatabaseのBuilt onで提供されるツール Copyright © 2023, Oracle and/or its affiliates 41 機械学習 Notebook / AutoML UI ビジネスインテリジェンス Oracle Analytics Desktop Webアプリ開発 Application Express : APEX API開発 Oracle Rest Data Services データ操作(ロード/変換等) Database Actions Service Console SQL Monitor / Performance Hub
42. “Database Actions” の Data Studio で提供する「データ・ロード」 Autonomous DatabaseのBuilt onで提供されるツール 「データ・ロード」 Copyright © 2023, Oracle and/or its affiliates 42 シンプルに “ドラッグ・アンド・ドロップ” で データ・ロードが可能 • ローカル・コンピュータ上のファイル • クラウド・ストレージ上のファイル (AWS S3 や Azure Blob Storage にも対応) • Oracle Databases (オンプレミスでもクラウドでも)
43. シンプルなデータロードの要件の場合、非常にリーズナブル Autonomous DatabaseのBuilt onで提供されるツール 「データ・ロード」 Copyright © 2023, Oracle and/or its affiliates 43 GUI操作だけで 完結可能
44. “Database Actions” の Data Studio で提供する「データ・ロード」 Autonomous DatabaseのBuilt onで提供されるツール 「Data Transforms」 Copyright © 2023, Oracle and/or its affiliates 44 ワークフロー OK,NOK,OK/NOKの矢印 でフローをつなぐ スケジュール 頻度、曜日、時間、リトライ回 数などの設定可 シンプルに “ドラッグ・アンド・ドロップ” で 出来るデータ変換 • ODIのあらゆるソースやターゲットに対するコードの自動生成 (対象には Fusion, NetSuite and Salesforce を含む) • ビルトイン済のデータ・クオリティ Oracle Data Integrator が基盤 • 新しくて使いやすい ウェブUI • ODIを利用して ADB に簡単に移行 • すべてのビルトイン・データベース演算子を 利用可能 • ワークフロー、スケジューラ機能あり • 組み込み型以外にMarketplaceの ODI Web Editionの連携が可能
45. Data Transforms のベースとなっているテクノロジー Oracle Data Integrator (ソフトウェア製品) Copyright © 2023, Oracle and/or its affiliates 45 Staging Area (データ変換領域) ODI Agent Flat File/XML Database リポジトリ スキーマ ODI Studio (開発ツール) メタデータ 管理ツール ODI Agent ジョブ管理ツール連携 (sh/bat, Webサービス) Excel DBs DBs Target Tablel JDBCやDBLINK等を内部利用 BigData Cloud Apps ✓ODI Agent – ETL処理自体は主にDB内で行い、Agentは 指揮者的役割。リスナー兼スケジューラー – 軽量なStandaloneのJavaプロセス。 Weblogic Serverへデプロイする構成も可能 ✓ODIリポジトリスキーマ – 開発資産やログ等を格納 ✓Staging Area – データ変換領域(ODIが自動生成) – デフォルトではターゲットに配置
46. Oracle Cloud Infrastructure が提供するデータ連携の主要サービス Copyright © 2023, Oracle and/or its affiliates 46 リアルタイムなデータメッシュを 実現するサービス GoldenGate GoldenGate Stream Analytics ETL/ELT要件に対応した データ統合サービス Data Integration Data Catalog データベースのBuilt onで提供する データ変換サービス Data Transforms メッセージバスによる連携向け イベントストリーミングサービス プログラミングベースの フルマネージドSparkサービス エンタープライズな アプリケーション統合サービス 3rd Party 製品との協業 Data Flow Streaming Integration Cloud DWH + 3rd Party Products
47. フルマネージド Apache Sparkサービス サービス概要/特徴 • OCI Data Flow は フルマネージドのApache Spark サービスです • Sparkアプリケーションの実行を簡単にし、運用上のオー バーヘッドを発生させずに、優れたビッグデータアプリケーショ ンの作成に集中できます こんな課題に役立ちます • Big Data アプリケーション(Spark アプリケーション)を迅速 に提供できる環境が欲しい • オンプレミスの既存Big Data アプリケーション(Spark アプリ ケーション)の実行環境コストを削減したい • 3rd Party クラウド上の既存Big Data アプリケーション (Spark アプリケーション)の実行環境コストを削減したい サービス価格 • 実行時にプロビジョニングされたOCIリソースに対する課金の み Oracle Cloud Infrastructure - Data Flow Copyright © 2023, Oracle and/or its affiliates 47 * 2023年5月現在
48. 大量データストリームを処理する、フルマネージドな分散メッセージングサービス サービス概要/特徴 • サービス間やコンポーネント間の接続経路を、Streaming を経由する形にすることでシンプルに • Pub/Subモデルで非同期のデータ通信を行い、スパイクの ある負荷を処理 • Kafka互換 こんな課題に役立ちます • IoTデータやログデータなど、大量のストリームデータをクラウ ド側に蓄積したい サービス価格 • データ転送(登録/取得)1GBごとに: ¥3.5 • データの保持1GB×時間ごとに: ¥0.028 Oracle Cloud Infrastructure - Streaming Streaming API Gateway Oracle Functions Events IoT Mobile/Web Activities Object Storage Database System App Copyright © 2023, Oracle and/or its affiliates 48 * 2023年5月現在
49. 簡潔・迅速なアプリケーション連携クラウド サービス概要/特徴 • Integrationは、オンプレミス/クラウド環境のアプリケーショ ンを容易かつ迅速に統合する事の出来るサービスです。豊 富な接続アダプタを利用し、アプリケーション連携に必要とさ れた大量のコーディング・工数を不要にし、またデータ変換や プロセス・オートメーション、運用監視機能も提供します こんな課題に役立ちます • SaaSのSFAとオンプレミスの受注システムを統合したい • 複数SaaSのマスターデータを同期したい • カスタマーサポートと営業の情報をシームレスに連携したい サービス価格 • Standard: ¥90.328 (5,000メッセージ/時間) • Enterprise: ¥180.642 (5,000メッセージ/時間) * 50KBを超えるメッセージの場合、50KBを単位として複数メッセージとし て換算。例) 210KBは、5メッセージ * オンプレミスアプリケーション用アダプターを使用する場合は、Enterprise 代表的アダプター • Oracle Cloud Applications (SaaS) • 3rd Party SaaS: Salesforce.com, Concur, SAP Ariba • On-premise Application: E-Business Suite, Siebel, SAP R/3 • Database: Oracle, Microsoft SQL Server 【Enterprise Integrationサービスの活用によるソリューション提供】 Oracle Integration Copyright © 2023, Oracle and/or its affiliates 49 * 2023年5月現在 Oracle Integration Oracle SaaS 3rd Party SaaS Oracle PaaS On-Premise Application On-Premise Database
50. 先般開催されたInformatica World 2023での弊社開発VP登壇スライドより 【パートナー協業でのソリューション提供】 Informatica社との協業でお客様データ基盤のクラウド・モダナイゼーションを実現 Copyright © 2023, Oracle and/or its affiliates 50 PowerCenter と Oracle Databaseの組合せで運用中のデータ基盤を、ハイブリッド環境またはマルチクラウド環境でのデータウェアハウス、 データレイク、またはデータレイクハウスへとモダナイゼーションするために、このパートナーシップは最も包括的なソリューションを提供します。
51.  クラウド上でのデータ連携をとりまく状況  OCI上で提供されている関連サービスの御紹介  お客様事例の御紹介  まとめ、および Q&A 本日お話しさせて頂く内容 Copyright © 2023, Oracle and/or its affiliates 51
52. Oracle Cloud Infrastructure が提供するデータ連携の主要サービス Copyright © 2023, Oracle and/or its affiliates 52 リアルタイムなデータメッシュを 実現するサービス ETL/ELT要件に対応した データ統合サービス データベースのBuilt onで提供する データ変換サービス メッセージバスによる連携向け イベントストリーミングサービス プログラミングベースの フルマネージドSparkサービス エンタープライズな アプリケーション統合サービス 3rd Party 製品との協業 GoldenGate GoldenGate Stream Analytics Data Integration Data Catalog Data Transforms Data Flow Streaming Integration Cloud DWH + 3rd Party Products
53. ご視聴 ありがとうございました。 Copyright © 2023, Oracle and/or its affiliates 53