Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Databricksの課金体系
Search
Databricks Japan
May 12, 2024
Technology
0
260
Databricksの課金体系
Databricksの課金体系(DBU)について説明します。
Databricks Japan
May 12, 2024
Tweet
Share
More Decks by Databricks Japan
See All by Databricks Japan
Databricks AI/BI Genie 自然言語を用いたインテリジェンスなデータ分析
databricksjapan
0
130
生成AIとレイクハウス・ガバナンス
databricksjapan
1
94
データプロダクトにおけるCI/CD: Databricks Asset Bundleとは?
databricksjapan
0
110
Databricks クリーンルームについてのご紹介
databricksjapan
0
180
Unity Catalog データ分離設計ガイド / Unity Catalog Data Isolation Design Guide
databricksjapan
1
470
機械学習モデルの運用と実用的なアプローチ
databricksjapan
0
670
Unity Catalogの自動有効化
databricksjapan
1
120
Unity Catalog 技術ディープダイブ
databricksjapan
1
410
パフォーマンス最適化のベストプラクティス
databricksjapan
0
1.6k
Other Decks in Technology
See All in Technology
FastAPIでのasync defとdefの使い分け
takashi1029
6
1.8k
PREEMPT_RT over the years
ennael
PRO
0
310
10Xでのデータ基盤の変遷とこれから: データマネジメントのリアル 〜BtoB企業3社の歩みとこれから〜
10xinc
6
1.2k
XP matsuri 2024 - 銀河英雄伝説に学ぶ
kawaguti
PRO
3
500
kube-vipとkube-proxy置き換えCiliumを積んだ究極のK3sクラスタを建てる
logica0419
4
190
C# 13 / .NET 9 の新機能 (RC 1 時点)
nenonaninu
1
1.1k
Tracking down sources of kernel errors with retsnoop
ennael
PRO
0
140
【shownet.conf_】3Dアプローチで守るセキュリティ
shownet
PRO
0
280
エムスリー全チーム紹介資料 / Introduction of M3 All Teams
m3_engineering
1
210
LINEヤフー新卒採用 コーディングテスト解説 実装問題編
lycorp_recruit_jp
1
12k
Assisted reorganization of data structures
ennael
PRO
0
210
Oracle Cloud Infrastructure:2024年9月度サービス・アップデート
oracle4engineer
PRO
0
360
Featured
See All Featured
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
30
2.6k
Web Components: a chance to create the future
zenorocha
310
42k
What's new in Ruby 2.0
geeforr
341
31k
Put a Button on it: Removing Barriers to Going Fast.
kastner
58
3.4k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
131
32k
Building an army of robots
kneath
302
42k
Bootstrapping a Software Product
garrettdimon
PRO
304
110k
How to Think Like a Performance Engineer
csswizardry
16
1k
Bash Introduction
62gerente
608
210k
KATA
mclloyd
27
13k
Designing for Performance
lara
604
68k
Building Better People: How to give real-time feedback that sticks.
wjessup
360
19k
Transcript
©2024 Databricks Inc. — All rights reserved Databricks DBU 1
©2024 Databricks Inc. — All rights reserved Databricks - プラットフォーム製品とコンピュート
Databricks製品 クラウド コンピュート • Databricksプラットフォー ム製品を起動する際、お客 様のクラウド アカウント内に コンピュートのインフラを配 備します。 • クラウドコンピュートのコス トはDatabricksのコストと は別であり Databricksの 価格*の 要素ではありません pricing* (サーバレス製品 は除く) * サーバレスのDBUにおいては、クラウドコンピュートはDatabricksのアカウントに存在し、このコストをお客様に請求します。 Databricks サーバレス 製品 Databricksアカウント クラウドコンピュート 非サーバレス サーバレス
©2024 Databricks Inc. — All rights reserved DBUとは? ▪ Databrick
Unit (DBU)は処理能力に対して正規化された単位です ▪ Databricks製品のほとんどがDBUで課金されます ▪ Databricksの消費量/使用量を計測するためにDBUを使用しています ▪ 消費されるDBUの数は、使用された計算リソースによって決定されます ▪ $DBU/hourは特定の製品の時間あたりの価格です 注意事項: よりパワフルなクラウドコンピュートほど、 時間あたりのDBUが増加します
©2024 Databricks Inc. — All rights reserved Databricks Unit (DBU)は時間あたりの処理能力の単位であり、秒単位で課金されます
▪ Databricksクラスターの起動で課金 ▪ アイドル状態のプールインスタンスではDBU課金されません (AzureのVMコストは発生します) ドライバー DS3_v2 ワーカー DS3_v2 ワーカー DS3_v2 ワーカー DS3_v2 2時間 4ノード (1ドライバー + 3ワーカー) x 2時間 = 8 DBU 合計コスト = 8 DBUのコスト + DS3_v2の8 インスタンス時間のAzureコスト Azure Databricksのコスト - DBU
©2024 Databricks Inc. — All rights reserved 課金モデル • 使用量に応じてスケールする課金モデルに基づく柔軟な消費が可能に。
• Databricks Unit (DBU)を消費するクラスターやSQLウェアハウスを用いる際に コストが発生します。 • DBUあたりの金額はワークスペースの課金プラン(スタンダートやプレミアム)とコン ピュートの選択肢(インタラクティブ、ジョブ、SQLウェアハウスなど)に 依存します。 • 他のAzureサービスと一緒に請求されます。 • コンピュートのインスタンスが実行されていない際にはDBUは課金されません。
©2024 Databricks Inc. — All rights reserved DLT Compute -
Photon Delta Lakeで高信頼、運用可 能、テスト可能なデータ処理 パイプラインを構築 するために宣言型ツールを 活用 ディープダイブ: プラットフォーム製品ファミリー Jobs Compute 大規模にデータレイクを 構築し、データを管理するため のデータエンジニア リングパイプラインを実行 Jobs Compute - Photon 最適なワークロード パフォーマンスのために DatabricksのPhotonエンジン を用いたデータエンジニアリン グパイプラインの実行 All-purpose Compute ワンストップショップ体験でイ ンタラクティブな データサイエンス、機械 学習ワークロードを実行 DLT Compute Delta Lakeに高品質な データを提供する高信頼の データエンジニアリング パイプラインの構築と管理 SQL Compute データレイクから タイムリーに洞察を得るため に、BIレポート、分析、 可視化のためにSQLクエリーを 実行 All-purpose Compute - Photon 最適なワークロード パフォーマンスのために DatabricksのPhoton エンジンを用いたデータサイ エンスや機械学習ワーク ロードの実行 Serverless SQL Compute 最適なレーテンシーと 使用率のためにDatabricksの サーバレス環境でSQL クエリーを実行
©2022 Databricks Inc. — All rights reserved TCOブレークダウンの例 $1.00 $DBU
$3.00 VM $1.45 $DBU $1.50 VM TCO $4.00 TCO $2.95 Spark Databricks 最適化 • Databricksの最適化Sparkはクエリーを迅速に 完了するため、計算資源の消費が抑えられます • ジョブあたりのTCOを低減します • 2倍高速であることは、インフラストラクチャのコスト が半分になることを意味します • この例では、クラウドインフラストラクチャの節約に よって、TCOを26%削減できる可能性があります 26%のTCO削減
©2024 Databricks Inc. — All rights reserved ワークロードに基づくサイジング 最小 ピーク
ピークに基づく オンプレミスアプローチ 平均 実際のワークロード クラウドの推定値 コスト削減の機会 クラウドスケールの最小 クラウドスケールの最大