Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Databricksの課金体系
Search
Databricks Japan
May 12, 2024
Technology
0
64
Databricksの課金体系
Databricksの課金体系(DBU)について説明します。
Databricks Japan
May 12, 2024
Tweet
Share
More Decks by Databricks Japan
See All by Databricks Japan
Unity Catalog データ分離設計ガイド / Unity Catalog Data Isolation Design Guide
databricksjapan
0
110
機械学習モデルの運用と実用的なアプローチ
databricksjapan
0
470
Unity Catalogの自動有効化
databricksjapan
0
35
Unity Catalog 技術ディープダイブ
databricksjapan
1
210
パフォーマンス最適化のベストプラクティス
databricksjapan
0
1.2k
Databricks アシスタントとは?
databricksjapan
0
120
DatabricksによるRAGアーキテクチャー
databricksjapan
0
53
Databricksによるセキュアで効率的なデータエンジニアリングの実現
databricksjapan
0
35
オープンLLM DBRXについて
databricksjapan
0
48
Other Decks in Technology
See All in Technology
カード発行会社(イシュア)を 支えるシステム解説
yutadayo
0
130
生成AIの活用方法 - 2024年現在、 結局どのように使えばいいのだろうか? / How to use Generative AI in 2024
nttcom
10
5.5k
PHPカンファレンス福岡2024 【超特急】SQLアンチパターン総おさらいLT
ytsuzaki
0
140
AWS構成図から CloudFormationとパラメータシートを 自動生成するシステムを作ってみた
tsukuboshi
0
5.4k
明日使えるかもしれないLoss Functionsのアイディアと実装
ftakahashi
PRO
9
1.2k
もうブロッカーにしない!コードレビューを爆速にする組織づくり🚀
bicstone
3
1.1k
社内LLMハッカソン2024発表資料
streamwest1629
0
340
OODAふりかえり 何って…ただ毎スプリント、違うふりかえり手法を採用してるだけだが? / Retrospectives with OODA
kakehashi
7
520
20分で分かるIAM全機能 /20240621-aws-summit-iam
opelab
21
5k
エンドツーエンドの可視性を実現するクエスト
taijihagino
PRO
1
160
20240619 PLATEAU LT 06 Babylon.jsとPLATEAU
limes2018
0
320
FFMでJITコンパイラを作ってみた
yasuenag
0
400
Featured
See All Featured
Fontdeck: Realign not Redesign
paulrobertlloyd
77
5k
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
10
3.6k
How to train your dragon (web standard)
notwaldorf
77
5.3k
jQuery: Nuts, Bolts and Bling
dougneiner
60
7.3k
Embracing the Ebb and Flow
colly
80
4.2k
It's Worth the Effort
3n
180
27k
Docker and Python
trallard
36
2.8k
StorybookのUI Testing Handbookを読んだ
zakiyama
14
4.8k
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
23
2k
Testing 201, or: Great Expectations
jmmastey
32
6.8k
Designing Experiences People Love
moore
136
23k
How to Create Impact in a Changing Tech Landscape [PerfNow 2023]
tammyeverts
28
1.8k
Transcript
©2024 Databricks Inc. — All rights reserved Databricks DBU 1
©2024 Databricks Inc. — All rights reserved Databricks - プラットフォーム製品とコンピュート
Databricks製品 クラウド コンピュート • Databricksプラットフォー ム製品を起動する際、お客 様のクラウド アカウント内に コンピュートのインフラを配 備します。 • クラウドコンピュートのコス トはDatabricksのコストと は別であり Databricksの 価格*の 要素ではありません pricing* (サーバレス製品 は除く) * サーバレスのDBUにおいては、クラウドコンピュートはDatabricksのアカウントに存在し、このコストをお客様に請求します。 Databricks サーバレス 製品 Databricksアカウント クラウドコンピュート 非サーバレス サーバレス
©2024 Databricks Inc. — All rights reserved DBUとは? ▪ Databrick
Unit (DBU)は処理能力に対して正規化された単位です ▪ Databricks製品のほとんどがDBUで課金されます ▪ Databricksの消費量/使用量を計測するためにDBUを使用しています ▪ 消費されるDBUの数は、使用された計算リソースによって決定されます ▪ $DBU/hourは特定の製品の時間あたりの価格です 注意事項: よりパワフルなクラウドコンピュートほど、 時間あたりのDBUが増加します
©2024 Databricks Inc. — All rights reserved Databricks Unit (DBU)は時間あたりの処理能力の単位であり、秒単位で課金されます
▪ Databricksクラスターの起動で課金 ▪ アイドル状態のプールインスタンスではDBU課金されません (AzureのVMコストは発生します) ドライバー DS3_v2 ワーカー DS3_v2 ワーカー DS3_v2 ワーカー DS3_v2 2時間 4ノード (1ドライバー + 3ワーカー) x 2時間 = 8 DBU 合計コスト = 8 DBUのコスト + DS3_v2の8 インスタンス時間のAzureコスト Azure Databricksのコスト - DBU
©2024 Databricks Inc. — All rights reserved 課金モデル • 使用量に応じてスケールする課金モデルに基づく柔軟な消費が可能に。
• Databricks Unit (DBU)を消費するクラスターやSQLウェアハウスを用いる際に コストが発生します。 • DBUあたりの金額はワークスペースの課金プラン(スタンダートやプレミアム)とコン ピュートの選択肢(インタラクティブ、ジョブ、SQLウェアハウスなど)に 依存します。 • 他のAzureサービスと一緒に請求されます。 • コンピュートのインスタンスが実行されていない際にはDBUは課金されません。
©2024 Databricks Inc. — All rights reserved DLT Compute -
Photon Delta Lakeで高信頼、運用可 能、テスト可能なデータ処理 パイプラインを構築 するために宣言型ツールを 活用 ディープダイブ: プラットフォーム製品ファミリー Jobs Compute 大規模にデータレイクを 構築し、データを管理するため のデータエンジニア リングパイプラインを実行 Jobs Compute - Photon 最適なワークロード パフォーマンスのために DatabricksのPhotonエンジン を用いたデータエンジニアリン グパイプラインの実行 All-purpose Compute ワンストップショップ体験でイ ンタラクティブな データサイエンス、機械 学習ワークロードを実行 DLT Compute Delta Lakeに高品質な データを提供する高信頼の データエンジニアリング パイプラインの構築と管理 SQL Compute データレイクから タイムリーに洞察を得るため に、BIレポート、分析、 可視化のためにSQLクエリーを 実行 All-purpose Compute - Photon 最適なワークロード パフォーマンスのために DatabricksのPhoton エンジンを用いたデータサイ エンスや機械学習ワーク ロードの実行 Serverless SQL Compute 最適なレーテンシーと 使用率のためにDatabricksの サーバレス環境でSQL クエリーを実行
©2022 Databricks Inc. — All rights reserved TCOブレークダウンの例 $1.00 $DBU
$3.00 VM $1.45 $DBU $1.50 VM TCO $4.00 TCO $2.95 Spark Databricks 最適化 • Databricksの最適化Sparkはクエリーを迅速に 完了するため、計算資源の消費が抑えられます • ジョブあたりのTCOを低減します • 2倍高速であることは、インフラストラクチャのコスト が半分になることを意味します • この例では、クラウドインフラストラクチャの節約に よって、TCOを26%削減できる可能性があります 26%のTCO削減
©2024 Databricks Inc. — All rights reserved ワークロードに基づくサイジング 最小 ピーク
ピークに基づく オンプレミスアプローチ 平均 実際のワークロード クラウドの推定値 コスト削減の機会 クラウドスケールの最小 クラウドスケールの最大