Databricks on AWSの費用の考え方

Databricks on AWSの費用の考え方について説明します。

Transcript

1. ©2023 Databricks Inc. — All rights reserved AWSにおける Databricks 費用の考え方 Databricks Japan 1
2. ©2023 Databricks Inc. — All rights reserved 2 Databricksコストのブレークダウン • Databricks DBUのコスト • Databricksクラスターが起動している時間 で課金されます • AWSのインフラコスト • ワークスペースのDBFS用S3ストレージ • EC2(VM) • EC2のディスク • ネットワーク通信量 • 監査ログ、使用量ログなどで使用する追加 ストレージのコスト • IGW、VPCエンドポイントなどネットワーク構 成に応じた課金 Object
3. ©2023 Databricks Inc. — All rights reserved お客様のAWS領域 S3 EC2 Bucket 1 Bucket 2 Bucket 3 DatabricksのSaaS領域 Notebook インターフェース （Control Plane） モデル１ モデル２ AWS DBX • AWSインフラの使用料 ◦ サーバーの立ち上げ時間 xスペックx単価 ◦ データ蓄積料金 ▪ データ量x単価（S3の料金表による） ◦ ネットワーク使用料 ▪ プライベートリンクなど • この領域は非課金（無償で利用） ◦ DBUに含まれます。 ◦ 計算資源の利用量に比例して課金 • データブリックスのライセンスは、 DBUとして課金 ◦ DBUは、コンピュートリソースの使用料に比例する コストに関わるブレイクダウン 計算資源xデータ （Data Plane） Notebook Notebook データ パイプライン２ データ パイプライン１ VMsなどサーバー群 Databricks クラスタ
4. ©2023 Databricks Inc. — All rights reserved 4 Databricksコストのブレークダウン • DBUの単価は起動している料金プランとクラス ターのタイプで単価が決定されます。 • ノートブックで使用するクラスター • ジョブで使用するクラスター • Databricks SQLで使用するクラスター(SQL ウェアハウス) • 例えば、ノートブックで使用するクラスターは汎用 コンピュートで、エンタープライズプランの場合は $0.65/DBUなので、1DBUを消費するたびに $0.65の課金が発生します。 https://www.databricks.com/jp/product/pricing/datascience-ml
5. ©2023 Databricks Inc. — All rights reserved 5 Databricksコストのブレークダウン • DBUの消費量はクラスターのスペックで決定され ます。 • 例えば、汎用コンピュートのクラスターのスペック がi3.xlarge(4CPU/31GB)の1台構成、1DBU/hr を消費します。 • このクラスターが1日9時間/20日稼働する場合、 1ヶ月のDBU消費量は • 1 x 9 x 20 = 180 DBU • となります。 • DBU単価が$0.65/DBUなので、月額の費用は • 180 DBU x 0.65 = $117 • となります。 https://www.databricks.com/product/pricing/product-pricing/instance-types
6. ©2023 Databricks Inc. — All rights reserved 6