Databricks ソリューションマーケットプレースとガバナンス

Slide 1

Slide 1 text

Slide 2

Slide 2 text

©2023 Databricks Inc. — All rights reserved 2 低コストで高速にデータウェアハウスから機械学習モデル活用までシームレスに大規模言語モデル LakehouseIQ Databricks Marketplace MosaicML English SDK for Spark Unity Catalog for AI Lakehouse Monitoring Lakehouse Federation Delta Lake 3.0 Lakehouse AI Lakehouse APPs Predictive IO Liquid Clustering

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

©2023 Databricks Inc. — All rights reserved ファイルへのアクセス権限テーブル、行、列へのアクセス権限機械学習モデル、特徴量へのアクセス権限レポートやダッシュボードへのアクセス権限ガバナンスチーム “データ資産のセキュリティ担保 ” “アクセス対象者とアクセス方法 ” “コンプライアンス遵守方法” データレイクデータウェアハウス AI プラットフォーム BI ダッシュボードデータサイエンティストデータエンジニアデータアナリストデータ利用者機械学習実行者 “必要なデータ、モデル、ノートブック、ダッシュボードはどこにあるのか ?” 5 Data + AI のガバナンスは非常に複雑

Slide 6

Slide 6 text

©2023 Databricks Inc. — All rights reserved データレイクデータウェアハウス AI プラットフォーム BI ダッシュボードガバナンスチームデータサイエンティストデータエンジニアデータアナリストデータ利用者機械学習実行者 “必要な資産を見つけるのが簡単に!!” Databricks Unity Catalog 構造化／非構造化データおよび AIに対応する　単一のセキュリティおよびガバナンス・モデル “データと AI ガバナンスのためのシンプルな統合ソリューション ” “背後にあるアーキテクチャの複雑さを抽象化。” 6 データブリックスは、Data + AI のガバナンスを統合

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

Slide 10

Slide 10 text

©2023 Databricks Inc. — All rights reserved クラウドストレージ Bronze Silver Gold モデルノートブック/ クエリー特徴量ストアダッシュボード + 行 & 列レベルセキュリティ MODELS = AI に関するアクセス制御その他システム … LAKEHOUSE FEDERATION = レイクハウス上でガバナンスを実現! テーブル群 = テーブル形式データの制御 10 VOLUMES = 表形式でないデータのアクセス制御 Data と AI 資産のアクセス制御

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

©2023 Databricks Inc. — All rights reserved Models Notebooks/ queries Feature store Dashboards Feature store Bronze Silver Gold 15 Hive Interface / Uniform Hive & Iceberg 互換ツール群外部ツールから Unity Catalog にアクセス可能クラウドストレージその他システム … Hive メタストア Hive メタストアインターフェース & Uniform Private Preview

Slide 16

Slide 16 text

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

Slide 22

Slide 22 text

©2023 Databricks Inc. — All rights reserved Predictive Optimization ソリューション • AIモデルが最適化するテーブルを決定 • Bin-packing • Liquid clustering • Vacuuming • Table statistics • Intelligent storage tiering • Databricksは自動的にメンテナンスを行う • 超最適化されたサーバーレス・コンピュート使用 22 Private Preview

Slide 23

Slide 23 text

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

Slide 30

Slide 30 text

©2023 Databricks Inc. — All rights reserved 単にデータを共有されてもストレスがたまるだけ！共有された 3rd Party データから価値を出すのは大変時間がかかる。データを探すデータにアクセスデータを加工するデータを分析欲しいデータを探して異なるベンダーのデータ価格を比較して選ぶセキュリティ IT 部門のレビューを通過してデータにアクセスをするデータ評価クレンジング構造化妥当性評価モデリングエンリッチメント可視化洞察

Slide 31

Slide 31 text

Open marketplace for all your data, analytics, and AI Databricks Marketplace Data Tables Solution Accelerators Apps Notebooks AI Models Dashboards Data Files Databricks Marketplace Providers Share more than just data Reach users on any platform Consumers Discover more than just data Avoid vendor lock-in Faster time to insights Share data securely (public or private)

Slide 32

Slide 32 text

Marketplace momentum Marketplace <3 months 45k unique users 500+ marketplace listings 75+ Data Providers Financial Services Media & Entertainment + Retail Healthcare & Life Sciences Horizontal Datasets Carto

Slide 33

Slide 33 text

Marketplace momentum

Slide 34

Slide 34 text

©2023 Databricks Inc. — All rights reserved Thank You! Thank you so much for visiting the Data AI Summit in San Francisco for a week. We look forward to working with you and let’s push forward on the democratization of data and AI in Japan.