Slide 1

Slide 1 text

dbtで作るデータ分析基盤 Ryuto Yoda 2025年2月14日

Slide 2

Slide 2 text

・データ活用の課題 ・dbtとは? ・dbtの魅力 ・dbtの課題 ・質問タイム おしながき

Slide 3

Slide 3 text

・データ活用の課題 ・dbtとは? ・dbtの魅力 ・dbtの課題 ・質問タイム おしながき

Slide 4

Slide 4 text

データ活用の課題 データ分析したい! AIを作りたい!

Slide 5

Slide 5 text

データ活用の課題 使える綺麗なデータがない、、、

Slide 6

Slide 6 text

データ活用の課題 データ分析やAIモデル開発には「綺麗なデータ」が必要。 でも、現実は違います。 複数のファイルやテーブルがごちゃごちゃ 名前の揃わないカラムや欠損値だらけのデータ ビジネスで利用できる形式になっていない このカオスを整理するためのツールがdbtです!

Slide 7

Slide 7 text

・データ活用の課題 ・dbtとは? ・dbtの魅力 ・dbtの課題 ・質問タイム おしながき

Slide 8

Slide 8 text

主にSQLで書ける「データ変換ツール」data build toolの頭文字をとって「dbt」 データベースのクエリエンジンに依存せず、自由 度が高い(PostgreSQL、BigQuery、Snowflake など対応) 類似サービス(dataform) エンジニアと分析担当の架け橋になるツールです! dbtとは?

Slide 9

Slide 9 text

dbtとは? データアーキテクチャにおけるdbtの立ち位置

Slide 10

Slide 10 text

・データ活用の課題 ・dbtとは? ・dbtの魅力 ・dbtの課題 ・質問タイム おしながき

Slide 11

Slide 11 text

dbtの魅力 冪等性が高く同じ処理を何度実行しても結果 が変わらない安心感 ビジネスロジックを組み込んだデータ開発が 可能

Slide 12

Slide 12 text

冪等性について dbtでは依存関係を明確に管理する設計が組み込ま れており、コードで入力と出力を明確に定義する ことができます。 入力元テーブル 出力先テーブル

Slide 13

Slide 13 text

ビジネスロジックを組み込んだデータ開発 dbtではディメンショナルモデルング(データをビジネス 分析しやすくするために切り出す手法)を簡単に組み込 む関数が充実しています。

Slide 14

Slide 14 text

dbtデモ 実際に動かしてみます!

Slide 15

Slide 15 text

・データ活用の課題 ・dbtとは? ・dbtの魅力 ・dbtの課題 ・質問タイム おしながき

Slide 16

Slide 16 text

dbtの課題 dbtはSQLベースで簡単に開発を進めることができますが、 ビジネス特性の理解やデータモデリングに関する知識がなけ ればデータカオスは解消されず、dbtの機能を十分に活かす ことは難しくなります

Slide 17

Slide 17 text

dbtの課題 そこでdbtを使ったモデリングに 関するおすすめ資料をまとめてみました。 kimball-dimensional-model dbt_data_vault ・ディメンショナルモデリングの実践 ・データボルト2.0の実践

Slide 18

Slide 18 text

これで完全に理解...

Slide 19

Slide 19 text

質問タイム