データ基盤管理の考え方〜dbtの極意〜 Lunch LT

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

©10X, Inc. All Rights Reserved. 今日の話  ● まずの前提 ○ dbt Cloudが全てにおいて万能なわけではない ○ 他の方法の比較やチームで相談し、適切に技術選定をしてください ● 話すこと ○ データの活用を目指し継続的なモデル開発、データパイプライン開発をしていく上で dbt Cloudを活用した「dbtの運用負荷の軽減」や「チーム開発体験を向上」していくための要素を実際のdbt Cloudを使用して紹介 ○ 実際に導入する際のパターンや費用感のお話 ● 話さないこと ○ セマンティックレイヤー等の先進的な機能の具体的な話

Slide 6

Slide 6 text

Slide 7

Slide 7 text

©10X, Inc. All Rights Reserved. dbt Cloudの特徴  ● ワークフローの運用に手間を掛けなく、dbtがすぐに使える ○ 開発環境やデプロイ環境で使用するdbtのバージョンや実行環境を統一的に管理可能 ○ データパイプラインの開発にいちはやく専念ができる ● パイプラインの効率的なチーム開発を支援 ○ dbtの統合開発環境で環境準備やレクチャーのコスト低下 ○ Githubを中心としたコード管理との開発、デプロイ処理が連携 ○ デプロイジョブの処理はスケジュール実行、手動実行が可能 ○ ジョブの実行履歴、成否Slack通知機能あり ● シンプル使いも、多機能に使いたい人へのサポートも ○ 直近セマンティックレイヤーの拡張機能のサポートを予定 ○ 部分的に使うこともできれば、dbt Coreとの開発体験の融合も可能

Slide 8

Slide 8 text

Slide 9

Slide 9 text

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

©10X, Inc. All Rights Reserved. dbt Cloudにメリットを感じて導入するには？  ● まずはDeveloperプランで1ライセンスで無料で検証してみる ○ モデルのデプロイ数の上限等があるため、小規模でなければ本番運用は難しい ● 本格的にチームや本番で投入したい場合はTeamプラン ○ かなりの規模のデプロイ数（15000/month）までカバー可能なので基本的にはこのプランでいける ○ 8シートまで購入が可能、ただしIDEやジョブの管理をしたい人のみ有料で、それ以外の人はローカルでdbt Coreでの開発も併用可能 ○ セマンティックレイヤーの機能も利用可能 ● それ以上はエンタープライズプランで検討

Slide 14

Slide 14 text