20251024_TROCCO／COMETAアップデート紹介といくつかデモもやります！_#p_UG 東京：データ活用が進む組織の作り方

by D

Slide 1

Slide 1 text

TROCCO／COMETAアップデート紹介といくつかデモもやります！ 2025.10.24 #p_UG 東京：データ活用が進む組織の作り方 primeNumber Inc. 鈴木大介（D）

Slide 2

Slide 2 text

2 鈴木大介（D）株式会社primeNumber マーケティング本部 PMMチームプロダクトマーケティングマネージャー Self-Hosted Runnerの検証のため、 Azure／AWS／Google Cloud／Oracle Cloud Infrastructureでコンテナをデプロイできるようになりました（笑）

Slide 3

Slide 3 text

3 TROCCO：データ活用の基盤を支えるサービスデータの転送、加工、実行管理の自動化を担うことで、 BIでの可視化／AI活用／データ連携を効率的に実現する Web行動ログSDK　データ転送（ETL）データ変換（ELT／データマート定義・dbt連携） BI ML / LLM 顧客/会員データ購買データ広告/MAデータ CRM/SFAデータ SaaSデータ広告配信コンテンツレコメンド SFA MA CRM ファイルストレージワークフローデータカタログ DWH Lake Warehouse Mart データ転送（リバースETL）

Slide 4

Slide 4 text

4 COMETA：データの活用を促進するサービステーブル・カラムの相関関係を一目で把握独自のメタデータを追加カタログを見ながらクエリ記述データ選定データ理解集計作業データチェック分析要件整理必要なデータを容易に検索集計作業を効率化自動でカタログ作成テーブル・カラムの相関関係を一目で把握独自のメタデータを追加カタログを見ながらクエリ記述検索データカタログ JOIN分析 ER図カラムリネージユーザー定義メタデータクエリエディタ全体を対話型AIで支援データ活用の課題に適した機能を、使いやすいUIで揃えているとともに、対話型AI機能でデータの探索や分析を支援する

Slide 5

Slide 5 text

5 前回のp_UGからのリリース紹介

Slide 6

Slide 6 text

primeNumber TROCCO 6

Slide 7

Slide 7 text

7 環境管理（デモします！）環境を設定するとともに、環境に紐づいたリソースの移行を円滑にすることで、本番環境を保護しながら開発／検証を安全に進められる

Slide 8

Slide 8 text

8 CDCデータ転送転送元PostgreSQL／転送先BigQueryに対応データベースの変更ログをもとに大量データの効率的な差分転送ができるCDCデータ転送で、転送元MySQL、転送先S3（Iceberg）に加えて、転送元PostgreSQL、転送先BigQueryが追加

Slide 9

Slide 9 text

9 データマート Databricks対応この機能拡充で、Databricksへの転送（ETL）、Databricksでの変換（Transform）、 Databricksからの転送（Reverse ETL）に対応

Slide 10

Slide 10 text

10 新規コネクタ追加／拡充 ● 転送元Gainsight PX ● 転送元HENNGE Access Control ● 転送元WordPress ● 転送元Zoho People ● 転送元チャネルトーク ● 転送元yamory ● 転送元SendGrid ● 転送元BIZTEL ● 転送元Bill One ● 転送元ClickUp ● 転送元Db2 for LUW ● 転送元Qiita ● 転送元PayPal ● 転送元Vercel ● 転送元SAP S/4HANA OData 差分転送 8月～で以下のコネクタが追加／拡充

Slide 11

Slide 11 text

primeNumber COMETA 11

Slide 12

Slide 12 text

12 対話型AIアシスト機能 Agent化をすることで、自律的に動作し対話の品質が向上

Slide 13

Slide 13 text

13 Redshift連携 Google BigQuery、Snowflakeに加えて、Amazon Redshiftにネイティブ連携* *上記以外もカスタムデータベース連携で連携可能

Slide 14

Slide 14 text

14 メタデータアクセスコントロール（昨日リリース！／デモします！）データベース／スキーマ／テーブル単位で許可／拒否の細やかなアクセス制御が可能に

Slide 15

Slide 15 text

15 デモします！！！

Slide 16

Slide 16 text

16 地味便利機能を2つ（私が泣いて喜んだもの） ● 接続情報の利用状況確認機能 ○ 接続情報の棚卸しには不可欠 ● ワークフロー画面でのコメント機能 ○ チーム開発にはとっても便利超絶ヘビーユーザーの私がずっと欲しかったものです・・・使ってください

Slide 17

Slide 17 text

17 環境管理環境を設定するとともに、環境に紐づいたリソースの移行を円滑にすることで、本番環境を保護しながら開発／検証を安全に進められる

Slide 18

Slide 18 text

18 環境管理でできること環境管理の運用イメージ ● 環境のまとまりである環境グループに環境（dev／prodなど）を作成 ● 作成したリソースにdevを紐づけ ● devのリソースをもとに、接続情報／カスタム変数等を変更したprodのリソースを作成（設定した差分以外は共通） ● devを修正したら、検証後に修正内容を prodに反映同一アカウント内で、接続情報／カスタム変数等を差分として、リソースの作成／変更の反映を行うことで堅実な環境移行を実現

Slide 19

Slide 19 text

19 詳細は公式ドキュメント／解説記事にて ● 公式ドキュメント「環境管理機能」 ● 解説記事「もう間違えて本番環境を壊さない！TROCCOの環境管理で、堅牢なデータパイプライン開発を実現する」 ○ 環境分離の考え方 ○ 手を動かして理解する「環境管理」とは ○ 設計パターンの整理（タスクレベル） ○ 設計パターンの整理（ワークフローレベル） ○ 利用上の注意ユースケースや設定方法の詳細についてまとめています

Slide 20

Slide 20 text

20 Self-Hosted Runner TROCCOのデータ転送を、ユーザー管理の処理環境で実行できる機能外部SaaSはつなげないんです・・・を乗り越えるもの Secure｜実データは閉域内で処理インバウンド通信は不要、設定情報のみアウトバウンド通信で取得 01. Clear ｜TROCCOが使えれば誰でも非エンジニアでも使いやすい UI/UXはそのまま 02. Quick ｜Dockerなら何処でも直ぐに Docker（Linux環境）で速やかに構築可能 03.

Slide 21

Slide 21 text

21 これが

Slide 22

Slide 22 text

22 こうなる

Slide 23

Slide 23 text

23 利用者向けの記事を書いたので、参考までに ● 解説記事「TROCCO Self-Hosted Runnerの運用構成を整理する」機能的な解説と運用構成の考え方について整理しています

Slide 24

Slide 24 text

24 メタデータアクセスコントロールデータベース／スキーマ／テーブル単位で許可／拒否の細やかなアクセス制御が可能に