Upgrade to Pro — share decks privately, control downloads, hide ads and more …

データでやりたいあれこれ@troccoUG『新春LT会!データでやりたいあれこれ』

Ryo Suzuki
January 24, 2024
92

 データでやりたいあれこれ@troccoUG『新春LT会!データでやりたいあれこれ』

▼概要:
本資料は2024年1月24日、primeNumber社主催のtroccoユーザ会における講演資料です

▼イベントURL:
trocco User GroupのSlack内にて展開

▼詳細:
データチームにおける2023年までの振り返りと、2024年に実施したいこと

Ryo Suzuki

January 24, 2024
Tweet

Transcript

  1. © 2023 HR Force Inc. 3 3 自己紹介 鈴木 凌(すずき)

    株式会社HR Force DS統括部 DXグループ Dataチーム リーダー Salesforce / Tableauシステム管理者 データエンジニア / アナリティクスエンジニア @suzupappa @suzupappa Ryo Suzuki
  2. © 2023 HR Force Inc. 18 18 2022年:具体業務 ‣ Snowflake導入(BigQueryからの移管)

    ‣ データの移管をしつつ、パイプラインの見直しも実施 - Coopel(RPAツール)によるデータ自動取得 - PythonによるAPI連携、Slack通知 - CRM AnalyticsによるZero ETL ‣ ETLからELTへ ‣ データレイク層の開発 ‣ データアーキテクチャの見直し
  3. © 2023 HR Force Inc. 19 2022年:DMBOK Aikenのピラミッド 「DMBOK Peter

    Aiken’s Pyramid」を引用し和訳 What is Data Management, actually? – DAMA-DMBOK Framework データガバナンス データ 品質管理 メタデータ 管理 データ アーキテクチャ データ セキュリティ デザイン / データモデリング データストレージ / 運用 データ統合 / 相互運用性 マスター データ 管理 コンテンツ / ドキュメント 管理 DWH / BI データ分析 / ビックデータ活用 2022年
  4. © 2023 HR Force Inc. 26 26 2023年:具体業務 ‣ データイネーブルメントの促進

    - 社長含む正社員14名/70名をDATA Saberに - リバースETLの実装(Hightouch導入、CRM Analyticsのライトバック) ‣ データウェアハウス層を主に開発 - dbt導入 - ディメンショナル・モデルの実装 ‣ DaaS事業(Azapt)の立ち上げ - BigQuery(Google Cloud)再導入 - trocco導入 - Terraform導入(IaCツール)
  5. © 2023 HR Force Inc. 27 2023年:DMBOK Aikenのピラミッド 「DMBOK Peter

    Aiken’s Pyramid」を引用し和訳 What is Data Management, actually? – DAMA-DMBOK Framework データガバナンス データ 品質管理 メタデータ 管理 データ アーキテクチャ データ セキュリティ デザイン / データモデリング データストレージ / 運用 データ統合 / 相互運用性 マスター データ 管理 コンテンツ / ドキュメント 管理 DWH / BI データ分析 / ビックデータ活用 2022年 2023年
  6. © 2023 HR Force Inc. 29 29 2023年:おまけ DATA Saberの動きについて興味を持っていただいた方はこちら

    データ基盤の再構築とDATA Saber挑戦を機にデータイネーブルメントを進めた話
  7. © 2023 HR Force Inc. 35 35 2024年:具体業務(想定) ‣ 直接的に業績に貢献できるような取り組みの実施

    - レポーティング、データ分析、etc… ‣ マーケティングデータの活用 - Account Engagementデータ連携、 CRM Analytics、Data Cloudの活用 ‣ Snowflakeの機能を活用 - Snowflake Coretex、Snowpark Container Service、Data Clean Room ‣ データマート層を主に開発 ‣ SELECT Cloudによるコスト管理、Elementaryやdbtテストのさらなる活用 ‣ 様々なトリガーの一元管理体制の構築 ‣ データカタログの作成(再チャレンジ!!)
  8. © 2023 HR Force Inc. 36 2024年:DMBOK Aikenのピラミッド 「DMBOK Peter

    Aiken’s Pyramid」を引用し和訳 What is Data Management, actually? – DAMA-DMBOK Framework データガバナンス データ 品質管理 メタデータ 管理 データ アーキテクチャ データ セキュリティ デザイン / データモデリング データストレージ / 運用 データ統合 / 相互運用性 マスター データ 管理 コンテンツ / ドキュメント 管理 DWH / BI データ分析 / ビックデータ活用 2022年 2023年 2024年
  9. © 2023 HR Force Inc. 38 38 2024年:展望 これまで:Small Start,

    Quick Win これから:「個」から「組織」へ
  10. © 2023 HR Force Inc. 44 44 2024年: ~個人編~ ‣

    アウトプットを増やす!(セミナー登壇、記事、etc) ‣ Snowflakeの資格をとる!(SnowPro Core → Advancedなにか) ‣ Salesforceの資格をとる!(Data Cloud? CRM Analytics? Account Engagement?)