Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Databricksを採用した背景と導入効果

kakehashi
May 29, 2023

 Databricksを採用した背景と導入効果

kakehashi

May 29, 2023
Tweet

More Decks by kakehashi

Other Decks in Business

Transcript

  1. © KAKEHASHI Inc. 株式会社カケハシ データ基盤チーム マネージャー 松田 健司 • 2014年、新卒としてヤフー株式会社にて

    広告配信のためのDMP開発に従事。 • 2016年、株式会社カケハシに入社し、 薬歴システム「Musubi」の開発。 • 2019年、薬局経営ダッシュボード 「Musubi Insight」チームの立ち上げ。 • 2022年、全社横断のデータ基盤チームを立ち 上げ、7月にDatabricksを導入。 自己紹介
  2. © KAKEHASHI Inc. 技術スタックの分散化によるデータガバナンス管理難 Databricks導入前課題 BI メタデータ ワークフロー 分析・AI パイプライン

    データオブジェクト Aurora DynamoDB S3 ForeCast SageMaker Athena MWAA 権限管理 IAM Drive BigQuery Colaboratory CloudWatch Spread Sheet esa Glue Glue Data Pipeline Lambda
  3. © KAKEHASHI Inc. 今後の展望 • 医療サービスの質向上を目指した医療機関の相互データ連携 ◦ Delta Sharingを利用したデータクリーンルームの構築 ◦

    データマーケットプレイスを利用したデータ拡充 • 情報漏洩を防ぐデータガバナンス強化 ◦ 法務、SRE、情シスと連携した横断的なガバナンスチームの組成 ◦ データ利用者、開発者向けの社内規定策定 ◦ ガバナンス統制の効率化をDatabricksへ期待 • 急速な事業成長に合わせた分散オーナーシップ組織の実現 ◦ チーム間の責任分界点を明確化 ◦ 開発者向けのガイドライン策定 ◦ Workspace環境の適切な範囲に分離