入社してからデータ分析基盤でやってきたことを 真面目にドヤる!!

Transcript

1. © Leaner Technologies, Inc. 入社してからデータ分析基盤でやってきたことを 真面目にドヤる!! 2025-12-19 リーナーテクノロジーズ忘年LT大会 こーむら
2. © Leaner Technologies, Inc. ドヤるのってむずくない？ 2
3. © Leaner Technologies, Inc. ドヤるのってむずくない？ - 出来る前は「すごい！」と思うことも、出来てしまうとそれが当たり前になってしまう現象 - 「こんなことドヤっても、全然すごくないのでは？」 - 「もっとすごいことやってる人もいるし、それと比べたら…」 - なんてことを思ったり。。。 - でもせっかくの機会なので、↑の悩みは忘れて今日は真面目にドヤってみる。 3
4. © Leaner Technologies, Inc. - 2025/10に２人目のデータエンジニアとして入社。 - チームでデータ分析基盤を開発する体制が整っていなかったので、VSCodeのDevContainer拡張機 能を使って開発環境の共通化を実施。 - 人が増えてもスムーズに立ち上がれるようになった🙌(Welcome データエンジニア!!) ドヤ1: DevContainerによる開発環境の共通化 4
5. © Leaner Technologies, Inc. - リーナー見積のデータはDatastreamを利用してストリーミング転送していたが、リーナー購買の データはEmbulkを利用してバッチ転送されていた。 ドヤ2: Datastreamによるストリーミング転送の実施 5
6. © Leaner Technologies, Inc. - リーナー購買のデータもDatastreamによる ストリーミング転送に切り替えることで、 見積/購買ともにデータの鮮度が揃った状態で 扱えるようになった🙌 - あわせて、外部データの取り込みや 分析用プロジェクトの作成など、 このタイミングでデータ分析基盤全体の構成を ガッと変更。 ドヤ2: Datastreamによるストリーミング転送の実施 6
7. © Leaner Technologies, Inc. - リーナーではBIツールとしてLookerStudio、及び一部のメンバーがLookerを利用している。 - アドホッククエリの蔓延や利用料のコスト観点を鑑み、OSS版でLightdashのPoCを開始。 ドヤ3: BIツール「Lightdash」のPoC開始 7
8. © Leaner Technologies, Inc. - データモデリングも見直し、不要な階層をリファクタリングしてシンプルな形に刷新。 ドヤ3: BIツール「Lightdash」のPoC開始 8
9. © Leaner Technologies, Inc. 入社2ヶ月にしては割とやってるよね？ね？！ 9
10. © Leaner Technologies, Inc. なんでやれたんだろう？ 10 「だいたいのことは取り返しがつく」