Upgrade to Pro — share decks privately, control downloads, hide ads and more …

メルカリにおける分析環境整備の取り組み

nagai shinya
August 19, 2020
7k

 メルカリにおける分析環境整備の取り組み

以下のイベントの発表資料です。

https://forkwell.connpass.com/event/182769/

nagai shinya

August 19, 2020
Tweet

Transcript

  1. 3 ! ӬҪ ৳໻ ! גࣜձࣾϝϧΧϦ / JP ! Data

    Analyst ◦ ෼ੳ؀ڥͷ੔උͳͲΛ୲౰ ࣗݾ঺հ
  2. 4 ! ݱঢ় ◦ ͳͥվળʹऔΓ૊Ήͷ͔?
 ! ͋Γ͍ͨ࢟ ◦ վળͷαΠΫϧΛճ͍ͨ͠ɻ !

    औΓ૊Έ ◦ ϨΨγʔͳσʔληοτΛഇࢭ͢Δɻ ◦ ͦͷͨΊʹɺۀ຿ͱKPIͱج൫ΛηοτͰߟ͑Δɻ ΞδΣϯμ : ϝϧΧϦʹ͓͚Δ෼ੳ؀ڥͷ੔උͷࣄྫ
  3. 6 ! ج൫ ◦ BigQuery + Looker ! ن໛ ◦

    ΫΤϦ࣮ߦϢʔβʔ਺ 700ਓҎ্/݄ ◦ ࢀর͞Ε͍ͯΔςʔϒϧ਺ 100Ҏ্/݄ ◦ Analyst, PdM, ML, CS, ͳͲ ϝϧΧϦʹ͓͚Δσʔλͷར༻ঢ়گ
  4. 11 ΍Γ͍ͨ͜ͱ → վળͷαΠΫϧΛճ͢ ᶃ վળʹऔΓ૊Ή ᶄ ݱঢ়ҡ͕࣋ ͪΐͬͱָʹͳΔ ᶅ

    վળʹ࢖͑Δ ͕࣌ؒ૿͑Δ ᶆ े෼ͳ༨༟͕Ͱ͖Ε͹ ɹ ɹ ߈Ίͷվળ΋Ͱ͖Δ
  5. 12 ΍Γ͍ͨ͜ͱ → վળͷαΠΫϧΛճ͢ ᶃ վળʹऔΓ૊Ή ᶄ ݱঢ়ҡ͕࣋ ͪΐͬͱָʹͳΔ ᶅ

    վળʹ࢖͑Δ ͕࣌ؒ૿͑Δ ᶆ े෼ͳ༨༟͕Ͱ͖Ε͹ ɹ ɹ ߈Ίͷվળ΋Ͱ͖Δ ࠓɺऔΓ૊ΜͰ͍Δͷ͸͜͜
  6. 15 ৽pipeline΁ͷยد ݩςʔϒϧ ෼ੳςʔϒϧ(৽) ෼ੳςʔϒϧ(ϨΨγʔ) BigQuery Production ňϨΨγʔpipelineΛഇࢭ
 ৽pipelineʹยد͍ͤͨ͠ʼn
 


    ͔͠͠ɺϨΨγʔ͔Βܭࢉ͍ͯ͠ ΔKPIΛ࢖͍ͬͯΔνʔϜ͕͋Δɻ
 
 ϨΨγʔͳpipelineͷॲཧΛ৽ pipelineͰ࠶ݱ͠Α͏ͱ͍͕ͯͨ͠ ׬੒ग़དྷͳ͔ͬͨɻ
  7. 22 ! ݱঢ় ◦ ͳͥվળʹऔΓ૊Ήͷ͔? → ੜ࢈ੑͷվળʹܨ͕Δ ! ͋Γ͍ͨ࢟ ◦

    վળͷαΠΫϧΛճ͍ͨ͠ → ࣌ؒͷ࠶౤ࢿΛଓ͚Δ ! औΓ૊Έ ◦ ϨΨγʔͳσʔληοτΛഇࢭ͢Δɻ ◦ ͦͷͨΊʹɺۀ຿ͱKPIͱج൫ΛηοτͰߟ͑Δɻ ·ͱΊ : ϝϧΧϦʹ͓͚Δ෼ੳ؀ڥͷ੔උͷࣄྫ