AmebaにおけるQAコスト改善施策〜テスト項目の整理とAutify for Mobileによる自動化

18年続くプロダクトで、莫大になったQAコストにどう向き合って行くのか。
Amebaネイティブチームでの取り組みをご紹介させていただきます。

Transcript

1. 
   $"TXJGU
   
   4PVTIJ
   5BOBLB
   
   (JUIVC
   TPTVJJJJ
   
   5XJUUFS
   4PTTVJ@4XJGU "NFCBʹ͓͚Δ2"ίετ վળࢪࡦ ςετ߲໨ͷ੔ཧͱ"VUJGZ
   GPS
   .PCJMFʹΑΔࣗಈԽ
2. "CPVU
   .F w 4PVTIJ
   5BOBLB
   w ೥
   αΠόʔΤʔδΣϯτ৽ଔೖࣾ
   w "NFCBͷJ04ΤϯδχΞ
   w ౦ژग़਎
   w ํݴΛ΋Β͍΍͍͢ɺೣͷಈըؑ৆͕޷͖
   w Ֆค঱͕ࠅۭ͗ͯ͢ؾਗ਼ড়ػͷ͋ΔՈʹҾ͖᝷Γத
3. ΞδΣϯμ w "NFCBͷ2"
   
   2$
   
   ίετʹ͍ͭͯ
   
   
   
   
   
   2$ʜ2VBMJUZ
   $POUSPM
   w 2$߲໨੔ཧ
   w "VUJGZ
   GPS
   .PCJMFͷಋೖ
   w ·ͱΊ
4. "NFCBͷ2$ίετʹ͍ͭͯ
5. ·ͣ͸2$ϑϩʔʹ͍ͭͯ੔ཧ
6. λεΫ؅ཧπʔϧʮ"TBOBʯʹͯɺ
   ςετ؍఺Λهࡌͷ͏͑ʮ2$ΞϦʯΛબ୒ 2$νʔϜ͸ɺʮ2$ΞϦʯͷ"TBOBνέοτΛ֬ೝ͠
   ςετ߲໨
   Λ࡞੒ ΤϯδχΞਞ͸্هͰ࡞੒͞Εͨςετ߲໨ΛϨϏϡʔ 2$νʔϜ͸ɺϨϏϡʔΛड͚ͨςετ߲໨ΛݩʹςετΛߦ͏
   ࠓ·Ͱߦ͖ͬͯͨςετ طଘςετ ͷ༏ઌ౓4 NBY ߲໨΋ςετ͢Δ ্هͱ͸ผͷαΠΫϧͰɺ༏ઌ౓"
   #ͷ߲໨Λςετ
7. ՝୊͕ݟ͖͑ͯͨͷ͸ɺ࣍ͷϑϩʔ
8. λεΫ؅ཧπʔϧʮ"TBOBʯʹͯɺ
   ςετ؍఺Λهࡌͷ͏͑ʮ2$ΞϦʯΛબ୒ 2$νʔϜ͸ɺʮ2$ΞϦʯͷ"TBOBνέοτΛ֬ೝ͠
   ςετ߲໨
   Λ࡞੒ ΤϯδχΞਞ͸্هͰ࡞੒͞Εͨςετ߲໨ΛϨϏϡʔ 2$νʔϜ͸ɺϨϏϡʔΛड͚ͨςετ߲໨ΛݩʹςετΛߦ͏
   ্هͱ͸ผͷαΠΫϧͰɺ༏ઌ౓"
   #ͷ߲໨Λςετ ࠓ·Ͱߦ͖ͬͯͨςετ طଘςετ ͷ༏ઌ౓4 NBY ߲໨΋ςετ͢Δ
9. ςετ߲໨ͷཻ౓͸ʁ
10. ςετ߲໨ͷཻ౓ ྫ ςετ߲໨ େ߲໨
    ىಈ࣌ த߲໨ 
 ϩάΠϯ খ߲໨ (PPHMF ςετ߲໨ খ߲໨ *OTUBHSBN ςετ߲໨ খ߲໨ 5XJUUFS ςετ߲໨ த߲໨
    ձһొ࿥ খ߲໨ (PPHMF ςετ߲໨ খ߲໨ *OTUBHSBN ςετ߲໨ খ߲໨ 5XJUUFS
11. طଘςετͷ߲໨਺Λࢉग़
12. 4͚ͩͰ΋ΊͪΌΊͪΌଟ͍ ༏ઌ౓ 4 " # جຊػೳ    ϗʔϜ    ອը    ݟ͚ͭΔ໘    هࣄ໘    ϑΥϩʔ໘    "NFCBαʔϏεҰཡ    ϒϩά؅ཧ    ΤσΟλ    ߹ܭ    ˞4ʜִिͰ࣮ࢪ
13. 2$νʔϜ͕ఆٛͨ͠༏ઌ౓Λɺ
    ΤϯδχΞαΠυͰ࠶ఆٛ͠Α͏
14. 2$߲໨ͷ੔ཧ
15. 4 "NFCBΞϓϦʹ͓͍ͯඞཁෆՄܽͳػೳɻίΞػೳɻ " ִिɾ݄Ͱͷ֬ೝɻओཁػೳ͕ͩɺͳͯ͘΋ϒϩάͷಡΈॻ͖͸Ͱ͖Δɻ # 2ʹ̍౓ͷ֬ೝɻαϒػೳ "S طଘςετ͔Β͸֎͢ɻه࿥ͱͯ͠࢒͓ͯ͘͠༻ɻ ײ֮஋ͰৼΓ෼͚͍ͯͨ༏ઌ౓Λ࠶ఆٛ
16. ༏ઌ౓ 4 " # جຊػೳ    ϗʔϜ    ອը    ݟ͚ͭΔ໘    هࣄ໘    ϑΥϩʔ໘    "NFCBαʔϏεҰཡ    ϒϩά؅ཧ    ΤσΟλ    ߹ܭ    ༏ઌ౓ 4 " # جຊػೳ    ϗʔϜ XJQ    ອը    ݟ͚ͭΔ໘ XJQ    هࣄ໘ XJQ    ϑΥϩʔ໘ XJQ    "NFCBαʔϏεҰཡ    ϒϩά؅ཧ    ΤσΟλ    ߹ܭ    ߲໨੔ཧલ ߲໨੔ཧޙ XJQ 
    
    
    
    
    
    
17. 4߲໨ʹ͍ͭͯ͸େ෼ճͤΔΑ͏ʹͳͬͨ J04͸·ͩల։લͳͷͰɺઌߦ͍ͯ͠Δ"OESPJEΛࢀߟʹ͢Δͱɻɻ શମͷ߲໨਺͸มԽ͕গͳ͍͕ɺ4߲໨͕ճͤΔΑ͏ʹͳͬͨ͜ͱͰ
    2$%'ͷ͏ͪ
    2 2VBMJUZ ͕վળ͞Εͨͱ͍͑Δ ݁Ռ
18. ͨͩɻɻɻ
19. શମͷ߲໨਺͸ґવͱͯ͠ଟ͍ͷͰɺ
    2$ʹґଘ͍ͯ͠Δςετ߲໨ΛࣗಈԽ͍ͨ͠ ՝୊
20. "VUJGZ
    GPS
    .PCJMFͷಋೖ
21. "VUJGZ
    GPS
    .PCJMF
    ͱ͸ w ϦάϨογϣϯςετͷࣗಈԽ
    w ૢ࡞Λه࿥͢Δ͜ͱͰɺ؆୯ʹςετͷ࣮ߦ͕Ͱ͖Δ
    w ϊʔίʔυ
    w ؀ڥม਺͕ઃఆՄೳ
    w ը૾ೝࣝʹΑͬͯɺϏδϡΞϧϦάϨογϣϯςετ͕Մೳ
22. γϛϡϨʔλΛૢ࡞͠ɺςετϑϩʔΛه࿥Ͱ͖Δ ૢ࡞͝ͱʹ
    ه࿥
23. ಋೖ͢Δ໨త͸ʁ
24. खಈςετΛݮΒ͠ɺ
    গͳ͍ίετͰఆৗతʹ඼࣭Λ୲อ͢Δ͜ͱ "VUJGZͷ೥ؒίετ
    
    ࢼݧ࡞੒ίετ
    
    2$ͷϦάϨογϣϯ֬ೝίετ
    ίετͷ૯ྔ͸૿͑Δ͕ʜ
25. ಋೖʹ͓͚Δ஫ҙࣄ߲
26. ؀ڥม਺Λ༻͍ͯɺΞϓϦ؀ڥΛݻఆ͢Δඞཁ͕͋Δ ϑϥάʹΑͬͯϙοϓΞοϓ͕ग़ͨΓग़ͳ͔ͬͨΓ
    νϡʔτϦΞϧ͕ग़ͨΓग़ͳ͔ͬͨΓ
    มߋՄೳੑͷ͋Δ؀ڥ͸ɺࣗಈςετͷࣦഊΛট͘ ˞αʔόʔଆͰݻఆ͞Εͨ؀ڥΛ࡞Γɺ&&ςετΛ͢Δͷ͕ཧ૝͕ͩɺ
    ίετΛߟྀͯ͠؀ڥม਺º"1*4UVCͰਐΊΔ͜ͱʹͨ͠
27. ؀ڥม਺ͷ௥Ճ
28. "VUJGZ
    GPS
    .PCJMF
    ʹ؀ڥม਺Λ௥Ճ IUUQTIFMQBVUJGZDPNNPCJMFEPDTKBFOWJSPONFOUWBSJBCMFT
29. "VUJGZ
    GPS
    .PCJMF
    ʹ؀ڥม਺Λ௥Ճ IUUQTIFMQBVUJGZDPNNPCJMFEPDTKBFOWJSPONFOUWBSJBCMFT
30. IUUQTIFMQBVUJGZDPNNPCJMFEPDTKBFOWJSPONFOUWBSJBCMFT ؀ڥม਺Λ௥Ճ͢Δʹ͸࣍ͷίʔυΛ௥Ճ 9DPEF
    ʹ؀ڥม਺Λ௥Ճ
31. ಋೖͯ͠Έͯͷॴײ
32. w Ұ෦ͷૢ࡞ʹؔͯ͠͸γφϦΦ࡞੒͕׬ྃ͠ɺఆظςετ͕Ͱ͖͍ͯΔ
    w ؀ڥม਺͸ը໘͝ͱ΍ػೳ͝ͱͳͲͰ෼͚ͨํ͕΍Γ΍͍͢
    w ؀ڥΛݻఆ͢ΔͨΊͷ"1*4UVC࣮૷ίετ͕͔͔Δ
    w "1*4UVCؚΊɺ؀ڥͷ४උ͕Ͱ͖Ε͹γφϦΦΛ૊Ήͷ͸ίʔυϕʔεʹൺ΂ͯͣͬͱ؆୯
    w ϏδϡΞϧϦάϨογϣϯςετͷͨΊͷը૾ೝࣝਫ਼౓͸͜Ε͔Βʹظ଴
    w ҟৗܥͷखಈςετ͸ਖ਼ৗܥΑΓ΋େมͳͷͰɺࣗಈԽʹظ଴
33. ·ͱΊ
34. w ςετ߲໨ͷ༏ઌ౓͸ೝࣝΛ߹Θ͓ͤͯ͘΂͖
    w "VUJGZʹΑΔςετ࡞੒͸ɺίʔυͰ6*5FTUΛॻ͘ΑΓͣͬͱ؆୯
    w 6OJU5FTUΛαϘΔ΄Ͳ2$ίετ͕૿େ͍͖ͯ͠ɺճΒͳ͘ͳΔ
    w 6OJU5FTUΛॻ͖΍͍͢ϓϩμΫτʹ͢ΔͨΊʹ΋ɺ 
 ઃܭ΍ςετ؀ڥͷ੔උ͸ͱͯ΋େࣄ