Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Speaker Deck
PRO
Sign in
Sign up for free
Magic Podをもっと活用するために
Nozomi Ito
August 27, 2020
Technology
0
280
Magic Podをもっと活用するために
第1回Magic Podユーザーミートアップ(2020/8/27)の発表資料です。
Nozomi Ito
August 27, 2020
Tweet
Share
More Decks by Nozomi Ito
See All by Nozomi Ito
Magic Podをさらに活用するために
nozomiito
0
380
「Magic Pod」でモバイルアプリのUIテストをもっと簡単に
nozomiito
0
110
AI自動テストツールを支える開発・テストプロセス
nozomiito
0
850
AI自動テストツールとその裏側
nozomiito
0
170
AI自動テストツールMagic Podでテストをもっと簡単に
nozomiito
1
550
MagicPodのご紹介
nozomiito
0
360
Other Decks in Technology
See All in Technology
msal.jsのあれこれ
takas0522
0
1.4k
A Conditional Point Diffusion-Refinement Paradigm for 3D Point Cloud Completion
takmin
0
190
tfcon-2022-cpp
cpp
5
4.7k
GitHub 엔터프라이즈 어카운트 소개 및 엔터프라이즈 서버 구축 경험
posquit0
1
130
Motto Go Forward スライドトップと Goを支える文化とコミュニティ してご利用ください 〜なぜ我々はコミュニティにコントリ ビュートするのか〜
luccafort
0
190
長年運用されてきたモノリシックアプリケーションをコンテナ化しようとするとどんな問題に遭遇するか? / SRE NEXT 2022
nulabinc
PRO
15
7.2k
Salesforce女子部-権限についてまとめてみたその1
sfggjp
0
180
Babylon.jsで3DViewerを作ってみた!!!
iwaken71
0
840
20220510_簡単にできるコスト異常検出(Cost Anomaly Detection) /jaws-ug-asa-cost-anomaly-detection-20220510
emiki
2
310
220428event_ogura_part
caddi_eng
0
180
一人から始めるプロダクトSRE / How to start SRE in a product team, all by yourself
vtryo
4
2.3k
様々な現場のPower Platform ~小さなエンジニアの奮闘記~
hyodol2513
0
1.8k
Featured
See All Featured
The Power of CSS Pseudo Elements
geoffreycrofte
46
3.9k
Typedesign – Prime Four
hannesfritz
33
1.3k
The Invisible Side of Design
smashingmag
289
48k
How to name files
jennybc
39
58k
XXLCSS - How to scale CSS and keep your sanity
sugarenia
236
1M
Rails Girls Zürich Keynote
gr2m
86
12k
Producing Creativity
orderedlist
PRO
333
37k
How To Stay Up To Date on Web Technology
chriscoyier
780
250k
Reflections from 52 weeks, 52 projects
jeffersonlam
337
17k
Product Roadmaps are Hard
iamctodd
34
6.1k
The Invisible Customer
myddelton
110
11k
Designing Dashboards & Data Visualisations in Web Apps
destraynor
224
49k
Transcript
.BHJD1PEΛ ͬͱ׆༻͢ΔͨΊʹ ҏ౻ 53*%&/5$&0
"CPVUNF • ҏ౻ *UP/P[PNJ • גࣜձࣾ53*%&/5දऔక • ʮຊ4FMFOJVNϢʔβʔίϛϡχςΟʯӡӦ •
ஶॻ
53*%&/5ʹ͍ͭͯ ࠷ۙͷ৽ػೳհ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ ΞδΣϯμ
53*%&/5ʹ͍ͭͯ ࠷ۙͷ৽ػೳհ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ
53*%&/5ͷ͜Ε·Ͱ • ݄ ઃཱ - 4FMFOJVNࣗಈςετؔ࿈ͷίϯαϧαϙʔτडୗ։ൃ • ݄ .BHJD1PEαʔϏε։࢝ •
݄ ສԁͷࢿۚௐୡ - ΠϯΩϡϕΠτϑΝϯυ • ݄ ສԁͷՃࢿۚௐୡ - ΠϯΩϡϕΠτϑΝϯυɺϕϦαʔϒ 53*%&/5ʹ͍ͭͯ
.BHJD1PEͷ֤छใ 53*%&/5ʹ͍ͭͯ ఆظηϛφʔ • IUUQTUSJEFOURBDPOOQBTTDPN • ར༻ݕ౼தͷϢʔβʔ͚ 5XJUUFSΞΧϯτ • !53*%&/5*OD
• .BHJD1PEͷ৽ػೳใͳͲ 4MBDLνϟοτϧʔϜ • .BHJD1PEը໘Լ෦ʮνϟοτϧʔϜʯΑΓ • ؾܰʹ࣭Ͱ͖Δ
53*%&/5ʹ͍ͭͯ ࠷ۙͷ৽ػೳհ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ
ศར͚ͩͲؾ͔Εʹ͍͘վળΛ த৺ʹհ ࠷ۙͷ৽ػೳհ
શൠ ࠷ۙͷ৽ػೳհ
ςετέʔεϥϕϧ ݄ • ςετͷཧ͕༰қʹ • ಛఆͷϥϕϧΛࢦఆ আ֎ ͯ͠Ұׅ࣮ߦՄೳʹ ࠷ۙͷ৽ػೳհ શൠ
ը૾ࠩൺֱ ݄ • ΦʔϓϯιʔεͷSFHDMJͱ࿈ܞ • IUUQTCMPHUSJEFOURBDPNSFHDMJNBHJD QPEFF ࠷ۙͷ৽ػೳհ શൠ
ςετ࣮ߦ8FC"1*ͷվળ ݄ ࠷ۙͷ৽ػೳհ શൠ • ςετઃఆ൪߸Λࢦఆͯ͠ςετ࣮ߦՄೳʹ • ઃఆը໘ଆͰϝϯςφϯεͰ͖Δ NBHJDQPEBQJDMJFOUCBUDISVO UPLFO\4&$3&5@"1*@50,&/^
PSHBOJ[BUJPO53*%&/5 QSPKFDU4BNQMF"QQ UFTU@TFUUJOHT@OVNCFS
6*ʮϦετܗࣜʯͷվળ ݄ • 6*ʹ͖ͪΜͱ໊લΛ͚ͭͯཧ͍ͯ͠Δ߹ʹศར ࠷ۙͷ৽ػೳհ શൠ
• ʮΫϥυʯʮ֎෦ΫϥυαʔϏεʯͰར༻Մೳ εέδϡʔϧ࣮ߦ ݄ ࠷ۙͷ৽ػೳհ શൠ
• ςετ࣮ߦதͰը໘Ωϟϓνϟ͕ग़ΔΑ͏ʹ ςετը໘Ωϟϓνϟվળ ݄ ࠷ۙͷ৽ػೳհ શൠ
• ਖ਼نදݱϚον ݄ • ࢛ଇԋࢉ ݄ • ࣌ܭࢉ ݄ •
ίϝϯτɾۭߦ ݄ ֤छίϚϯυͷՃ ࠷ۙͷ৽ػೳհ શൠ
࠷ۙͷ৽ػೳհ ϞόΠϧΞϓϦςετ
• J04γϛϡϨʔλ • "OESPJEΤϛϡϨʔλ
ΫϥυγϛϡϨʔλڧԽ ݄ ࠷ۙͷ৽ػೳհ ϞόΠϧΞϓϦςετ
• ઃఆͷϝϯςφϯε͕.BHJD1PEଆͷը໘ͰՄೳʹ • ֎෦Ϋϥυ࣮ػςετɺΫϩεςετՄೳʹ • IUUQTXXXTMJEFTIBSFOFUIJSPLPUBNBHBXBWFSJGJFE TUFQNBHJDQPE #JUSJTF࿈ܞϦχϡʔΞϧ ݄ ࠷ۙͷ৽ػೳհ
ϞόΠϧΞϓϦςετ テスト設定番号で指定された 実⾏設定を利⽤
࠷ۙͷ৽ػೳհ ϒϥβςετ
• $ISPNF 'JSF'PY &EHF 4BGBSJ *&Λཏ ΫϩεϒϥβରԠ ݄ ࠷ۙͷ৽ػೳհ ϒϥβςετ
• ֎෦Ϋϥυ্ͷ༷ʑͳϒϥβɾ04Λར༻Մೳ • 8FC"1*εέδϡʔϥ͔Β࣮ߦՄೳ 4BVDF-BCT#SPXTFS4UBDL࿈ܞ ݄ ࠷ۙͷ৽ػೳհ ϒϥβςετ SauceLabs BrowserStack
• ϞόΠϧ8FCαΠτͷςετ͕Մೳʹ • σεΫτοϓ$ISPNF্ͷΤϛϡϨʔγϣϯ ϞόΠϧΤϛϡϨʔγϣϯ ݄ ࠷ۙͷ৽ػೳհ ϒϥβςετ
53*%&/5ʹ͍ͭͯ ࠷ۙͷ৽ػೳհ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ
ςετ࡞Λͬͱߴʹ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ
ᶃςετฤूը໘্Ͱૢ࡞ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ ςετ࡞Λͬͱߴʹ • ͱςετฤूը໘Λߦ͖དྷ͢ΔखؒΛݮ • ·ͣϞόΠϧΫϥυ͔Β
ᶄΠϯλϥΫςΟϒςετ࡞ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ ςετ࡞Λͬͱߴʹ • ը໘͔ΒཁૉΛυϥοάυϩοϓͰ͖ΔΑ͏ʹ • ࣗಈه࠶ੜʹ͍ۙײ֮
ᶄΠϯλϥΫςΟϒςετ࡞ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ ςετ࡞Λͬͱߴʹ • औಘࡁΈ6*͔ΒͷυϥοάυϩοϓҾ͖ଓ͖Մೳ • औಘࡁΈ6*ͷࣗಈར༻Ͱ6*ͷ૿େΛࢭ
ᶅΕͨΒΓ͍ͨ͜ͱ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ ςετ࡞Λͬͱߴʹ • ը໘εΩϟϯͷߴԽ - "84ͷ(16͕҆͘ͳͬͨͷͰɺೖͰ͖Δ͔ • Ϋϥυૢ࡞ͷվળ
ͦͷଞ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ • 4MBDL௨ • ͷେখൺֱ • ϒϥβςετελϯμʔυϓϥϯ8FCਃ͠ࠐΈՄೳʹ • 6*ϨΠΞτͷΠϚΠνͳ෦ͷվળ
IUUQTHJUIVCDPN.BHJD1PEKBQBOFTFJTTVFBOE EPDCMPCNBTUFS61$0.*/(@'&"563&4NE ͦͷଞ ࠷ۙͷ৽ػೳհ
53*%&/5ʹ͍ͭͯ ࠷ۙͷ৽ػೳհ ࠓޙͰ༧ఆ͍ͯ͠Δ৽ػೳ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ
ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ ᶃϦϦʔεલखಈςετͷࣗಈԽ ᶄϚϧνϒϥβςετ ᶅ$* ᶆຊ൪ڥࢹ
ᶃϦϦʔεલखಈςετͷࣗಈԽ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ • ݄ճҎ্ͷසͰςετ͢Δ߹ʹɺಛʹ༗ޮ • ͓͢͢ΊͷࣗಈԽ༏ઌॱҐ まずは正常系を カバー 運⽤してみて、 課題を洗い出す
異常系は 正常系のあと
ᶃϦϦʔεલखಈςετͷࣗಈԽ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ • ਖ਼ৗܥςετɺଞʹ৭ʑͳ༻్ʹ͑Δ - αʔόόʔδϣϯΞοϓͷޙͷجຊಈ࡞֬ೝ - Ϋϩεϒϥβςετɺ։ൃɾςετڥͷਖ਼ৗಈ࡞νΣοΫɺ ຊ൪ڥࢹ
ᶄϚϧνϒϥβςετ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ • ʮҰׅ࣮ߦςετʯΛ͞·͟·ͳύλʔϯͰ࣮ࢪ OSバージョン iPhone/iPad ブラウザ種類 ブラウザバージョン OSバージョン メーカー
iOS Android ブラウザ
ᶄϚϧνϒϥβςετ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ • ઃఆ Ϋϥυ֎෦Ϋϥυͷ߹ 並列数 • #JUSJTF8FC"1*͔Βݺͼग़͠Մೳ
ᶄϚϧνϒϥβςετ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ • ઃఆ ϩʔΧϧ1$ɺϞόΠϧΞϓϦςετͷ߹ • NBHJD@QPE@DPOGJHKTPOΛෳ༻ҙ • Ϋϥυͷํ͕खܰ \
lDBQBCJMJUJFTz\ lVEJEzlʜz ^ ʜ֤छϙʔτઃఆʜ ^ \ lDBQBCJMJUJFTz\ lVEJEzlʜz ^ ʜ֤छϙʔτઃఆʜ ^ magic_pod_config.json magic_pod_config.json
ᶅ$* ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ • ຖ൩ςετ࣮ߦ PS։ൃςετڥΛߋ৽͢Δͨͼʹ࣮ߦ • ෆ۩߹ʹ͙͢ʹؾ͚ΔͷͰɺ։ൃ͕ޮతʹ - ͕࣌ؒܦͭͱɺࢥ͍ग़͢ͷ͕େม -
ଟͷ։ൃऀͷमਖ਼͕ೖͬͨޙͩͱɺݪҼಛఆ͕େม • ৗʹΫϦʔϯͳڥͰ։ൃςετ͕Ͱ͖Δ - ࡞ۀޮΞοϓ
ᶅ$* ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ 最新のソースコードをもとに Webサーバを更新 or アプリをビルド Magic PodのWeb APIで テスト実⾏
最新のソースコードをもとに アプリをビルド Magic Podステップで テスト実⾏
ᶅ$* ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ • ςετ͕ଟ͍߹ɺϥϕϧͰ࣮ߦରΛߜΔ • ϒϥβύλʔϯΛར༻ͯ͠ฒྻԽ͢Ε͞Βʹ࣌ؒॖ
ᶆຊ൪ࢹ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ • ༧ظͤ͵ʹΑΓຊ൪ڥͰ͕ى͖͍ͯͳ͍͔ࢹ - ϝϞϦɺσΟεΫɺωοτϫʔΫɺαʔόμϯɺखಈ࡞ۀϛεɺFUD • ຊ൪ڥͱݕূڥͰɺσʔλɾαʔόઃఆɾΠϯϑϥ͕ҟ ͳΔͷͰɺຊ൪Ͱ͚͕ͩى͜Δ͜ͱ͋Δ
ᶆຊ൪ࢹ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ • ઃఆ ֎෦Ϋϥυɺϒϥβςετͷ߹ • 4BVDF-BCT#SPXTFS4UBDL εέδϡʔϧ࣮ߦͰ؆୯ • ՝ɿ࣮ߦ͢Δͨͼʹϝʔϧ௨͕ʜ
ᶆຊ൪ࢹ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ • ઃఆ ֎෦ΫϥυɺϞόΠϧΞϓϦςετͷ߹ • ֎෦Ϋϥυ࣮ػ ຊ൪༻ΞϓϦ εέδϡʔϧͰఆظ࣮ߦ •
৽͍͠ΞϓϦ͕ग़ͨΒɺ.BHJD 1PEʹ࠶Ξοϓϩʔυ
·ͱΊ ᶃϦϦʔεલखಈςετͷࣗಈԽ ᶄϚϧνϒϥβςετ ᶅ$* ᶆຊ൪ڥࢹ ޮՌ͕ग़Δ͓͢͢Ίӡ༻ํ๏બ
.BHJD1PE͕͞Βʹ օ༷ͷ͓ʹཱͯΔΑ͏ Ҿ͖ଓ͖͕ΜΓ·͢ʂ