Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Magic Pod × Bitriseの活用事例 / nohana-case-study
Search
andysumi
February 17, 2021
Technology
0
500
Magic Pod × Bitriseの活用事例 / nohana-case-study
Magic Pod×Bitrise パートナーウェビナー (
https://bitrise-japan.connpass.com/event/203930
) の登壇資料です
andysumi
February 17, 2021
Tweet
Share
More Decks by andysumi
See All by andysumi
Test Management and Utilization of PractiTest at nohana
andysumi
0
290
Other Decks in Technology
See All in Technology
いつの間にか入れ替わってる!?新しいAWS Security Hubとは?
cmusudakeisuke
0
140
american airlines®️ USA Contact Numbers: Complete 2025 Support Guide
supportflight
1
110
第4回Snowflake 金融ユーザー会 Snowflake summit recap
tamaoki
1
300
United Airlines Customer Service– Call 1-833-341-3142 Now!
airhelp
0
170
オフィスビルを監視しよう:フィジカル×デジタルにまたがるSLI/SLO設計と運用の難しさ / Monitoring Office Buildings: The Challenge of Physical-Digital SLI/SLO Design & Operation
bitkey
1
120
アクセスピークを制するオートスケール再設計: 障害を乗り越えKEDAで実現したリソース管理の最適化
myamashii
1
140
american aa airlines®️ USA Contact Numbers: Complete 2025 Support Guide
aaguide
0
390
QuickSight SPICE の効果的な運用戦略~S3 + Athena 構成での実践ノウハウ~/quicksight-spice-s3-athena-best-practices
emiki
0
120
PO初心者が考えた ”POらしさ”
nb_rady
0
220
Enhancing SaaS Product Reliability and Release Velocity through Optimized Testing Approach
ropqa
1
240
United™️ Airlines®️ Customer®️ USA Contact Numbers: Complete 2025 Support Guide
flyunitedguide
0
420
OpenTelemetryセマンティック規約の恩恵とMackerel APMにおける活用例 / SRE NEXT 2025
mackerelio
2
790
Featured
See All Featured
Gamification - CAS2011
davidbonilla
81
5.4k
Side Projects
sachag
455
42k
Fashionably flexible responsive web design (full day workshop)
malarkey
407
66k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
26
2.9k
How to Think Like a Performance Engineer
csswizardry
25
1.7k
Rails Girls Zürich Keynote
gr2m
95
14k
Writing Fast Ruby
sferik
628
62k
Being A Developer After 40
akosma
90
590k
VelocityConf: Rendering Performance Case Studies
addyosmani
332
24k
The Cult of Friendly URLs
andyhume
79
6.5k
Art, The Web, and Tiny UX
lynnandtonic
299
21k
Automating Front-end Workflow
addyosmani
1370
200k
Transcript
Magic Pod × Bitriseの活用事例 2021/02/18 株式会社ノハナ 武田義之 Magic Pod×Bitrise パートナーウェビナー
武田 義之 株式会社ノハナ 品質保証グループマネージャー 2006年に第三者検証会社に入社し、金融や業務システム等のプロ ジェクトで要件定義〜テスト〜運用(開発以外)を経験。 2015年にノハナに入社し、QAチームの立ち上げに尽力し、現在は開 発チームのスクラムマスターも務める。
None
Magic Podの活用事例
機能テスト 変更した機能が正しく動作することを確認 開発プロセスにおけるテスト リリース 開発 機能テスト 回帰テスト 変更により既存機能に不具合がでていな いことを確認 回帰テスト
バグをみつける コストをかけるべき バグがないこと コストをかけたくない けど、かかっている現状😱 Magic Podの活用事例
• 事前準備が必要なテストケース • 事前準備が必要なテストケース ◦ サービスアクティベーション、強制アップデート • 重要な機能 ◦ 新規登録、写真アップロード、注文etc
回帰テストケースの 30% を自動化し、実行時間(手動)を 40% 削減!! ノハナノハナシにも掲載しています 回帰テストの自動化 Magic Podの活用事例
• ノンプログラマーでも簡単にテスト ケースを作成できる • さまざまなコマンドが用意されている • クラウド環境でテストケース作成・実 行できる ◦ 外部クラウド環境で実行すること
も • Bitriseと簡単に連携できる PROS Magic Podの活用事例 CONS(WANT) • ローカル環境の構築でつまづく • OSバージョンによってテスト結果が異 なる • 事前・事後処理を定義できない • (Githubのように) テストケースをバー ジョン管理、レビューしたい • テスト管理ツールと連携したい
Magic Pod × Bitriseの活用事例
• 簡易な動作確認を行ってアプリをアップロード ◦ アプリがテストを開始できる品質になってない可能性 開発 テスト 開発プロセスでの人間の介入 Magic Pod ×
Bitriseの活用事例① テストアプリ アップロード テスト実行 • 人間が回帰テスト(自動テスト)を実行 ◦ 誤ったバージョンのアプリで実行する可能性
• CIで定期的にアプリをビルドして、自動テストを実行 ◦ 一定の品質を担保したアプリを提供可能 ◦ 回帰テストでは、自動化できていないテストケースのみ手動で実施 CIから回帰テストを実行 Magic Pod ×
Bitriseの活用事例① テスト実行 テストアプリ アップロード 開発 & テスト
Dependabot Magic Pod × Bitriseの活用事例② • Androidアプリが依存するライブラリのアップデート検知にDependabotを採用してい る ◦
アップデートを検知すると自動でPull Requestを作ってくれる • ただし、ライブラリアップデートをテキトーにmergeするのも怖い ◦ 破壊的な変更があるかもしれない ◦ ビルドは通ってもアプリ上で正しく動作しない可能性もある • 対象branchを手元でfetchして動作確認するのは大変 ◦ -> 大変なのでやらなくなる ◦ -> 動作確認しないのでPull Requestが溜まる ◦ -> Dependabotを導入した意味が無くなる
Dependabot + bitrise + Magic Podで解決する Magic Pod × Bitriseの活用事例②
• 動作確認まで自動化する ◦ CIで保証する部分だけでなく、実際のアプリの動作まで保証できる • ここまで通れば安心してmergeができる • また、Magic PodのあとにDeployGateなどで配布すれば、全体動作を保証した上 で、不安なところだけ手元でも簡単に検証可能になる
• 本番環境で定期的に自動テストを実行する ◦ テスト結果をSlack等の目につく場所に通知する • 外部サービスの障害等を早急に発見できる ◦ データの扱いが難しい。。。 • バックエンドにさまざまなサービスを使っている
◦ データベース、サーバー、SMS • 外部サービスの障害等により、アプリの動作に影響を及ぼす 本番環境でのテスト実行 Magic Pod × Bitriseによる改善③
• ノンプログラマーでも比較的簡単に ワークフローを作成できる • さまざまなステップが用意されている • 専門知識(アプリ開発、CI他)も必要な ので、開発者の協力が必要 • 実行環境(?)によってテスト結果が一
定ではない PROS Magic Pod × Bitriseの活用事例 CONS
まとめ
• Magic Pod、BitriseともにGUIから操作できるので、ノンプログラマーでも比 較的簡単に進められた • 常に同じテスト結果になるようにテストケース、ワークフローを改善する • 回帰テスト以外にも自動テストの適用範囲を広げることで、人間が手を動 かすべきテストに時間をかけれるように まとめ
ご清聴ありがとうございました