自動テストを社内へ浸透させた話

by Yasufumi Kiyosaki

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Slide 6

Slide 6 text

© RecoChoku Co.,Ltd. Proprietary and Confidential Android/iOSアプリの自動テスト本導入 • 繰り返し実施が見込まれるプロダクトに対して、導入効果は得られる • ツールの使い勝手や安定性が高く、実行スピードも申し分ない目的効果効率アップ自動テストは同時並列実行も可能であるため、検証時の試算よりも数倍の実行スピードは得られるコスト面手動テストよりも初期コストはかかるが、その後のテスト実行コストは小さくなっていくカバレッジ増加繰り返し実施可能人的リソースを気にせずテストカバレッジ維持してリスク軽減することが実現できる MagicPodを採用した理由（PoCの評価）

Slide 7

Slide 7 text

© RecoChoku Co.,Ltd. Proprietary and Confidential スプリント後半の回帰テスト負荷軽減を実現 • 実⾏速度同じ内容のテストをAndroid OS7バージョンを⾃動と⼿動で実⾏した場合の実⾏⼯数の⽐較は・・・⼿動で約 40⼈⽇かかる作業が⾃動では 2⼈⽇で実施完了 31 31 4 40 2 0 10 20 30 40 50 60 70 80 ⼿動テスト⾃動テスト⾃動テストと⼿動テスト⽐較（⼯数/⼈⽇）テスト設計⾃動テスト実装テスト実⾏設計工数は自動と手動で共通であるため同じ工数を積み上げ人日

Slide 8

Slide 8 text

Slide 9

Slide 9 text

© RecoChoku Co.,Ltd. Proprietary and Confidential スクラム開発と並走 • 開発と並走してテスト設計とテスト実装を繰り返す – スプリントで追加される機能は手動でテスト – Doneした機能を作成済みのテストケースへ差分として修正／積み重ねる Dev QA スプリント１スプリント2 スプリント5 スプリント１テスト設計スプリント2 テスト設計スプリント5 テスト設計スプリント1 自動テスト実装スプリント1 手動テスト実施スプリント2 手動テスト実施スプリント4 自動テスト実装スプリント5 テスト実施・・・リリース候補自動テスト探索的テスト・・・・・・・・・某スクラム開発のテストサイクル

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

© RecoChoku Co.,Ltd. Proprietary and Confidential 省察手動テスト自動テストその他 • どこまでの範囲を自動テストするか手動テストするか曖昧であった。（HWの物理的な操作を伴うものや楽曲・動画再生の妥当性など） • 物理的な操作や使用性などは人的に行う必要がある、適切に手段を使い分けバランス良くテストしよう！機能テスト（エンハンス機能）探索的テスト E2Eテスト／リグレッション移植性エッジケース UXリサーチ

Slide 15

Slide 15 text

© RecoChoku Co.,Ltd. Proprietary and Confidential まとめ • アプリ自動テストの導入クラウドサービスを採用して効率の向上、コスト面、カバレッジの増加をクリアできた。 • スクラム開発と並走スプリントで追加される機能は手動でテストしてDoneの判断を行った上で自動テストケースへ差分として修正／積み重ねる。 • 自動テストの範囲と手動テストの範囲どこまでの範囲を自動テストするか手動テストするか？物理的な操作や外部品質などは人的に行う必要がある。