Macインスタンスを活用したアプリE2Eテストの実現

by coconala_engineer

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Slide 6

Slide 6 text

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

Copyright coconala Inc. All Rights Reserved. 今後はどうなっていく予測になるか？ 9 自動化による範囲が大きくなればなるほど、効率化が大事前述の通り、もともとは手動テストで何とかなっていたものの、プロダクトの成長により、手段としての自動テストの効果が大きくなる構図となった。このような状況をふまえて、ココナラではアプリのE2Eテスト自動化に大きく舵を切っていくこととなった。

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Copyright coconala Inc. All Rights Reserved. アプリE2Eテストの処理の流れ 12 さまざまなものをインテグレートして、実現している 1. Slack上でデバイス、テスト内容などを入力。入力後、AWS Chatbotが起動し、AWS Lambdaを呼び出す。 2. AWS LambdaがExpressにリクエストを送信。 3. Expressがテスト制御プロセスを起動し、メッセージを送信。 4. テスト制御プロセスがアプリをビルドし、デバイスやAppium を起動。テストランナーであるJestを実行。 5. テスト状況がSlack、ReportPortalにレポートされる。

Slide 13

Slide 13 text

Copyright coconala Inc. All Rights Reserved. 採用した技術 13 役割採用したもの採用理由オートメーション Appium Detoxと比較し、アプリの対応度合い・相性が良かった。 WebdriverIO Appiumのクライアントで使用。テストランナー Jest 拡張性を重視。テスト言語 TypeScript テストの書きやすさを重視。テスト結果可視化 ReportPortal Allureと比較し、大量のテスト結果可視化に優れていた。テストサーバー Amazon EC2 mac2 各種CIサービスと比較し、コストパフォーマンスに優れていた。

Slide 14

Slide 14 text

Copyright coconala Inc. All Rights Reserved. アプリE2Eテストの内容 14 リリース前に手動で行っていたテストの約 85%を自動化 ● たとえば、以下のテストを自動化。 ○ メールで会員登録できること ○ Googleで会員登録できること ○ ログインできること ○ サービスが出品できること ○ サービスをクレジットカードで購入できること ○ サービスをポイントで購入できること

Slide 15

Slide 15 text

Slide 16

Slide 16 text

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

Slide 22

Slide 22 text

Slide 23

Slide 23 text

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

Slide 30

Slide 30 text

Fin

Slide 31

Slide 31 text

Slide 32

Slide 32 text

Copyright coconala Inc. All Rights Reserved. 参考資料 32 ● E2Eテストに関する記事 ○ Android / iOSアプリのE2Eテスト全部で250シナリオを自動化しました！第1回全体像 ○ Android / iOSアプリのE2Eテスト自動化の運用保守で日々格闘しているお話 ○ WebのE2Eテスト自動化〜ツール選定編〜 ● E2Eテストに関する登壇資料 ○ WebのE2Eテスト自動化〜導入から運用・評価までの道のり編〜 - Speaker Deck