MagicPodで実現するE2Eテスト自動化

by Nozomi Ito

Slide 1

Slide 1 text

MagicPodで実現する E2Eテスト⾃動化 2023.9.12

Slide 2

Slide 2 text

About me • 伊藤望 (Ito Nozomi) • MagicPod CEO • ⾃動テストツール歴：約13年 • Seleniumコミュニティ主宰 • Twitter：@ito_nozomi

Slide 3

Slide 3 text

1. MagicPodの紹介 2. MagicPodが実現したいこと 3. MagicPod的ベストプラクティス 4. 各種機能紹介 Agenda

Slide 4

Slide 4 text

1. MagicPodの紹介 2. MagicPodが実現したいこと 3. MagicPod的ベストプラクティス 4. 各種機能紹介

Slide 5

Slide 5 text

MagicPod §Web & モバイルアプリのE2Eテスト⾃動化SasS §ノーコードで簡単にテスト作成 §柔軟性とメンテナンス性が強み (magicpod.com) 1. MagicPodの紹介

Slide 6

Slide 6 text

エキスパートが作ったテストツール著者翻訳者コミッター 1. MagicPodの紹介

Slide 7

Slide 7 text

ご利⽤ユーザー様 https://magicpod.com/customer-stories/ 1. MagicPodの紹介

Slide 8

Slide 8 text

Demo 1. MagicPodの紹介

Slide 9

Slide 9 text

Webサイトテスト https://www.youtube.com/watch?v=p1lHiyj2dms 1. MagicPodの紹介 - Demo

Slide 10

Slide 10 text

モバイルアプリテスト https://www.youtube.com/watch?v=UQsw-q702PY 1. MagicPodの紹介 - Demo

Slide 11

Slide 11 text

1. MagicPodの紹介 2. MagicPodが実現したいこと 3. MagicPod的ベストプラクティス 4. 各種機能紹介

Slide 12

Slide 12 text

1. 開発⽣産性向上に寄与 2. MagicPodが実現したいこと • 毎⽇テスト、常にテスト • 問題の早期検出で⽣産性が向上開発期間 😁 リリース

Slide 13

Slide 13 text

2. 継続的デリバリーの実現を⽀援 2. MagicPodが実現したいこと • 1⽇何回も、好きなタイミングで変更を本番環境にデプロイ • あらゆるレベルのテストを⾃動化する必要がある本番デプロイ本番デプロイ本番デプロイ本番デプロイ

Slide 14

Slide 14 text

Daily Test/Deployを実現したユーザーが増えている 2. MagicPodが実現したいこと

Slide 15

Slide 15 text

2. MagicPodが実現したいこと

Slide 16

Slide 16 text

2. MagicPodが実現したいこと家族アルバムみてねの安定リリースを⽀えるMagicPod活⽤状況

Slide 17

Slide 17 text

2. MagicPodが実現したいこと『スタディサプリ中学講座』における E2E Test の運⽤と計測による改善

Slide 18

Slide 18 text

2. MagicPodが実現したいこと⾼い開発⽣産性を実現するために取り組んだMagicPodの利活⽤

Slide 19

Slide 19 text

1. MagicPodの紹介 2. MagicPodが実現したいこと 3. MagicPod的ベストプラクティス 4. 各種機能紹介

Slide 20

Slide 20 text

テストは毎⽇⾃動実⾏ 3. MagicPod的ベストプラクティス • 最新のソースコードを毎⽇ビルド‧デプロイし、テストを実⾏ • ⼿動だと、担当者‧体制が変わった際に実施されなくなりがち • リリース直前だけ実⾏だと、問題が起きた時に時間がなくて放置しがち • 毎⽇の変更を随時反映していく⽅がメンテナンス難易度が低い

Slide 21

Slide 21 text

テストはクラウドで実⾏ 3. MagicPod的ベストプラクティス • MagicPodクラウド、BrowserStack、SauceLabsのいずれか • ローカルPCだと、トラブルでテスト実⾏に時間がかかり、⼼理的ハードルが⾼くなる - モバイル実機の接続トラブル - MagicPodDesktopバージョンアップのトラブル - マシン環境トラブル

Slide 22

Slide 22 text

優先順位をつけて⾃動化する 3. MagicPod的ベストプラクティス • 早めに何らかの成果を得ることが、⾃動化定着の近道 • 優先順位をつけて⾃動化することが⼤切まずは正常系をカバー運⽤してみて、課題を洗い出す異常系は正常系のあと

Slide 23

Slide 23 text

テスト間の依存関係を減らす 3. MagicPod的ベストプラクティス • 分かりにくいエラーが減る • 失敗切り分けの難易度が下がる • 実現しやすいよう、MagicPod側も改善していきたい

Slide 24

Slide 24 text

共有ステップを積極的に使う 3. MagicPod的ベストプラクティス • 画⾯が⼤きく変わった時のメンテナンスが楽 • ⾃動修復は(現状)あらゆるケースに有効ではない

Slide 25

Slide 25 text

ロケーターについて学ぶ 3. MagicPod的ベストプラクティス • ロケーター編集できると、画⾯変更により強いテストが作れる • ⽂法について学べるコンテンツ - https://speakerdeck.com/nozomiito/roketawoxue-ndetesutozi- dong-hua-shang-ji-zhe-womu-zhi-sou - https://qiita.com/rllllho/items/cb1187cec0fb17fc650a - http://blog.bangboo.com/sub/xpath.html

Slide 26

Slide 26 text

テストしやすいアプリケーションにする 3. MagicPod的ベストプラクティス • 変わりにくいユニークIDをUI要素に付与する • テスト環境では⾃動テストしやすい設定にする - WebViewデバッグ有効化 - ⾃動化しにくい機能を迂回する⽅法を⽤意 • データを取得‧操作できるWeb APIを⽤意 - データのクリア - 初期データのセットアップ - 内部IDの取得

Slide 27

Slide 27 text

1. MagicPodの紹介 2. MagicPodが実現したいこと 3. MagicPod的ベストプラクティス 4. 各種機能紹介

Slide 28

Slide 28 text

クロスブラウザ‧マルチ端末 4. 各種機能紹介 • 作ったテストをさまざまなブラウザ‧端末で実⾏ • 並列実⾏もサポート

Slide 29

Slide 29 text

Visual Regression Test 4. 各種機能紹介 • 画⾯キャプチャが期待値と⼀致するかチェック • デザイン崩れバグなどの検出が可能

Slide 30

Slide 30 text

UI変更があった場合のテスト⾃動修復 4. 各種機能紹介

Slide 31

Slide 31 text

CI連携 4. 各種機能紹介 • Jenkins、GitHub Actions、 CircleCI、 Bitriseほか

Slide 32

Slide 32 text

各種メンテナンス⽀援機能 4. 各種機能紹介 UI定義共有共有ステップデータ駆動テスト変数条件分岐履歴管理

Slide 33

Slide 33 text

さまざまなコマンド 4. 各種機能紹介

Slide 34

Slide 34 text

値チェック 4. 各種機能紹介 ‒ さまざまなコマンド • 様々な条件で期待値チェック

Slide 35

Slide 35 text

各種ブラウザ操作 4. 各種機能紹介 ‒ さまざまなコマンド

Slide 36

Slide 36 text

各種モバイル端末操作 4. 各種機能紹介 ‒ さまざまなコマンド

Slide 37

Slide 37 text

各種モバイル端末操作 4. 各種機能紹介 ‒ さまざまなコマンド画像アップロードフリーハンド図形描画端末回転スワイプ

Slide 38

Slide 38 text

各種モバイル端末設定 4. 各種機能紹介 ‒ さまざまなコマンド地域タイムゾーン位置情報⾔語

Slide 39

Slide 39 text

各種ユーティリティコマンド 4. 各種機能紹介 ‒ さまざまなコマンド数値⽐較 2段階認証突破正規表現四則演算

Slide 40

Slide 40 text

⽇付計算コマンド 4. 各種機能紹介 ‒ さまざまなコマンド • 「明⽇の⽇付を⼊⼒」などの⽤途に

Slide 41

Slide 41 text

HTTPリクエスト送信 4. 各種機能紹介 ‒ さまざまなコマンド • DBの値チェックやデータクリアなどに

Slide 42

Slide 42 text

無料トライアルも可能です！