Autifyは簡単に自動テストを作れるのか / Can Autify easily create automated tests

Transcript

1. Autifyは簡単に自動テストを作れるのか
 2022/9/29 Masafumi Nishiwaki

2. 目次
 • はじめに
 • テーマ
 • Autifyの利用事例
 • Autifyで簡単に作れる自動テストとは？
 • シナリオに含まれるJSステップの割合
 • 補足事項
 ◦ シナリオの実装概要 
 ◦ よく使ったJSステップ3選 
 ◦ シナリオの実行時間 
 • 最後に

3. はじめに
 • 本資料はAutifyの使い方に関する内容は含まれていません
 
 • 紹介する事例における仮定・実績は、他のプロダクトに当てはまらない場合があり ますのでご了承ください

4. テーマ
 　 皆さん自動テストの経験はありますか？
 Autifyで自動テストを作った事例を紹介します
 * Autify. Autify(オーティファイ), AIを用いたソフトウェアテスト自動化プラットフォーム - Autify(オーティファイ). https://autify.com/ja/, (参照2022-09-28)

5. Autifyの利用事例
 • サービス概要
 ◦ HRTech企業様のダイレクトリクルーティングサービス 
 ◦ 複数のプロダクトによりサービスが構成されている 
 
 • 自動テスト概要
 ◦ Webの全画面が正常に表示されているか確認するテスト 
 ◦ 2022年にSeleniumからAutifyへ移行 

6. Autifyで簡単に作れる自動テストとは？
 今回はシナリオに含まれるJSステップの割合が少ないものと仮定し、
 割合ごとの難易度を設定しました ※1
 
 
 
 
 
 
 ※1:JSステップはAutifyのシナリオ内でユーザーが任意のJavaScriptを記述できる機能となります 
 ※2:割合の区分は後述するシナリオの実装状況を元に発表者が独自に設定したものとなります 
 ※3:割合が5%以上あるいは課題の解決が難しい場合、自動テスト対象の見直しが必要になるかもしれません 
 JSステップの割合 ※2
 難易度
 0%～1%
 【初級】完全試合😎
 1%～2.5%
 【中級】大きな問題なくできた😃
 2.5%～5%
 【上級】少し苦労した😓
 5%～
 【チャレンジ】簡単に作れるはずでは😭 ※3

7. シナリオに含まれるJSステップの割合
 一部のJSステップが5%に近いですが、全体では2%未満に収まっています
 複雑なシナリオを必要としないため、殆どがレコーディングで実装できました プロダクト
 シナリオ
 ステップ
 JSステップ
 割合
 Red
 22
 862
 8
 0.93%
 Red-SP
 20
 662
 7
 1.06%
 Blue
 28
 575
 5
 0.87%
 Yellow
 8
 440
 5
 1.14%
 Yellow-SP
 8
 456
 7
 1.54%
 Orange
 5
 249
 12
 4.82%
 Total
 91
 3244
 44
 1.36%

8. 補足事項:シナリオの実装概要
 • 工数
 ◦ 1画面のレコーディングは1～5分で見積もり 
 ※JSステップの実装時間は別途計上 
 
 • シナリオの分け方
 ◦ 運用とメンテナンス性を考慮し、機能単位でシナリオを実装 
 ◦ 1シナリオのステップ数は150前後に収めた 
 ※200ステップ以上はAutifyサポート外となる可能性があるため 
 
 • 実装内容
 ◦ 画面遷移とアサーション（画面を判別できる見出しなどの比較処理）が中心 
 ◦ ログイン処理などはステップグループを使い共通化 

9. 補足事項:よく使ったJSステップ3選
 全てAutify JavaScript Snippetsで提供されているコードを流用しています
 ※JSステップで実現したい処理によってはコードを流用できない場合があります 
 ブラウザのページを戻る
 window.history.back();
 表の先頭行となる要素をクリック
 document.querySelector("content tbody tr").click();
 ポップアップ要素が存在する場合、ポップアップの閉じるリンクをクリック
 var pu = document.querySelector("div.pu-widget__content");
 if(pu){ 
 document.querySelector(".pu-close").click(); 
 }

10. 補足事項:シナリオの実行時間
 Autifyの並列実行により、実行時間が従来の約1/3まで短縮されました👍

11. 最後に
 今回の事例では比較的簡単に自動テストを作ることができました
 
 Autifyは自動テスト未経験者の不安を払拭してくれる、経験者は実装や運用がより便利 になる良いツールだと感じました
 
 有料ツールですので、利用機会に恵まれた方は積極的に触ってみることをお勧めしま す！