CircleCIでE2Eテスト自動化プラットフォームAutifyの E2Eテストをしているお話 オーティファイ株式会社 松浦隼人

自己紹介 自己紹介 松浦 隼人 ● オーティファイ株式会社 ● CTO ● バックエンドエンジニア ● Twitter : dblmkt ● 趣味 : 翻訳

エンドツーエンド(E2E)テスト、 してますか？

E2Eテストはハードルが高い？ E2Eテストはハードルが高い？ ● 手でやるのは工数がかかる ● シナリオ作る・書くの大変 ● 実行するの大変 ● 作った後も大変

E2Eテストはハードルが高い？ - Autifyを使えば E2Eテストはハードルが高い？ - Autifyを使えば ● 手でやるのは工数がかかる ○ 自動化しましょう！ ● シナリオ作る・書くの大変 ○ テストシナリオ作成が簡単 ● 実行するの大変 ○ 複数のブラウザでテスト実行 ● 作った後も大変 ○ AIの力でシナリオ修正を支援

AutifyのE2Eテストは？

もちろんAutifyでやってます！

開発フロー 開発フロー Feature develop master (main) Feature Feature 本番環境 ステージング環境

開発フロー 開発フロー Feature develop master (main) Feature Feature 本番環境 ステージング環境

開発フロー 開発フロー Feature develop master (main) Feature Feature 本番環境 ステージング環境

CircleCIのジョブ構成 CircleCIのジョブ構成 ユニットテスト実行 ステージングへ デプロイ E2Eテスト実行

E2Eテストはハードルが高い？ CircleCIでAutifyをAutifyする ● ステージングにデプロイ(developへの マージ)時にAutifyをAutify ● 実行開始時にSlackに通知

E2Eテストはハードルが高い？ CircleCI + Autifyでテストすることの利点 ● ユニットテストによる機能の確認だけでなく、ユーザの視点で不具合がないかがわかる ○ ステージングで動いたことを証明した上で本番にデプロイできる ○ どのプルリクエストがどのような不具合を出したのかすぐにわかる

E2Eテストはハードルが高い？ CircleCIでAutifyをAutifyする - 効果 期待される結果 実際の結果(失敗)

E2Eテストはハードルが高い？ 注意点 ● シナリオを複雑にしすぎない ○ 実行に時間がかかる → フローを止めてしまう ○ シンプルなシナリオを複数実行 ○ 複雑・長いシナリオは別に定期的に実行するなど

E2Eテストはハードルが高い？ 将来の夢 ● ユニットテストと同じ頻度(プッシュごと)でE2Eテストしたい ○ featureブランチごとにQA環境を立てる(整備中) ● CircleCI Orb ● GitHub App

No content