Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Speaker Deck
PRO
Sign in
Sign up for free
モバイルE2Eテストを継続・改善させるために取り組むKarakuri
Tadashi Nemoto
August 28, 2018
1
860
モバイルE2Eテストを継続・改善させるために取り組むKarakuri
Test Engineers Meetup #3
https://test-engineers-meetup.connpass.com/event/96727/
Tadashi Nemoto
August 28, 2018
Tweet
Share
More Decks by Tadashi Nemoto
See All by Tadashi Nemoto
10x deployment frequency using GitLab Flow and GitHub Actions on AWS ECS
tadashi0713
0
150
デプロイ頻度を10倍にした、ブランチ戦略とGitHub Actions on AWS ECS
tadashi0713
8
2.8k
Creating parallelized Android UITest (Appium) environment using Azure, Docker and Android emulator
tadashi0713
0
2.9k
メルカリの開発スピードと品質を支える Selenium on Azure Kubernetes Service
tadashi0713
2
900
Docker × Androidエミュレーターを使ったAppiumテスト環境
tadashi0713
3
3.7k
Scaling Selenium to Infinity
tadashi0713
0
1.5k
私がAndroid CI/CDを Bitrise・CircleCIに 移行して得られたもの
tadashi0713
4
2.7k
メルカリのテスト自動化戦略
tadashi0713
4
11k
フリマアプリ「メルカリ」のCI / CDを支えるAutomation, Karakuriな文化
tadashi0713
0
700
Featured
See All Featured
Let's Do A Bunch of Simple Stuff to Make Websites Faster
chriscoyier
498
130k
Put a Button on it: Removing Barriers to Going Fast.
kastner
56
2.3k
Large-scale JavaScript Application Architecture
addyosmani
499
110k
Side Projects
sachag
449
37k
VelocityConf: Rendering Performance Case Studies
addyosmani
316
22k
A Tale of Four Properties
chriscoyier
149
20k
GitHub's CSS Performance
jonrohan
1020
410k
Typedesign – Prime Four
hannesfritz
33
1.3k
Building Adaptive Systems
keathley
25
1.1k
Web development in the modern age
philhawksworth
197
9.3k
Producing Creativity
orderedlist
PRO
333
37k
KATA
mclloyd
7
8.6k
Transcript
モバイルE2Eテストを継続・改善させるために 取り組むKarakuri Nemoto Tadashi Test Engineers Meetup #3
自己紹介 • 根本 征(Nemoto Tadashi) • Automation & QA (AQA)
Group • テスト自動化 • Selenium, Appium, XCUITest, Espresso • モバイルCI / CD改善 • 社内の生産性を上げるための自動化・サポート • https://seleck.cc/1230 • 自称 Zapierエバンジェリスト
Automation & QA Group
モバイルテスティング
None
AndroidのCI時間を10分短縮し、 開発を爆速にするためのKarakuriを作った話 https://tech.mercari.com/entry/2018/07/04/110000 Android CI CircleCI 2.0
Android CI Danger Codecov AndroidのCI時間を10分短縮し、 開発を爆速にするためのKarakuriを作った話 https://tech.mercari.com/entry/2018/07/04/110000
エンジニアと一緒にテスト書いたり
None
E2Eテスト(特にモバイル)は メンテナンスコストが高い 不安定
QAと一緒にE2Eテスト自動化を推進し 1年以上メンテナンス・改善をしている
なぜQAとなのか • QAとエンジニアで確認・テストしたいことは違う • テストの不安定さ < 自分たちの作業の一部自動化 • スキルアップへのモチベーション
3つのポイント・改善 • 実行環境を用意・安定化 • テストレポートを充実させる • 調査・メンテナンスできる人を増やす
実行環境を用意・安定化
Android apkビルド Google Cloud Storage
Android
Android クラウド実行環境 Others デバイス
iOS iOS Simulator メルカリiOSのUIテスト自動化をま るっとご紹介します! https://tech.mercari.com/entr y/2018/08/07/123000
テストレポートを充実させる
マスター タイトルの書式設定 • マスター テキストの書式設定 Android(github.com/vbanthia/rspec_html_reporter)
マスター タイトルの書式設定 • マスター テキストの書式設定 Android(github.com/vbanthia/rspec_html_reporter)
マスター タイトルの書式設定 • マスター テキストの書式設定 Android(github.com/vbanthia/rspec_html_reporter)
iOS(XCTestHTMLReport) メルカリiOSのUIテスト自動化をま るっとご紹介します! https://tech.mercari.com/entr y/2018/08/07/123000
調査・メンテナンスできる人を増やす
QAとの協業 自動化エンジニア QA • 実行結果の確認・フィードバック • テストシナリオ作成・更新 • 一部スクリプト修正 •
テストスクリプトの実装・修正 • 実行環境の構築・整備 • ライブラリの作成
None
次のステップ 自動化エンジニア QA • 実行結果の確認・フィードバック • テストシナリオ作成・更新 • テストスクリプトの実装・修正 •
テストスクリプトの実装・修正 • 実行環境の構築・整備 • ライブラリの作成
Appium + RSpec + Turnip (Android) 自動化エンジニア QA • 実装しているシナリオの理解
• 新規シナリオの作成 • 既存シナリオの修正 • Stepの作成 • サンプルのシナリオを提供 • シナリオを書くためのサポート
github.com/tadashi0713/table_beet2
QAがシナリオを書くためのサポート
3つのポイント・改善 • 実行環境を用意・安定化 • テストレポートを充実させる • 調査・メンテナンスできる人を増やす + Automation, Karakuriしていく文化
エンジニアの行動指針 Automation, Karakuri
Automation (自動化) 本来すべきこと(コード・設計) に集中するため 機械になるべくやらせて、効率化させる 2度以上行なった作業は自動化の対象
Karakuri (仕組み化) 問題が起きた時、気合いではなく、 人的エラーが起きない仕組みで解決する
Automation, Karakuriしていく文化
一発でパーフェクトなE2Eテストは作れない 自発的・継続的に Automation, Karakuriしていく文化