Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Speaker Deck
PRO
Sign in
Sign up for free
Scaling Selenium to Infinity
Tadashi Nemoto
November 14, 2018
Technology
0
1.6k
Scaling Selenium to Infinity
[人気につき増枠]AQA POP TALK #3 ~海外カンファレンスから見えたテスト自動化の未来~
https://mercaridev.connpass.com/event/104904/
Tadashi Nemoto
November 14, 2018
Tweet
Share
More Decks by Tadashi Nemoto
See All by Tadashi Nemoto
AWS Graviton 環境への CI _ CD パイプラインを CircleCI で実現しよう (AWS Fargate 編)
tadashi0713
0
9
10x deployment frequency using GitLab Flow and GitHub Actions on AWS ECS
tadashi0713
0
170
デプロイ頻度を10倍にした、ブランチ戦略とGitHub Actions on AWS ECS
tadashi0713
8
2.8k
Creating parallelized Android UITest (Appium) environment using Azure, Docker and Android emulator
tadashi0713
0
3k
メルカリの開発スピードと品質を支える Selenium on Azure Kubernetes Service
tadashi0713
2
920
Docker × Androidエミュレーターを使ったAppiumテスト環境
tadashi0713
3
3.8k
私がAndroid CI/CDを Bitrise・CircleCIに 移行して得られたもの
tadashi0713
4
2.7k
メルカリのテスト自動化戦略
tadashi0713
4
11k
モバイルE2Eテストを継続・改善させるために取り組むKarakuri
tadashi0713
1
880
Other Decks in Technology
See All in Technology
組織の崩壊と再生、その中で何を考え、感じたのか。 そして本当に必要だったもの
kosako
10
4.4k
QiitaConference2022
fuwasegu
0
200
Citizen 개발기
outsider
0
290
2024卒_freee_エンジニア職(ポテンシャル採用)_説明資料
freee
0
280
GeoLocationAnchor and MKTileOverlay
toyship
0
110
誰が正解を知っているのか / Who knows the right answer
takaking22
1
250
ソフトウェアライセンス 2022 / Software License 2022
cybozuinsideout
PRO
1
1.1k
Swift Regex Builder
kumamotone
1
110
Accelerated Computing for NLP on AWS
shokout
1
240
Custom GitHub Actions by Java
kazamori
0
290
さいきんのRaspberry Pi。 / osc22do-rpi
akkiesoft
6
5.3k
スクラムのスケールとチームトポロジー / Scaled Scrum and Team Topologies
daiksy
1
450
Featured
See All Featured
Unsuck your backbone
ammeep
659
55k
Templates, Plugins, & Blocks: Oh My! Creating the theme that thinks of everything
marktimemedia
15
950
5 minutes of I Can Smell Your CMS
philhawksworth
196
18k
In The Pink: A Labor of Love
frogandcode
131
21k
How GitHub Uses GitHub to Build GitHub
holman
465
280k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
10
3.4k
Why You Should Never Use an ORM
jnunemaker
PRO
47
7.6k
KATA
mclloyd
7
8.7k
Designing the Hi-DPI Web
ddemaree
272
32k
Pencils Down: Stop Designing & Start Developing
hursman
112
9.8k
Why Our Code Smells
bkeepers
PRO
324
55k
Art Directing for the Web. Five minutes with CSS Template Areas
malarkey
196
9.4k
Transcript
Scaling Selenium to Infinity
自己紹介 • 根本 征(Nemoto Tadashi) • Automation & QA (AQA)
Group • テスト自動化 • Selenium, Appium, XCUITest • モバイルCI / CD改善 • 社内の生産性を上げるための自動化・サポート • https://seleck.cc/1230
None
None
UIテストをはじめると起こる課題 • 不安定なテスト(freaky test) • UIの変更に伴う改修 • 調査コスト • 実行時間の増加(Unit
<<< UI)
None
blackboard / lambda-selenium
None
サーバーレスの特徴 • 課金形態 • スケールしやすい • サーバーの管理をしなくていい • Low maintainance
AWS Lambda 料金 実行した「時間」と「回数」
コストは同じ
サーバーの管理をしなくていい 制限された環境
サーバーレスの制限 • 利用できる言語 / バージョン • タイムアウト • デプロイサイズ
サーバーレスの制限 • 利用できる言語 / バージョン • タイムアウト • デプロイサイズ
Amazon S3から毎回ダウンロード XVFB
None
サーバーレスの制限 • 利用できる言語 / バージョン • タイムアウト • デプロイサイズ
None
None
How to scale tests?
None
None
None
http://allure.qatools.ru/
http://allure.qatools.ru/
None
Running tests faster will unmask rude tests
UIテストをはじめると起こる課題 • 不安定なテスト(freaky test) • UIの変更に伴う改修 • 調査コスト • 実行時間の増加(Unit
<<< UI)
Scaling is possible but you MUST follow best practices!
UIテストをはじめると起こる課題 • 不安定なテスト(freaky test) • UIの変更に伴う改修 • 調査コスト • 実行時間の増加(Unit
<<< UI)
課題も多い • 他ブラウザへの対応 • プラットフォームの制限 • サーバーレスの理解 / キャッチアップ •
実例も少なく現状ハードルは高い • 並列実行 VS テスト環境への負荷
未来 • スケール・スピード • コスト • サーバーレスの実行コスト • 環境メンテナンスコスト
まとめ • UIテストで起こりがちな実行時間の増加をAWS Lambdaによる並列実行で解決 • プラットフォームによる特徴・制限を理解して、うまく 使いこなす必要がある • 課題もあるが、スケール・スピード・コストによるメリッ トは大きく、未来があるのでは