Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Scaling Selenium to Infinity

E8aaf6f975dda96c47412cf311089243?s=47 Tadashi Nemoto
November 14, 2018
Technology
0
1.6k

Scaling Selenium to Infinity

[人気につき増枠]AQA POP TALK #3 ~海外カンファレンスから見えたテスト自動化の未来~
https://mercaridev.connpass.com/event/104904/

E8aaf6f975dda96c47412cf311089243?s=128

Tadashi Nemoto

November 14, 2018
Tweet

More Decks by Tadashi Nemoto

See All by Tadashi Nemoto
AWS Graviton 環境への CI _ CD パイプラインを CircleCI で実現しよう (AWS Fargate 編)
E8aaf6f975dda96c47412cf311089243?s=48 tadashi0713
0
9
10x deployment frequency using GitLab Flow and GitHub Actions on AWS ECS
E8aaf6f975dda96c47412cf311089243?s=48 tadashi0713
0
170
デプロイ頻度を10倍にした、ブランチ戦略とGitHub Actions on AWS ECS
E8aaf6f975dda96c47412cf311089243?s=48 tadashi0713
8
2.8k
Creating parallelized Android UITest (Appium) environment using Azure, Docker and Android emulator
E8aaf6f975dda96c47412cf311089243?s=48 tadashi0713
0
3k
メルカリの開発スピードと品質を支える Selenium on Azure Kubernetes Service
E8aaf6f975dda96c47412cf311089243?s=48 tadashi0713
2
920
Docker × Androidエミュレーターを使ったAppiumテスト環境
E8aaf6f975dda96c47412cf311089243?s=48 tadashi0713
3
3.8k
私がAndroid CI/CDを Bitrise・CircleCIに 移行して得られたもの
E8aaf6f975dda96c47412cf311089243?s=48 tadashi0713
4
2.7k
メルカリのテスト自動化戦略
E8aaf6f975dda96c47412cf311089243?s=48 tadashi0713
4
11k
モバイルE2Eテストを継続・改善させるために取り組むKarakuri
E8aaf6f975dda96c47412cf311089243?s=48 tadashi0713
1
880

Other Decks in Technology

See All in Technology
組織の崩壊と再生、その中で何を考え、感じたのか。 そして本当に必要だったもの
962920d4608365b332d0c65f9b3e7ba5?s=48 kosako
10
4.4k
QiitaConference2022
0684ef0f8b92614508e0c323c3619462?s=48 fuwasegu
0
200
Citizen 개발기
748a6dc8b4eaba0fde62909e39be7987?s=48 outsider
0
290
2024卒_freee_エンジニア職(ポテンシャル採用)_説明資料
3adaa5e19f64345a0fbdb2e5d00be571?s=48 freee
0
280
GeoLocationAnchor and MKTileOverlay
61a68b2172503ecdf7a7f7757df56071?s=48 toyship
0
110
誰が正解を知っているのか / Who knows the right answer
95aaab3d693889550fd2e7ae02f2f789?s=48 takaking22
1
250
ソフトウェアライセンス 2022 / Software License 2022
A97eee01397705443a72a48ce29d3e19?s=48 cybozuinsideout
PRO
1
1.1k
Swift Regex Builder
266af7918931b0ea15eae9e8f42ecfa6?s=48 kumamotone
1
110
Accelerated Computing for NLP on AWS
4e10f0bc53073da7f55420c1a2021c8b?s=48 shokout
1
240
Custom GitHub Actions by Java
E68f2e8b47dc1769380a1fa8181df3dd?s=48 kazamori
0
290
さいきんのRaspberry Pi。 / osc22do-rpi
74476e142a767a018d68c5e72e34ee2f?s=48 akkiesoft
6
5.3k
スクラムのスケールとチームトポロジー / Scaled Scrum and Team Topologies
4dd89003cc8fe9f21d67b0c99b773436?s=48 daiksy
1
450

Featured

See All Featured
Unsuck your backbone
B83d5b590577969ee79a5ad845411a7d?s=48 ammeep
659
55k
Templates, Plugins, & Blocks: Oh My! Creating the theme that thinks of everything
E195ae45320d9202eaa01c9f1d31a416?s=48 marktimemedia
15
950
5 minutes of I Can Smell Your CMS
465724d73fe3a92c0879fdfb43a3a6f3?s=48 philhawksworth
196
18k
In The Pink: A Labor of Love
E837d2996f52008ace055a08fbfff992?s=48 frogandcode
131
21k
How GitHub Uses GitHub to Build GitHub
78b475797a14c84799063c7cd073962f?s=48 holman
465
280k
The Success of Rails: Ensuring Growth for the Next 100 Years
C44e1f7e22c3f23cff7bc130871047ef?s=48 eileencodes
10
3.4k
Why You Should Never Use an ORM
88bc30284c6a424b63a92aad27d0ba36?s=48 jnunemaker
PRO
47
7.6k
KATA
E9221b172e78e888355fa2fe4541b595?s=48 mclloyd
7
8.7k
Designing the Hi-DPI Web
C157b16234f1e75e8eac3698c1d4414a?s=48 ddemaree
272
32k
Pencils Down: Stop Designing & Start Developing
79acae287842acf29084005533a7fb3b?s=48 hursman
112
9.8k
Why Our Code Smells
20bfe76b3d6105641f879fe45cfc9272?s=48 bkeepers
PRO
324
55k
Art Directing for the Web. Five minutes with CSS Template Areas
433acaea1012b25d97ae66da9b998dad?s=48 malarkey
196
9.4k

Transcript

  1. Scaling Selenium to Infinity

  2. 自己紹介 • 根本 征(Nemoto Tadashi) • Automation & QA (AQA)

    Group • テスト自動化 • Selenium, Appium, XCUITest • モバイルCI / CD改善 • 社内の生産性を上げるための自動化・サポート • https://seleck.cc/1230
  3. None
  4. None

  5. UIテストをはじめると起こる課題 • 不安定なテスト(freaky test) • UIの変更に伴う改修 • 調査コスト • 実行時間の増加(Unit

    <<< UI)
  6. None

  7. blackboard / lambda-selenium

  8. None

  9. サーバーレスの特徴 • 課金形態 • スケールしやすい • サーバーの管理をしなくていい • Low maintainance

  10. AWS Lambda 料金 実行した「時間」と「回数」

  11. コストは同じ

  12. サーバーの管理をしなくていい 制限された環境

  13. サーバーレスの制限 • 利用できる言語 / バージョン • タイムアウト • デプロイサイズ

  14. サーバーレスの制限 • 利用できる言語 / バージョン • タイムアウト • デプロイサイズ

  15. Amazon S3から毎回ダウンロード XVFB

  16. None

  17. サーバーレスの制限 • 利用できる言語 / バージョン • タイムアウト • デプロイサイズ

  18. None
  19. None

  20. How to scale tests?

  21. None
  22. None
  23. None

  24. http://allure.qatools.ru/

  25. http://allure.qatools.ru/

  26. None

  27. Running tests faster will unmask rude tests

  28. UIテストをはじめると起こる課題 • 不安定なテスト(freaky test) • UIの変更に伴う改修 • 調査コスト • 実行時間の増加(Unit

    <<< UI)

  29. Scaling is possible but you MUST follow best practices!

  30. UIテストをはじめると起こる課題 • 不安定なテスト(freaky test) • UIの変更に伴う改修 • 調査コスト • 実行時間の増加(Unit

    <<< UI)

  31. 課題も多い • 他ブラウザへの対応 • プラットフォームの制限 • サーバーレスの理解 / キャッチアップ •

    実例も少なく現状ハードルは高い • 並列実行 VS テスト環境への負荷

  32. 未来 • スケール・スピード • コスト • サーバーレスの実行コスト • 環境メンテナンスコスト

  33. まとめ • UIテストで起こりがちな実行時間の増加をAWS Lambdaによる並列実行で解決 • プラットフォームによる特徴・制限を理解して、うまく 使いこなす必要がある • 課題もあるが、スケール・スピード・コストによるメリッ トは大きく、未来があるのでは