UI-автотесты: неочевидные очевидности в планировании и реализации

Transcript

1. UI-автотесты: неочевидные очевидности в планировании и реализации Глеб Саркисов / 22.11.19
2. .QA Team Lead в Обо мне: Redmadrobot .Web & Mobile Applications .❤ testing .учусь на BI в ВШЭ
3. показать, как осуществить переход от неосознанной некомпетентности к осознанной в планировании и написании UI-автотестов. Цель презентации: Redmadrobot
4. Как это обычно бывает… Redmadrobot
5. В сети 100500 статей на тему UI-automation с информацией типа: - какой язык надо учить - что такое page object - на какие курсы пойти Redmadrobot Ok, Google!
6. Сейчас все автоматизирую и получу на выходе: Redmadrobot .более быстрый регресс .больше времени на FT .более высокое качество тестирования
7. Как? Redmadrobot Что? Для кого? ❌ ☑ ❌
8. Автоматизация ради автоматизации? Redmadrobot
9. Специфика моего проекта Redmadrobot 1. Разработка МП для крупного банка 2. Over 50 экранов и 200 состояний 3. Мало рук и времени на регресс
10. Пункт №1. Разбираемся с ответом на вопрос «Что?» Redmadrobot
11. 2. Насколько это целесообразно? Разговор с бизнесом Redmadrobot 1. Что будем автоматизировать?
12. Определимся с возможностью, необходимостью и предварительными сроками. Транслируем бизнесу наш vision и договариваемся Redmadrobot
13. 1. Как будем строить тесты? Здесь же: размер сценария, ассерты, debug-сообщения. 2. Как скоро редизайн? Разговор с собой Redmadrobot
14. Пункт №2. А у меня на проекте Dev’ы уже подготовили архитектуру для UI-тестов! Redmadrobot
15. Dev сетапит автотесты - плюсы? Redmadrobot - готовая архитектура - простой сетап (меньше зависимостей) - поделенная зона ответственности - Code Review от Dev - случай с iOS: Dev вынужден добавлять accessibility id всегда
16. Redmadrobot - необходимость знать 2 языка - двойная работа для QA - нужен ответственный Dev - излишняя требовательность к качеству кода А минусы?
17. Некоторые кейсы имеет смысл отдать на юнит-тестирование разработчикам. Пункт №3. Поделись работой с Devом Redmadrobot
18. Пункт №4. UI test != Integration test Redmadrobot Разделяем два понятия. UI-автотесты должны быть максимально изолированы от внутренних сервисов бэка.
19. GET /test 500 POST /qa 502 PATCH /qc 504 Redmadrobot Пункт №5. Не доверяй серверу
20. Redmadrobot Но следи за изменениями бэка и вовремя обновляй моки. У тебя нестабильный сервер? Нет доступа к БД? Мокай! - статически - динамически
21. Пункт №6. UI-автотесты и Design Review Redmadrobot
22. 22 Это Иван. Redmadrobot
23. Redmadrobot Это Иван. Иван не хочет бороться с сервером. Он хочет делать авторский надзор.
24. 01 Будешь ли тестить на разных девайсах? 02 Будь готов менять логику работы тестов! Redmadrobot Пункт №7. Определись с таргет-девайсами
25. Redmadrobot Пункт №8. Мы пишем автотесты не для себя ^бизнес
26. Отчетность? В каком виде? Информирование бизнеса Redmadrobot
27. Уведомления о результатах прогона Историчность? Информирование бизнеса Redmadrobot
28. Redmadrobot Вердикт: С таким подходом UI- автотесты имеют шанс на успех! *
29. 1. Автотесты не должны существовать ради самих себя 2. Их внедрение и реализуемый подход должны быть оговорены с бизнесом 3. Вы должны знать свои возможности и ограничения при внедрении автотестов Резюмируем: Redmadrobot
30. Good luck! Redmadrobot
31. Спасибо за внимание!
 Вопросы? Глеб Саркисов:
 QA Team Lead +7 (968) 666-23-25
 g.sarkisov@redmadrobot.com linkedin.com/in/glebsarkisov Офис Redmadrobot в Москве:
 Пресненский вал 27, стр. 9 +7 (495) 933-05-95
 hello@redmadrobot.com Habr: qps.ru/kN4vg