Codeception для разработчиков

Тестирование PHP проектов с Codeception. Введение в тестирование плюс примеры тестов с Codeception.

Transcript

1. Автоматизация тестирования с Codeception
2. Я • Боднарчук Михаил • Веб разработчик (PHP с 2004, Ruby с 2008) • Автор Codeception • @davert
3. Тестирование Ручное Автоматизированное
4. Когда автоматизировать? • Частые изменения в проекте • Много изменений в проекте • Много разработчиков, мало тестировщиков.
5. Пишем тесты? • Что-что? • А… Это… Лениво. • А… Не… Сложно. • Да, как-то пытался писать юнит-тесты. • Не, у нас для этого есть QA отдел. • Да!
6. С чего начать? • Тестирования функционала. • Типичные пользовательские сценарии. • API
7. Противопоказано • А давайте напишем юнит тест! • Как же? Юнит тесты это круто! • Нам надо 100% покрытия кода!
8. Казалось бы… при чем тут Codeception…
9. Существующие решения • PHPUnit • ? • ? • ? • ? • ? • Selenium
10. Чего не хватает? • Простоты написания тестов • Простоты чтения тестов • Простоты отладки тестов
11. Codeception • Простой но мощный фреймворк • Основан на PHPUnit • Open Source • Хорошо документирован • Версия 1.1.3 • PHP >= 5.3
13. Чуваки • Тестирование с «человеческим лицом» • Действия от лица людей. • Минимум технических терминов.
14. Чуваки • WebGuy – тестирует работу сайта вцелом • Приемочное тестирование. • Олицетворяет менеджера
15. Чуваки • TestGuy - проверяет работу зная внутренности системы. • Обеспечивает функциональное тестирование. • Проф. тестировщик.
16. Чуваки • CodeGuy – тестирует код. • Юнит-тестирование. • Разработчик.
17. WebGuy • Selenium RC • WebDriver • ZombieJS • PhpBrowser
18. Типичный тест • $I = new WebGuy($scenario); • $I->click('Login'); • $I->fillField('username','davert'); • $I->fillField('password','gfhjkm'); • $I->click('Submit'); • $I->see('Hello, Davert!');
19. Написание теста
20. Как находятся элементы? • $I->click('Login'); - ? • $I->fillField('username','davert'); - ?
21. Я же умный, красивый, в меру упитанный фреймворк ну в полном расцвете сил!
22. Поиск элемента на странице • По имени (name, value, alt, …) • По лейблу • По CSS селектору • По Xpath (с версии 1.1)
23. Результаты теста
24. Команды: see.. $I->see (‘text on a page’) $I->see(‘heading on page’,’h1’); $I->dontSee(‘Error’); $I->seeInCurrentUrl(‘/user/davert’); $I->seeCheckboxIsChecked(‘#terms’); $I->see(‘XPath’, ‘//h:a/h:span’);
26. TestGuy • Symfony2 • Zend Framework • Kohana • Social Engine • MySQL, PostgreSQL • ORM • Ожидается Drupal 8
27. Интеграция с фреймворками • Не обращаемся к веб-серверу. • Работает гораздо быстрее. • Stack trace и отладочная информация.
28. CodeGuy • Простые тесты с PHPUnit • Комплексные тесты в виде сценариев • Доступны все модули
29. Типичный тест function testSavingUser() { $user = new User(); $user->setName('Miles'); $user->setEmail(‘miles@davis.com'); $user->save(); $this->codeGuy->seeInDatabase('users',array( 'name' => 'Miles‘, ‘email' => ‘miles@davis.com‘, )); } // интеграционный тест
30. Сценарный тест function create(CodeGuy $I) { $I->wantTo('create new user by name'); $I->haveStub($user = Stub::makeEmptyExcept('User', 'create') ); $user->setName('davert'); $I->executeMethod($user, ‘create’); $I->expect('user is validated and saved') $I->seeMethodInvoked($user, 'validate') $I->seeMethodInvoked($user, 'save'); } // юнит тест
31. Отладка • Все промежуточные данные выводятся на экран • При сбое делается скриншот последней страницы • Модуль WebDebug
32. Очистка • Тесты должны работать в изоляции • Тесты не должны гадить друг другу • Очистка кеша, данных, сессий…
33. Очистка БД • перезаливать sql-дамп БД. • использовать SQLite. • через rollback в транзакции.
34. Модули • Веб (Selenium, ZombieJS, PhpBrowser) • API (REST, SOAP) • MVC Frameworks (Symfony, Zend, …) • Database (MySQL, PostgreSQL, …) • …. всего 19
35. Когда модулей мало • Пишем свои! • Helper-код • public function seeReceivedSms() { • $messages = $this->_getOutgoingMessages(); • $this->assertGreaterThen(0, $messages->count()); • } • Тест • $I->click("Confirm by Sms"); • $I->seeReceivedSms();
36. Continuous Integration • Автоматический запуск тестов • «Письма счастья» при поломках • Раннее выявление ошибок
37. Интеграция с CI • Экспорт HTML, XML, JSON, TAP • Jenkins, Bamboo, etc… • Красивые HTML репорты
38. Репорт
39. Подходит для BDD // As a new customer $I->am(‘new customer’); // I want to buy a notebook $I->wantTo(‘buy a notebook’); // In order to spend money faster $I->lookForwardTo(‘spend money faster’);
40. Hardcore BDD
41. Документация • http://codeception.com • Guides – всё о фреймворке (9 глав) • Модули – все функции • Reference –команды, опции.
42. Вопросы? • http://Codeception.com • https://github.com/codeception/codeception • Skype: Davert.ua • davert@ukr.net • Twitter: @davert • Мой мастер-класс на http://atdays.com