Валерий Меньшиков — Автотесты и Кодогенерация Python-клиентов для gRPC и REST-сервисов

Transcript

1. Валерий Меньшиков Ведущий специалист по тестированию
3. •Рассказать об инструментах, использованных для генерации кода и возможностях их кастомизации •Рассказать об интеграции этих инструментов в процесс автотестирования, о плюсах и удобствах такого подхода
6. • Быстро и понятно, если тест маленький • Большой тест будет трудно читаемым • Нет логирования • Нет валидации входных и выходных данных • Не выделено никаких функций, проблематично переиспользование кода
15. build-and- push tests Build Test
16. Staging Staging tests Ready to prod Deploy E2e Close
17. • Валидация входных и выходных данных • Есть прослойка в виде логирования • Тест выглядит более осмысленным • Удобное использование методов • Ошибки при написании кода копипастой • Трудоемкое описание моделей • Тяжело поддерживать
18. • 1-2 QA на группу разработки • В разработке есть как ручные задачи, так и задачи на автоматизацию • Около 100 микросервисов • Клиенты моментально устаревают, а поддерживать их некому • В каждой группе разработки клиенты пишут по-своему • Монорепозиторий, в котором тяжело разобраться
20. Википедия
24. • Быстро вносить фиксы и фичи в генератор • Разработка тестов сильно ускорилась • Единообразный код клиентов • Тяжело поддерживать • Баги и т.п.
26. Репозиторий
27. Шаблоны
28. • Бесплатный • Поддерживается большим сообществом • Используется в ряде больших проектов и компаний (CISCO, IBM, Kubernetes и др.) • Возможность кастомизации выходного кода • Готовый к установке пакет • Генерация для разных языков программирования • Нельзя оперативно вносить правки и фиксы в инструмент
30. •Доработаны шаблоны под наши цели •Собран docker-контейнер •Написан gitlab job с генерацией клиента и публикацией пакета на artifactory
31. Gitlab job
32. Python клиент
33. Устанавливаем пакет
34. Новая структура проекта
35. Используем в тестах
36. Staging Staging tests Ready to prod Deploy E2e Close Generate python client
37. •Дешево и просто •Клиент генерируется в пайплайне разработки •Логирование и Allure декораторы в шаблонах •Сохраняется версионность •Экономия времени •Простая установка и использование
39. Википедия
45. Проблемы: •Трудночитаемый код •IDE плохо поддерживает сгенерированного клиента
46. Плагины (my-py)
47. Python-betterproto
49. •Был форкнут проект, поправлены шаблоны для добавления логов и синхронных методов •Собран docker-образ •Написан джоб для генерации и публикации пакета на artifactory
54. •ozbetterproto •Быстро и дешево •Простой и понятный gRPC клиент •Логирование •Валидация данных •Клиенты хранятся в отдельных пакетах на artifactory
55. Email: vmenshikov@ozon.ru Telegram: https://t.me/effective_qa Instagram: @menshikov_valeriy *Instagram — проект Meta Platforms Inc., деятельность которой запрещена на территории Российской Федерации. Меньшиков Валерий Ведущий специалист по тестированию