Road to SRE culture in a small company

Transcript

2. Никита Соболев github.com/sobolevn
3. У меня пока нет SRE. Как?
5. wemake.services/meta Repeatable Software Development Process
7. 1. Задача 2. Контроль 3. Деньги
8. 1. Задача 2. Контроль 3. Деньги
14. Будет ли кто–то будет хоть что–то делать?
15. 1. Задача 2. Контроль 3. Деньги
16. sobolevn.me/2018/12/blameless-environment Blameless environment
17. К технике
18. Автоматизируем? •Чем строже, тем лучше •Чем чаще, тем лучше •Чем хрупче, тем лучше
19. CI / CD • Блокирующий • Полный, но быстрый • Повторяемый
20. ХО ХО ХО
21. Типы тестов • Доктесты • Юнит • Интеграционные • E2E • Snapshots • Property-based • Мутационные • Контрактные • Регрессионные • Ручные
22. Required test coverage of 100% reached. Total coverage: 100.00% =========== 8408 passed, 2 skipped in 50.33 seconds =============
23. github.com/wemake-services/wemake-python- styleguide Линтеры!
25. Есть файл? Нужен линтер!
26. dotenv-linter polint dennis eslint stylelint hadolint shellcheck yamllint flake8 layer-linter xenon doc8 markdown-lint remark-lint mypy credo commitlint gherkin-lint
27. И плагины! vue json html pyi typescript flow jsdoc docker-compose
28. И конфигурация!
30. IaC • github.com/ansible/ansible • github.com/ansible/molecule • github.com/ansible/ansible-lint
31. Review Apps docs.gitlab.com/ee/ci/review_apps
32. Runtime окружение • Одно окружение: очевидный Docker • Одни версии: не latest • Одни настройки: 12 factor app • Один способ запустить
33. Dependencies • Детерминированные • Запиненные • Безопасные • Обновляемые
35. Мониторим • Ресурсы • Логи • Ошибки
36. Три правила Sentry • Используйте • Выкиньте все лишнее • Интегрируйте с таск–трекером
39. Поговорим про код
41. Версионируйте! • Обновляйте и валидируйте спеку • Тестируйте спеку! pypi.org/project/swagger-conformance
42. client = Client('your.app/swagger.json') strategy_factory = StrategyFactory() operation = client.api.endpoints['/pet']['put'] strategy = operation.strategy(strategy_factory)
 print(strategy.example())
43. { 'body':{ 'id':110339, 'name':'\U00052ea5\x9d\ua79d\x92\x13\U000f7c436', 'photoUrls':[ '\ua9d9\U0003fb3a\x13\U00025c1c\U000974a8\u3497\n', "\U000b38a4>*\u6683'\U0002cd8f\x0f\n" ], 'tags':[ { 'id':-172930, 'name':'\U000286df\u04dc\U00033563\U00055ba8\x89H' } ] } }
44. Используйте commitizen
48. Угомоните хаос • Логика должна быть логичной (DDD) • Пишите спеки (BDD)
49. sobolevn.me/2019/02/engineering-guide-to- user-stories
50. pypi.org/project/pytest-bdd
51. layer-linter.readthedocs.io Логика – как хороший пирог
52. My Domain: containers: - accounts - webhooks layers: - usecases - services - entities
53. Рефакторите • Рефакторите • Думайте над дизайном (TDD) pypi.org/project/pytest-testmon
55. Типизируйте очень строго!
56. _ValidUser = NewType('_ValidUser', User) def validate_user(user: User) -> _ValidUser: ... def persist(user: _ValidUser) -> None: ...
57. Запросы aka IO
58. images = Image.objects.filter( category__name='Cats', ) for image in images: print(image.category.name)
59. Падать на N+1 github.com/jmcarp/nplusone
60. requests.get('https://my.api/v1/users')
62. Уберите лишние exception'ы github.com/dry-python/returns
63. def fetch_user_profile(user_id: int) -> 'User': response = requests.get(f'/users/{user_id}') response.raise_for_status() return response.json()
64. Таски, очереди, треды, корутины, etc
65. Timeout'ы и лимиты!
66. OperationalError: database is locked DATABASES = { 'default': { 'ENGINE': 'django.backends.postgres', 'OPTIONS': { 'timeout': 20, } } }
67. На тесты тоже нужны таймауты pypi.org/project/pytest-timeout
68. Как жить? • Мониторинг • Healthchecks • Двойной кот–ревью
72. Backward incompatible migrations • Думайте головой • Используйте несколько миграций • Тестируйте pypi.org/project/django-migration-linter
73. Лайфхаки
74. Используйте хорошие языки
75. Используйте нормальную ОС nixos.org
76. Отдайте инфраструктуру, не нужна она вам
77. Вините систему, а не людей
78. Вывод IO
79. Почитать • sobolevn.me/2019/02/python-exceptions-considered-an- antipattern • sobolevn.me/2019/02/engineering-guide-to-user-stories • engineering.skybettingandgaming.com/2016/02/02/how-we- release-so-frequently/ • amberonrails.com/move-fast-dont-break-your-api/ • 2factor.net/ru/ • github.com/conventional-changelog/conventional- changelog
80. Попробовать! • github.com/wemake-services/wemake-django- template • github.com/wemake-services/wemake-vue-template
81. Присылайте идеи! github.com/sobolevn sobolevn.me