Kubernetes против реальности

DevOpsDaysMoscow, 07-12-2019, Павел Селиванов

- Я расскажу, как с помощью Kubernetes можно построить DevOps в вашей компании и почему, скорее всего, ничего не получится.
- Покажу, как некоторые, на первый взгляд, неважные аспекты в работе и культуре убивают ваш кластер;
- Раскрою культурологические проблемы в работе IT отделов;
- И дам практические рекомендации по использованию функционала Kubernetes для решения этих (и не только) проблем.

Transcript

1. Kubernetes против реальности Павел Селиванов Southbridge
2. Павел Селиванов
3. План • DevKubeOps инженеры • Как построить Костыли • Две простые технологии чтобы спать по ночам • Мифический DevOps инженер
4. Сколько вы зарабатываете?
5. Зарплаты 40k 50k 100k 110k 180k 200k Разработчик DevOps инженер
6. Монолиты • Сложное приложение • Взаимодействие внутри • Много времени на разработку • Простая структура проекта
7. • Сложное приложение • Взаимодействие внутри • Много времени на разработку • Простая структура проекта • Каждый сервис – простое приложение • Общение по стандартным протоколам • Быстрая разработка • Сложная структура проекта Сервис 1 Сервис 2 Сервис 3 Сервис 4 Монолиты vs Микросервисы
8. «Сложность» теперь живёт за пределами кода Сервис 1 Сервис 2 Сервис 3 Сервис 4 Сложность Сложность Сложность Сложность Сложность
9. Облако CI/CD Infrastructure as a Code Весь код в гите Как DevOps представляет себе задачу
10. Облако CI/CD Infrastructure as a Code Весь код в гите На самом деле в трёх На самом деле в двух Виртуалки у хостера Виртуалки на ноуте под столом в офисе Серверы в ДЦ Как задача выглядит на самом деле Ручной труд
11. Облако CI/CD Infrastructure as a Code Весь код в гите На самом деле в трёх На самом деле в двух Виртуалки у хостера Виртуалки на ноуте под столом в офисе Серверы в ДЦ Ручной труд Как DevOps решает задачу КУБИРНЕТИС КУБИРНЕТИС КУБИРНЕТИС КУБИРНЕТИС
12. Воркфлоу с Kubernetes
13. Впихуем невпихуемое Redis Rails Resque Scheduler Resque Workers
14. Кошмар кубовода $ kubectl drain node
15. Когда две реплики тоже мало
16. Когда две реплики тоже мало CI deploy Terminating Creating
17. Когда две реплики тоже мало CI deploy $ kubectl drain node Terminating Creating Terminating
18. Когда две реплики тоже мало CI deploy $ kubectl drain node Terminating Creating Terminating
19. Теперь ты работаешь по ночам! И днём тоже!
20. Pod Disruption Budget • Устанавливает сколько инстансов приложения могут быть недоступны одновременно
21. Pod Disruption Budget • Устанавливает сколько инстансов приложения могут быть недоступны одновременно • YAML формат согласований работ
22. Pod Disruption Budget • Устанавливает сколько инстансов приложения могут быть недоступны одновременно • YAML формат согласований работ • https://kubernetes.io/docs/concepts /workloads/pods/disruptions/ apiVersion: policy/v1beta1 kind: PodDisruptionBudget metadata: name: myapp-pdb spec: minAvailable: 1 selector: matchLabels: app: myapp
23. А если не влезает? $ kubectl drain node Terminating Sync Job Core Service Core Service Pending
24. Priority Class • Указывает важность пода относительно других подов • https://kubernetes.io/doc s/concepts/configuration/ pod-priority-preemption/ apiVersion: scheduling.k8s.io/v1 kind: PriorityClass metadata: name: high-priority value: 1000000 globalDefault: false description: "Priority class for XYZ."
25. Priority Class в реальности $ kubectl drain node Terminating Low Priority Service High Priority Service Low Priority Service
26. Priority Class в реальности Terminating Low Priority Service High Priority Service Low Priority Service Terminating
27. Priority Class в реальности Low Priority Service High Priority Service
28. Ops спят по ночам
31. Java приложения нужно тюнить • Лимиты CPU (Threads, GC) • Лимиты памяти (Heap, GC)
32. Одинаковые Ops Dev
33. Одинаковые Ops Dev Одна задача – продукт, который работает
34. pauljamm https://www.linkedin.com/in/pavel-selivanov-045242155/ paul_jamm