Паттерны распределённых систем в традициях коренных малочисленных народов Севера

В этом докладе поговорим про паттерны, которые используются при построении распределённых систем. Слушатели смогут узнать не только о конкретных решениях, но и о проблемах, с которыми сталкиваются разработчики при переходе на распределённую архитектуру. Мы обсудим, почему эти проблемы возникают, какие есть пути их решения. Для наглядности все паттерны будут демонстрироваться на примере традиций и обычаев коренных малочисленных народов Севера. Этот доклад может быть полезен разработчикам, которые начинают или планируют заниматься микросервисами или сервис-ориентированными приложениями. Также доклад может быть интересен людям, которым любопытно узнать больше о жизни народов Севера.

Transcript

1. Паттерны распределённых систем в традициях коренных малочисленных народов Севера Риваль Абдрахманов
2. О себе • Positive Technologies • Разработка распределенного приложения PT IPC • Санкт-Петербург • Нижневартовск, ХМАО-Югра 2
4. 4 2020 Java Microservices Report www.jrebel.com/resources/java-developer-productivity-report-2020
5. 5 2020 Java Microservices Report www.jrebel.com/resources/java-developer-productivity-report-2020
6. 6 https://www.infoq.com/articles/architecture-trends-2020/
7. 7 https://www.infoq.com/articles/architecture-trends-2020/
8. 8 https://www.infoq.com/articles/architecture-trends-2020/
9. Архитектурные паттерны 9
10. Архитектурные паттерны • Содержат готовое решение 10
11. Архитектурные паттерны • Содержат готовое решение • Демонстрируют проблемы, с которыми придётся столкнуться 11
12. Петр Ушанов fotorelax.ru/polyarnyj-ural-puteshestvie-k-nencam 12
13. Коренные малочисленные народы Севера • Коренные малочисленные народы Севера, Сибири и Дальнего Востока Российской Федерации (далее — малочисленные народы Севера) — народы численностью менее 50 тысяч человек, проживающие в северных районах России, в Сибири и на российском Дальнем Востоке на территориях традиционного расселения своих предков, сохраняющие традиционные образ жизни, хозяйствование и промыслы и осознающие себя самостоятельными этническими общностями. 13
15. План доклада 1. Компоненты распределённых систем 2. Внешнее взаимодействие 3. Координация процессов 4. Обработка запросов 15
16. Компоненты распределённых систем 16
17. Архитектурные стили • Сервис-ориентированная архитектура • Микросервисная архитектура 17
18. Сервис-ориентированная архитектура • Сервисы автономны • У сервисов явные границы • Сервисы предоставляют схемы и контракты, не классы • Совместимость сервисов основана на политиках Four Tenets of SOA 18
19. Микросервисы • Лёгкая поддержка и тестирование • Слабая связанность • Независимый деплой • Построение вокруг бизнес требований • Разработка малой командой Сhris Richardson microservices.io 19
20. Характеристики компонентов • Инкапсуляция • Автономность • Построение вокруг бизнес-задачи • Определённые контракты 20
21. Чум 21
22. Чум • Легко поддерживается 22
23. Чум • Легко поддерживается • Никак не связан с другими чумами 23
24. Чум • Легко поддерживается • Никак не связан с другими чумами • Может устанавливаться независимо 24
25. Чум • Легко поддерживается • Никак не связан с другими чумами • Может устанавливаться независимо • Бизнес-требование - выживание в тундре 25
26. Чум • Легко поддерживается • Никак не связан с другими чумами • Может устанавливаться независимо • Бизнес-требование - выживание в тундре • Живёт одна семья 26
28. Петр Ушанов fotorelax.ru/polyarnyj-ural-puteshestvie-k-nencam 28
29. Петр Ушанов fotorelax.ru/polyarnyj-ural-puteshestvie-k-nencam 29
30. Петр Ушанов fotorelax.ru/polyarnyj-ural-puteshestvie-k-nencam 30
31. Петр Ушанов fotorelax.ru/polyarnyj-ural-puteshestvie-k-nencam 31
32. Петр Ушанов fotorelax.ru/polyarnyj-ural-puteshestvie-k-nencam 32
34. Кто занимается установкой чума? 34
35. а) Мужчины Кто занимается установкой чума? 35
36. а) Мужчины б) Женщины Кто занимается установкой чума? 36
37. а) Мужчины в) Олени б) Женщины Кто занимается установкой чума? 37
38. а) Мужчины в) Олени б) Женщины г) DevOps'ы Кто занимается установкой чума? 38
39. б) Женщины Кто занимается установкой чума? 39
40. Внешнее взаимодействие 40
41. Steve Morgan stevemorganphoto.co.uk 41
42. Рыбаки и охотники • Взаимодействие с внешним миром 42
43. Рыбаки и охотники • Взаимодействие с внешним миром • Рыбалка 43
44. Рыбаки и охотники • Взаимодействие с внешним миром • Рыбалка • Ловушки, запоры 44
45. Рыбаки и охотники • Взаимодействие с внешним миром • Рыбалка • Ловушки, запоры • Удочки, блесна, невод, острога 45
46. Рыбаки и охотники • Взаимодействие с внешним миром • Рыбалка • Ловушки, запоры • Удочки, блесна, невод, острога • Охота 46
47. Рыбаки и охотники • Взаимодействие с внешним миром • Рыбалка • Ловушки, запоры • Удочки, блесна, невод, острога • Охота • Ловушки, луки-самострелы 47
48. Рыбаки и охотники • Взаимодействие с внешним миром • Рыбалка • Ловушки, запоры • Удочки, блесна, невод, острога • Охота • Ловушки, луки-самострелы • Луки и ружья 48
49. Рыбаки и охотники • Взаимодействие с внешним миром • Рыбалка • Ловушки, запоры • Удочки, блесна, невод, острога • Охота • Ловушки, луки-самострелы • Луки и ружья • Разные типы охоты 49
50. Виды взаимодействия • Синхронное • Асинхронное 50
51. Синхронное взаимодействие 51
52. Синхронное взаимодействие • RPC 52
53. Синхронное взаимодействие • RPC • HTTP 53
54. Синхронное взаимодействие • RPC • HTTP • Распространённость 54
55. Синхронное взаимодействие • RPC • HTTP • Распространённость • Результат доступен сразу 55
56. Синхронное взаимодействие • RPC • HTTP • Распространённость • Результат доступен сразу • Увеличивает связность сервисов 56
57. Синхронное взаимодействие • RPC • HTTP • Распространённость • Результат доступен сразу • Увеличивает связность сервисов • Каскадные запросы 57
58. Асинхронное взаимодействие 58
59. Асинхронное взаимодействие • На основе сообщений 59
60. Асинхронное взаимодействие • На основе сообщений • AMQP, SMTP 60
61. Асинхронное взаимодействие • На основе сообщений • AMQP, SMTP • Виды: • Одностороннее • Асинхронный запрос-ответ • Pub/sub 61
62. Асинхронное взаимодействие • На основе сообщений • AMQP, SMTP • Виды: • Одностороннее • Асинхронный запрос-ответ • Pub/sub • Повышает автономность сервисов 62
63. Асинхронное взаимодействие • На основе сообщений • AMQP, SMTP • Виды: • Одностороннее • Асинхронный запрос-ответ • Pub/sub • Повышает автономность сервисов • Сложнее дизайн системы 63
64. Асинхронное взаимодействие • На основе сообщений • AMQP, SMTP • Виды: • Одностороннее • Асинхронный запрос-ответ • Pub/sub • Повышает автономность сервисов • Сложнее дизайн системы • Асинхронные бизнес-сценарии 64
65. Устойчивость к ошибкам 65
66. Устойчивость к ошибкам • Игнорирование 66
67. Устойчивость к ошибкам • Игнорирование • Повторный вызов (retry) 67
68. Устойчивость к ошибкам • Игнорирование • Повторный вызов (retry) • Тайм-аут 68
69. Устойчивость к ошибкам • Игнорирование • Повторный вызов (retry) • Тайм-аут • Предохранитель (circuit breaker) 69
70. Устойчивость к ошибкам • Игнорирование • Повторный вызов (retry) • Тайм-аут • Предохранитель (circuit breaker) • Идемпотентность 70
71. Устойчивость к ошибкам • Игнорирование • Повторный вызов (retry) • Тайм-аут • Предохранитель (circuit breaker) • Идемпотентность • Компенсаторные действия 71
72. Петр Ушанов fotorelax.ru/polyarnyj-ural-puteshestvie-k-nencam 72
73. Охота в группе 73
74. Охота в группе • Охота на медведя 74
75. Охота в группе • Охота на медведя • Один выманивает, остальные наготове 75
76. Охота в группе • Охота на медведя • Один выманивает, остальные наготове • Экипировались ружьями и большими ножами, укрепленными в древке 76
79. API Gateway 79
80. API Gateway • Фасад 80
81. API Gateway • Фасад • Скрытие сервисов 81
82. API Gateway • Фасад • Скрытие сервисов • Роутинг 82
83. API Gateway • Фасад • Скрытие сервисов • Роутинг • Композиция ответов 83
84. API Gateway Плюсы: 84
85. API Gateway Плюсы: • Скрытие API сервисов 85
86. API Gateway Плюсы: • Скрытие API сервисов • Внутренние изменения 86
87. API Gateway Плюсы: • Скрытие API сервисов • Внутренние изменения • Выбор протокола 87
88. API Gateway Плюсы: • Скрытие API сервисов • Внутренние изменения • Выбор протокола • Безопасность 88
89. API Gateway Плюсы: • Скрытие API сервисов • Внутренние изменения • Выбор протокола • Безопасность • Меньшая задержка 89
90. API Gateway Плюсы: • Скрытие API сервисов • Внутренние изменения • Выбор протокола • Безопасность • Меньшая задержка • Отделение общих функций 90
91. API Gateway Минусы: 91
92. API Gateway Минусы: • Единая точка отказа 92
93. API Gateway Минусы: • Единая точка отказа • Узкое место 93
94. API Gateway Минусы: • Единая точка отказа • Узкое место • Склонность к разрастанию 94
97. Backend for frontend 97
98. Backend for frontend • Отдельный API для разных клиентов 98
99. Backend for frontend • Отдельный API для разных клиентов • Разработка командой клиента 99
100. Backend for frontend Плюсы: 100
101. Backend for frontend Плюсы: • API точнее соответствует клиенту 101
102. Backend for frontend Плюсы: • API точнее соответствует клиенту • Выше автономность 102
103. Backend for frontend Плюсы: • API точнее соответствует клиенту • Выше автономность Минусы: 103
104. Backend for frontend Плюсы: • API точнее соответствует клиенту • Выше автономность Минусы: • Дублирование функциональности 104
105. Backend for frontend Плюсы: • API точнее соответствует клиенту • Выше автономность Минусы: • Дублирование функциональности • Выше сложность 105
106. Мультиязычность 106
107. Мультиязычность • Территориальная разобщенность 107
108. Мультиязычность • Территориальная разобщенность • Множество диалектов 108
109. Мультиязычность • Территориальная разобщенность • Множество диалектов • Черты самостоятельных языков 109
110. Мультиязычность • Территориальная разобщенность • Множество диалектов • Черты самостоятельных языков • Взаимодействие на русском языке 110
111. Контракты 111
112. Контракты • OpenAPI, gRPC, GraphQL … 112
113. Контракты • OpenAPI, gRPC, GraphQL … • Contract-first 113
114. Контракты • OpenAPI, gRPC, GraphQL … • Contract-first • Описание событий 114
115. Контракты • OpenAPI, gRPC, GraphQL … • Contract-first • Описание событий • Swagger UI 115
116. Координация процессов 116
117. Координация действий • Бытовая деятельность • Общественная деятельность 117
118. Бытовая деятельность 118
119. Бытовая деятельность • Разделение работы на мужскую и женскую 119
120. Бытовая деятельность • Разделение работы на мужскую и женскую • Промысел / ведение хозяйства 120
121. Бытовая деятельность • Разделение работы на мужскую и женскую • Промысел / ведение хозяйства • Оленевод / чумработница 121
122. Бытовая деятельность • Мужские занятия: 122
123. Бытовая деятельность • Мужские занятия: • Добыча рыбы и мяса 123
124. Бытовая деятельность • Мужские занятия: • Добыча рыбы и мяса • Заготовка и сдача пушнины 124
125. Бытовая деятельность • Мужские занятия: • Добыча рыбы и мяса • Заготовка и сдача пушнины • Уход за оленями 125
126. Бытовая деятельность • Мужские занятия: • Добыча рыбы и мяса • Заготовка и сдача пушнины • Уход за оленями • Заготовка материалов для построек 126
127. Бытовая деятельность • Мужские занятия: • Добыча рыбы и мяса • Заготовка и сдача пушнины • Уход за оленями • Заготовка материалов для построек • Изготовление инструментов 127
128. 128 Steve Morgan stevemorganphoto.co.uk
129. Бытовая деятельность • Женские занятия: 129
130. Бытовая деятельность • Женские занятия: • Приготовление пищи 130
131. Бытовая деятельность • Женские занятия: • Приготовление пищи • Заготовка дров 131
132. Бытовая деятельность • Женские занятия: • Приготовление пищи • Заготовка дров • Создание утвари 132
133. Бытовая деятельность • Женские занятия: • Приготовление пищи • Заготовка дров • Создание утвари • Шитье одежды 133
134. Бытовая деятельность • Женские занятия: • Приготовление пищи • Заготовка дров • Создание утвари • Шитье одежды • Уход за детьми и гостями 134
136. 136 Choreography
137. Choreography • Строится на событиях 137
138. Choreography • Строится на событиях • Уменьшает связность 138
139. Choreography • Строится на событиях • Уменьшает связность • Позволяет легко добавлять новые сервисы 139
140. Choreography • Строится на событиях • Уменьшает связность • Позволяет легко добавлять новые сервисы • Обогащение/Pipes and Filters 140
141. Choreography • Строится на событиях • Уменьшает связность • Позволяет легко добавлять новые сервисы • Обогащение/Pipes and Filters • Простые сценарии 141
142. Choreography • Строится на событиях • Уменьшает связность • Позволяет легко добавлять новые сервисы • Обогащение/Pipes and Filters • Простые сценарии • Сложно понять текущее состояние процесса 142
143. Choreography • Строится на событиях • Уменьшает связность • Позволяет легко добавлять новые сервисы • Обогащение/Pipes and Filters • Простые сценарии • Сложно понять текущее состояние процесса • Сложнее восстановление после сбоя 143
144. Общественная деятельность 144
145. Общественная деятельность • Патриархальное устройство 145
146. Общественная деятельность • Патриархальное устройство • Вопросы внутриобщинной жизни решались на сходе 146
147. Общественная деятельность • Патриархальное устройство • Вопросы внутриобщинной жизни решались на сходе • Правом голоса обладали старшие мужчины 147
150. 150 Orchestration
151. Orchestration • Строится на командах 151
152. Orchestration • Строится на командах • Conductor 152
153. Orchestration • Строится на командах • Conductor • Сложные сценарии 153
154. Orchestration • Строится на командах • Conductor • Сложные сценарии • Централизованная обработка ошибок 154
155. Orchestration • Строится на командах • Conductor • Сложные сценарии • Централизованная обработка ошибок • Единая точка отказа 155
156. Orchestration • Строится на командах • Conductor • Сложные сценарии • Централизованная обработка ошибок • Единая точка отказа • Conductor склонен к разрастанию 156
157. Обработка запросов 157
158. Предметы быта • Обмен • Самостоятельное создание 158
159. Предметы быта: обмен 159
160. Предметы быта: обмен • Ярмарки 160
161. Предметы быта: обмен • Ярмарки • Торговля и обмен 161
162. Предметы быта: обмен • Ярмарки • Торговля и обмен • Поддержание контактов 162
163. Предметы быта: обмен • Ярмарки • Торговля и обмен • Поддержание контактов • Уплата налога (ясак) 163
173. Предметы быта: обмен • Взаимодействие 173
174. Обмен данными между сервисами • Синхронный • Асинхронный 174
176. Синхронный вызов сервиса • Запрос к другому сервису • Увеличивает связность • Каскадные запросы • Результат доступен сразу 176
178. Event-Carried State Transfer • Дублирование данных другого сервиса 178
179. Event-Carried State Transfer • Дублирование данных другого сервиса • Трансляция в домен сервиса 179
180. Event-Carried State Transfer • Дублирование данных другого сервиса • Трансляция в домен сервиса • Аналог кеширования 180
181. Event-Carried State Transfer Плюсы: 181
182. Event-Carried State Transfer Плюсы: • Уменьшает связность 182
183. Event-Carried State Transfer Плюсы: • Уменьшает связность • Повышает автономность 183
184. Event-Carried State Transfer Плюсы: • Уменьшает связность • Повышает автономность • Уменьшает задержку 184
185. Event-Carried State Transfer Плюсы: • Уменьшает связность • Повышает автономность • Уменьшает задержку • Отложенная обработка 185
186. Event-Carried State Transfer Минусы: 186
187. Event-Carried State Transfer Минусы: • Согласованность в конечном счёте 187
188. Event-Carried State Transfer Минусы: • Согласованность в конечном счёте • Время на обновление 188
189. Event-Carried State Transfer Минусы: • Согласованность в конечном счёте • Время на обновление • Большое количество данных в сообщениях 189
190. Event-Carried State Transfer Минусы: • Согласованность в конечном счёте • Время на обновление • Большое количество данных в сообщениях • Большое количество подписок 190
191. Предметы быта: создание 191
192. Предметы быта: создание • Материалы обусловлены средой обитания и родом деятельности 192
193. Предметы быта: создание • Жилища 193
194. Предметы быта: создание • Жилища • Срубные наземные постройки 194
195. Предметы быта: создание • Жилища • Срубные наземные постройки • Каркас из жердей, крытый берестой, травой, ветками, сеном 195
196. Предметы быта: создание • Жилища • Срубные наземные постройки • Каркас из жердей, крытый берестой, травой, ветками, сеном • Чум 196
197. Предметы быта: создание • Одежда 197
198. Предметы быта: создание • Одежда • Шкуры домашних оленей 198
199. Предметы быта: создание • Одежда • Шкуры домашних оленей • Шкуры крупных копытных (дикий олень, лось) 199
200. Предметы быта: создание • Одежда • Шкуры домашних оленей • Шкуры крупных копытных (дикий олень, лось) • Шкурки водоплавающих птиц 200
201. Предметы быта: создание • Одежда • Шкуры домашних оленей • Шкуры крупных копытных (дикий олень, лось) • Шкурки водоплавающих птиц • Шкурки пушных зверей 201
202. Предметы быта: создание • Одежда • Шкуры домашних оленей • Шкуры крупных копытных (дикий олень, лось) • Шкурки водоплавающих птиц • Шкурки пушных зверей • Рыбьи кожи 202
203. Предметы быта: создание • Утварь 203
204. Предметы быта: создание • Утварь • Дерево 204 Тазовский районный краеведческий музей goskatalog.ru/portal/#/museums?id=2578
205. Предметы быта: создание • Утварь • Дерево • Береста 205 Тазовский районный краеведческий музей goskatalog.ru/portal/#/museums?id=2578
206. Предметы быта: создание • Утварь • Дерево • Береста • Шкуры зверей, птиц, рыб 206 Тазовский районный краеведческий музей goskatalog.ru/portal/#/museums?id=2578
207. Предметы быта: создание • Утварь • Дерево • Береста • Шкуры зверей, птиц, рыб • Рога и кости 207 Тазовский районный краеведческий музей goskatalog.ru/portal/#/museums?id=2578
208. Предметы быта: создание • Независимость 208
211. UI Composition 211
212. UI Composition • Независимые компоненты 212
213. UI Composition • Независимые компоненты • Компонент UI связан со своим сервисом 213
214. UI Composition • Независимые компоненты • Компонент UI связан со своим сервисом • Кросс-функциональные команды 214
215. UI Composition • Независимые компоненты • Компонент UI связан со своим сервисом • Кросс-функциональные команды • Инкапсуляция данных 215
216. UI Composition • Независимые компоненты • Компонент UI связан со своим сервисом • Кросс-функциональные команды • Инкапсуляция данных • Сервис композиции и общего функционала 216
217. UI Composition • Независимые компоненты • Компонент UI связан со своим сервисом • Кросс-функциональные команды • Инкапсуляция данных • Сервис композиции и общего функционала • Асинхронное взаимодействие ui-компонентов 217
218. UI Composition Плюсы: 218
219. UI Composition Плюсы: • Меньшая связанность 219
220. UI Composition Плюсы: • Меньшая связанность • Меньше кодовая база 220
221. UI Composition Плюсы: • Меньшая связанность • Меньше кодовая база • Независимые команды 221
222. UI Composition Плюсы: • Меньшая связанность • Меньше кодовая база • Независимые команды Минусы: 222
223. UI Composition Плюсы: • Меньшая связанность • Меньше кодовая база • Независимые команды Минусы: • Сложность 223
224. UI Composition Плюсы: • Меньшая связанность • Меньше кодовая база • Независимые команды Минусы: • Сложность • Дублирование зависимостей 224
225. Каслание 225
226. Каслание • Перекочёвка оленьего стада 226
227. Каслание • Перекочёвка оленьего стада • Протяженность маршрутов может достигать 1500 км в год 227
228. Каслание • Перекочёвка оленьего стада • Протяженность маршрутов может достигать 1500 км в год • Летние стоянки у моря 228
229. Каслание • Перекочёвка оленьего стада • Протяженность маршрутов может достигать 1500 км в год • Летние стоянки у моря • Зимние стоянки в лесотундре 229
230. Каслание • Перекочёвка оленьего стада • Протяженность маршрутов может достигать 1500 км в год • Летние стоянки у моря • Зимние стоянки в лесотундре • Сезонная смена нарт 230
231. geographyofrussia.com/karta-poluostrov-yamal-gydanskij-poluostrov/ 231
232. geographyofrussia.com/karta-poluostrov-yamal-gydanskij-poluostrov/ Летние стоянки Зимние стоянки Смена нарт 232
236. Предметы быта • Разделение по типам 236
238. CQRS • Разделение чтения и записи 238
239. CQRS • Разделение чтения и записи • Взаимодействие пользователей и устаревшие данные 239
240. CQRS • Разделение чтения и записи • Взаимодействие пользователей и устаревшие данные • Внутри своего ограниченного контекста 240
241. Запросы 241
242. Запросы • Дополнительное хранилище данных 242
243. Запросы • Дополнительное хранилище данных • Простые запросы 243
244. Запросы • Дополнительное хранилище данных • Простые запросы • Быстрые валидации 244
245. Запросы • Дополнительное хранилище данных • Простые запросы • Быстрые валидации • Время синхронизации 245
246. Команды 246
247. Команды • Базовая валидация команд 247
248. Команды • Базовая валидация команд • Нотификации 248
249. Команды • Базовая валидация команд • Нотификации • Уменьшение потенциальных неудач 249
250. Команды • Базовая валидация команд • Нотификации • Уменьшение потенциальных неудач • Промежуточные бизнес-состояния 250
251. Команды • Базовая валидация команд • Нотификации • Уменьшение потенциальных неудач • Промежуточные бизнес-состояния • Отложенное выполнение 251
252. Заключение 252
254. Шаманизм 254
255. Шаманизм 255 • Двоеверие: смесь православия и язычества
256. Шаманизм 256 • Двоеверие: смесь православия и язычества • Шаман - посредник между мирами
257. Шаманизм 257 • Двоеверие: смесь православия и язычества • Шаман - посредник между мирами • Сейчас шаманов не осталось
259. Ссылки (паттерны) • API Gateway и BFF • Orchestration • Choreography • Pub/sub • Event-Carried State Transfer • UI composition • Micro Frontends • CQRS 259
260. Ссылки (народы Севера) • Курс Арзамаса "Открывая Россию: Ямал" • Курс Арзамаса "Антропология Севера: кто и как живет там, где холодно" • Этнографическая экспедиция «Настоящие люди» • Дмитрий Функ — Коренные малочисленные народы Сибири • Алексей Мосеевский — Народы Севера • Оленеводы Ямала • Музей кочевой культуры 260
261. Вопросы? 261 @rafaelldi rafaelldi northern-dev.net