Александр Чертов "gRPC для .NET разработчика"

Последние годы, казалось, что RPC решения в экосистеме .Net стремительно уходят в небытие. Но не так давно вышел ASP.Net Core 3.0, где одной из главных фич стал gRPC- современный RPC фреймворк, разработанный компанией Google и активно поддерживаемый Cloud Native Computing Foundation. В рамках доклада мы рассмотрим как внедрить gRPC в свой проект, что нам это даст(и даст ли?) и с какими проблемами мы можем столкнутся.

Transcript

1. gRPC для .NET разработчика 1
2. Обо мне • Senior dotnet developer в ABBYY, Common Cloud • Активист MskDotNet Community 2
3. Применение технологий ABBYY ТЕХНОЛОГИИ ИСКУССТВЕННОГО ИНТЕЛЛЕКТА Оцифровка Классифи- кация Преобра- зование документо в Извлечение данных Структурированные документы Слабоструктури- рованные документы Неструктурированные документы ABBYY FineReader ABBYY FlexiCapture ABBYY NLP ABBYY Intelligent Search
4. Проекты ABBYY в разных отраслях Нефтегаз Энергетика Госсектор Образование Медицина Транспорт и логистика Банки и финансы Ритейл Страхование
5. Agenda • Сравнение RPC и REST подходов • Что такое gRPC • Основные достоинства и недостатки • gRPC в .NET • Как внедрить gRPC • И что нам это даст 5
6. RPC 6 REST
7. RPC 7 REST • ~ 1980-е
8. RPC 8 REST • ~ 1980-е • Вызов методов сервиса как локальных
9. RPC 9 REST • ~ 1980-е • Вызов методов сервиса как локальных • Два компонента: сетевой протокол и технология сериализации
10. RPC 10 REST • ~ 1980-е • Вызов методов сервиса как локальных • Два компонента: сетевой протокол и технология сериализации • Не навязывает особых требований к архитектуре
11. RPC 11 REST • ~ 1980-е • Вызов методов сервиса как локальных • Два компонента: сетевой протокол и технология сериализации • Не навязывает особых требований к архитектуре • Есть множество реализаций, часть привязаны к языку/платформе.
12. RPC 12 REST • ~ 1980-е • Вызов методов сервиса как локальных • Два компонента: сетевой протокол и технология сериализации • Не навязывает особых требований к архитектуре • Есть множество реализаций, часть привязаны к языку/платформе. • SOAP
13. RPC 13 REST • ~ 1980-е • Вызов методов сервиса как локальных • Два компонента: сетевой протокол и технология сериализации • Не навязывает особых требований к архитектуре • Есть множество реализаций, часть привязаны к языку/платформе. • SOAP • WCF - .NET
14. RPC 14 REST • ~ 1980-е • Вызов методов сервиса как локальных • Два компонента: сетевой протокол и технология сериализации • Не навязывает особых требований к архитектуре • Есть множество реализаций, часть привязаны к языку/платформе. • SOAP • WCF - .NET • ~ 2000 год
15. RPC 15 REST • ~ 1980-е • Вызов методов сервиса как локальных • Два компонента: сетевой протокол и технология сериализации • Не навязывает особых требований к архитектуре • Есть множество реализаций, часть привязаны к языку/платформе. • SOAP • WCF - .NET • ~ 2000 год • Ресурсы в виде эндпоинтов
16. RPC 16 REST • ~ 1980-е • Вызов методов сервиса как локальных • Два компонента: сетевой протокол и технология сериализации • Не навязывает особых требований к архитектуре • Есть множество реализаций, часть привязаны к языку/платформе. • SOAP • WCF - .NET • ~ 2000 год • Ресурсы в виде эндпоинтов • HTTP методы для CRUD операций
17. RPC 17 REST • ~ 1980-е • Вызов методов сервиса как локальных • Два компонента: сетевой протокол и технология сериализации • Не навязывает особых требований к архитектуре • Есть множество реализаций, часть привязаны к языку/платформе. • SOAP • WCF - .NET • ~ 2000 год • Ресурсы в виде эндпоинтов • HTTP методы для CRUD операций • Ряд требований к сервисам
18. RPC 18 REST • ~ 1980-е • Вызов методов сервиса как локальных • Два компонента: сетевой протокол и технология сериализации • Не навязывает особых требований к архитектуре • Есть множество реализаций, часть привязаны к языку/платформе. • SOAP • WCF - .NET • ~ 2000 год • Ресурсы в виде эндпоинтов • HTTP методы для CRUD операций • Ряд требований к сервисам • Достаточно предсказуем и унифицирован
19. RPC vs REST Последние годы REST подход доминирует, но для микросервисных решений он не всегда подходит 19
20. 20 Проект Stubby Немного истории
21. 21 Немного истории gRPC Remote Procedure Calls Март, 2015
22. 22 Немного истории
23. 23 Немного истории
24. gRPC 24
25. gRPC Плюсы • Малый размер сообщений 25
26. gRPC Плюсы • Малый размер сообщений • Эффективная сериализация/десериализация 26
27. Performance 27
28. Performance 28
29. gRPC Плюсы • Малый размер сообщений • Эффективная сериализация/десериализация • Мультиплексирование 29
30. gRPC Плюсы • Малый размер сообщений • Эффективная сериализация/десериализация • Мультиплексирование • Поддержка потоковой передачи данных 30
32. gRPC Плюсы • Малый размер сообщений • Эффективная сериализация/десериализация • Мультиплексирование • Поддержка потоковой передачи данных • Contract first 32
33. gRPC Плюсы • Малый размер сообщений • Эффективная сериализация/десериализация • Мультиплексирование • Поддержка потоковой передачи данных • Contract first • Поддержка большого кол-ва языков 33
34. gRPC Минусы • Нет поддержки со стороны браузеров(но есть официальная обертка) 34
35. gRPC Минусы • Нет поддержки со стороны браузеров(но есть официальная обертка) • Нельзя хостить в Azure App Services и IIS(пока) 35
36. gRPC Минусы • Нет поддержки со стороны браузеров(но есть официальная обертка) • Нельзя хостить в Azure App Services и IIS(пока) • Плохо с тулингом 36
37. gRPC Минусы • Нет поддержки со стороны браузеров(но есть официальная обертка) • Нельзя хостить в Azure App Services и IIS(пока) • Плохо с тулингом • Некоторые вещи делаются сложнее чем в обычных рестовых сервисах(например кэширование, балансировка). 37
38. Что же в .Net? 38
39. gRPC- .NET общее 39
40. gRPC- .NET общее 40
41. gRPC- .NET общее 41
42. gRPC- .NET общее 42
43. Внедряем gRPC Дано: • Простейший файловый сервис • Есть вариант на Asp.NET Core 3 для сравнения • Три метода: взять файл, загрузить файл и получить метаданные файлов 43
44. gRPC- .NET сервер 44
45. gRPC- .NET сервер 45
46. gRPC- .NET сервер 46
47. gRPC- .NET сервер 47
48. gRPC- .NET сервер 48
49. gRPC- IDL 49
50. gRPC- IDL 50
51. gRPC- IDL 51
52. gRPC- IDL 52
53. gRPC- IDL 53
54. gRPC- IDL 54
55. gRPC- IDL 55 1 2 3 1 - тип данных 2 - название поля 3- тег поля
56. gRPC - .Net protobuf .proto type C# type fixed32 uint fixed64 ulong sfixed32 int sfixed64 long bool bool string string bytes ByteString .proto type C# type double double float float int32 int int64 long uint32 uint uint64 ulong sint32 int sint64 long 56
57. gRPC- IDL 57 1 2
58. gRPC- IDL 58 1 2
59. gRPC- IDL 59
60. gRPC- .NET сервер 60
61. gRPC- .NET сервер 61
62. gRPC- .NET сервер 62
63. gRPC- .NET сервер 63
64. gRPC- .NET клиент 64
65. gRPC- .NET клиент 65
66. gRPC- .NET клиент 66
67. gRPC- .NET клиент 67
68. gRPC- .NET клиент 68
69. Таймауты 69
70. Таймауты 70
71. Таймауты 71
72. Немного про ошибки. 72
73. Ошибки GRPC_STATUS_CANCELLED GRPC_STATUS_DEADLINE_EXCEEDED GRPC_STATUS_UNIMPLEMENTED GRPC_STATUS_UNAVAILABLE GRPC_STATUS_UNKNOWN GRPC_STATUS_INTERNAL GRPC_STATUS_RESOURCE_EXHAUSTED GRPC_STATUS_UNAUTHENTICATED 73
74. Ошибки Aborted AlreadyExists DataLoss FailedPrecondition InvalidArgument NotFound OutOfRange PermissionDenied 74
75. Версионирование 75
76. Версионирование Сервисы 76 Сообщения
77. Версионирование сообщений 77
78. Версионирование.Добавление поля 78
79. Версионирование.Добавление поля 79
80. Версионирование.Удаление поля 80
81. Версионирование.Удаление поля 81
82. Версионирование.Удаление поля 82
83. Версионирование.Смена типа поля 83
84. Версионирование • Теги всегда должны быть уникальны и неизменны • Удаленные поля рекомендуется помечать ключевым словом reserved • Смена типа возможна, но ограничена 84
85. Версионирование сервисов 85
86. Версионирование. Добавление метода 86
87. Версионирование. Добавление метода 87
88. Версионирование. Добавление метода 88
89. Версионирование. Удаление метода 89
90. Версионирование. Удаление метода 90
91. Версионирование. Удаление метода 91
92. Версионирование Ключевая проблема - proto файлы не имеют версии. 92
93. Авторизация и Аутентификация 93
94. Авторизация и Аутентификация Channel credentials 94 Call credentials
95. Channel creds 95
96. Channel creds 96
97. Channel creds 97
98. Channel creds 98
99. Channel creds 99
100. Call creds 100
101. Call creds 101
102. Call creds 102
103. Call creds 103
104. Аутентификация - опции Поддерживаются: • Azure AD • OAuth 2 • IdentityServer • OpenID НЕ работает - windows аутентификация(NTLM/Kerberos) 104
105. Балансировка 105
106. Балансировка 106
107. Балансировка 107
108. Балансировка 108
109. Настало время бенчмаркать! 109
110. Бенчмарк. Эталон 110
111. Бенчмарк. Замер на локальной машине 111 Дано: • Grpc сервис • Asp.NET Core 3 сервис • BenchmarkDotNet • Текстовый файлик на ~100Кб • Файловое хранилище с парой тысяч файлов
112. Бенчмарк. Замер на локальной машине 112
113. Бенчмарк. Замер на локальной машине 113
114. Бенчмарк. Замер на локальной машине 114
115. Бенчмарк. Замер на локальной машине 115
116. Бенчмарк. Замер на локальной машине 116
117. Бенчмарк. Замер в облаке 117 • Azure VM, standard • North Europe регион • Docker
118. Бенчмарк. Замер в облаке 118
119. Бенчмарк. Замер в облаке 119
120. Бенчмарк. Замер в облаке 120
121. Бенчмарк. Замер в облаке 121
122. Бенчмарк. Замер в облаке 122
123. Бенчмарк. Замер в облаке 123
124. Выводы Плюсы: • В целом хороший перфоманс, но надо тестить для своих задач. • Потоковая передача данных • Contract first подход- штука интересная, но есть альтернативы. 124
125. Выводы Минусы: • Плохой вариант если надо дергать апи из браузера • Плохой вариант если хостится в IIS(пока по крайней мере) • Не самый лучший DX при отладке • Ряд вещей делается сложнее чем в REST. 125
126. Ссылки 1. https://grpc.io/ 2. https://performance-dot-grpc- testing.appspot.com/explore?dashboard=5636470266134528 3. https://visualrecode.com/blog/wcf-vs-grpc-round-2 4. https://github.com/grpc/grpc-dotnet 5. https://github.com/grpc-ecosystem/awesome-grpc 6. https://kubernetes.io/blog/2018/11/07/grpc-load-balancing-on-kubernetes- without-tears/ 7. https://dev.to/thangchung/performance-benchmark-grpc-vs-rest-in-net-core- 3-preview-8-45ak 8. https://medium.com/@EmperorRXF/evaluating-performance-of-rest-vs-grpc- 1b8bdf0b22da 9. https://labs.criteo.com/2017/05/serialization/ 10.https://github.com/grpc/grpc/issues/13586 126
127. Контакты telegram @tezjarl facebook https://www.facebook.com/tezjarl 127
128. Ссылки и контакты 128