Как мы залезли на облако, всё настроили как надо, и теперь едим попкорн

Превратить обычное серверное Java приложение в облачную платформу может оказаться намного сложнее, чем кажется. Главная проблема, естественно, заключается в обеспечении «коммунальности» (multi-tenancy). В этом докладе я поделюсь опытом JFrog в создании SaaS решения, которое успешно используется сообществом Java. После короткого вступления о видах облачных приложений, я расскажу об архитектурных проблемах с которыми мы столкнулись и способами их решения, затем мы поговорим о важности автоматизации при поддержании одновременно скачиваемой и облачной версий продукта и о таких инструментах как Chef и Puppet для ее достижения, и в завершение доклада я поделюсь с вами наблюдениями о смене парадигмы, которая произошла в JFrog-е в процессе перехода на SaaS. Ну, и попкорн!

Transcript

1. КАК МЫ ЗАЛЕЗЛИ НА ОБЛАКО, ВСЁ НАСТРОИЛИ КАК НАДО, и теперь едим попкорн
2. Попкорн
3. Об чём речь?
4. Об чём речь? • Чего былo
5. Об чём речь? • Чего было • Чего стало
6. Об чём речь? • Чего было • Чего стало • Как мы с этим теперь живем (hint: попкорн)
7. Об чём речь? • Чего было • Чего стало • Как мы с этим теперь живем (hint: попкорн)
8. Не забыть главного!
9. Был бы человек…
10. Джей-Бáрух
11. Developer кто?
12. Developer кто?
13. Какая-какая лягушка?
14. Какая-какая лягушка?
15. Какая-какая лягушка?
16. Какая-какая лягушка?
17. Artifactory щито?
18. Artifactory щито?
19. Artifactory щито?
20. Опросик замутим! Я пользуюсь бинарным репозиторием:
21. Опросик замутим! Я пользуюсь бинарным репозиторием:  Ясный перец, Artifactory!
22. Опросик замутим! Я пользуюсь бинарным репозиторием:  Ясный перец, Artifactory!  Стыдно, конечно, но пока еще Nexus.
23. Опросик замутим! Я пользуюсь бинарным репозиторием:  Ясный перец, Artifactory!  Стыдно, конечно, но пока еще Nexus.  Я не люблю фичи, у меня Archiva.
24. Опросик замутим! Я пользуюсь бинарным репозиторием:  Ясный перец, Artifactory!  Стыдно, конечно, но пока еще Nexus.  Я не люблю фичи, у меня Archiva.  Я пещерный человек. Ась? Бинарный кто?
25. Опросик замутим! Я пользуюсь бинарным репозиторием:  Ясный перец, Artifactory!  Стыдно, конечно, но пока еще Nexus.  Я не люблю фичи, у меня Archiva.  Я пещерный человек. Ась? Бинарный кто? Итого: 146%
26. Как всё начиналось…
27. Как всё начиналось…
28. Yet Another Java Server App
29. Женя Кролик?
31. Checksum storage
32. Checksum storage
33. Checksum storage
34. Checksum storage
35. Append Only, GC-ed
36. Yet Another Java Server App
37. Неплохо получилось…
38. Неплохо получилось…
39. Неплохо получилось…
40. Неплохо получилось…
41. Неплохо получилось…
43. Пользователи одобряэ:
44. Пользователи одобряэ: – Не нужно содержать сервера
45. Пользователи одобряэ: – Не нужно содержать сервера – Офигительная техподдержка
46. Пользователи одобряэ: – Не нужно содержать сервера – Офигительная техподдержка – Всегда апдейтнут!
47. Пользователи одобряэ: – Не нужно содержать сервера – Офигительная техподдержка – Всегда апдейтнут! Пользователи нэгодуэ:
48. Пользователи одобряэ: – Не нужно содержать сервера – Офигительная техподдержка – Всегда апдейтнут! Пользователи нэгодуэ: – Нельзя задеплоить плагинчик!
49. Пользователи одобряэ: – Не нужно содержать сервера – Офигительная техподдержка – Всегда апдейтнут! Пользователи нэгодуэ: – Нельзя задеплоить плагинчик!
50. Пользователи одобряэ: – Не нужно содержать сервера – Офигительная техподдержка – Всегда апдейтнут! Пользователи нэгодуэ: – Нельзя задеплоить плагинчик!
51. Artifactory SaaS
52. А кому хоккейную клюшку?
53. А кому хоккейную клюшку?
54. Дохрена артифактов!
57. Он сказал «поехали»
58. Он сказал «поехали»
59. Bullshit Bingo
60. Много шума из *aaS
61. Всё As A Service
62. Всё As A Service Самообслуживание
63. Всё As A Service Самообслуживание Вас много…
65. GaaE: Google as an Example
66. GaaE: Google as an Example  
67. GaaE: Google as an Example    
68. GaaE: Google as an Example      
69. GaaE: Google as an Example        
70. AaaE: Amazon as an Example
71. AaaE: Amazon as an Example  
72. AaaE: Amazon as an Example    
73. AaaE: Amazon as an Example      
74. AaaE: Amazon as an Example        
75. SaaS это больно
76. Вас много ©Чопта Роисси
77. Да, кстати… В связи с актуальными событиями, в слайды добавлено огромное количество Чопты Роисси. Sorry about that. Meme overuse!
78. Вас много ©Чопта Роисси
80. А когда? Давайте считать!
81. А когда? Давайте считать!
83. Дано: Релиз Java 7 07/2011 Релиз Java 8 12/2012 Найти: Релиз Java 9 ?
85. Java 8: 12/2012
86. Java 8: 12/2012 - Java 7: 07/2011
87. Java 8: 12/2012 - Java 7: 07/2011 = Цикл в 15 месяцев
88. Java 8: 12/2012 - Java 7: 07/2011 = Цикл в 15 месяцев Вывод: Java 9: 05/2013
89. Java 8: 12/2012 - Java 7: 07/2011 = Цикл в 15 месяцев Вывод: Java 9: 05/2013
90. Народная примета: Когда Марк пишет про поезда, это к задержке релиза
91. Xe-xe…
92. Java 7: 07/2011
93. Java 7: 07/2011 + 24 месяца =
94. Java 7: 07/2011 + 24 Месяца = Java 8: 07/2013
95. Щаз…
96. Java 7: 07/2011 + 24 Месяца = Java 8: 07/2013
97. Java 7: 07/2011 + 24 месяца = Java 8: 03/2014 Сколько Марк скажет
98. Java 7: 07/2011 + 24 месяца = Java 8: 03/2014 + 24 месяца = Сколько Марк скажет
99. Java 7: 07/2011 + 24 месяца = Java 8: 03/2014 + 24 месяца = Java 9: 03/2016 Сколько Марк скажет
100. Java 7: 07/2011 + 24 месяца = Java 8: 03/2014 + 24 месяца = Java 9: 03/2016 (Если Марк не будет больше писать про поезд) Сколько Марк скажет
101. Java 7: 07/2011 + 24 месяца = Java 8: 03/2014 + 24 месяца = Java 9: 03/2016 (Если марк не будет больше писать про поезд) Сколько Марк скажет
102. Тут была шутка про Марка и Чопту Роисси, но оказалось, что JavaOne организует Oracle. Oops.
103. Тут была шутка про Марка и Потчу Роисси, но оказалось, что JavaOne организует Oracle. Oops. Этот момент, когда понимаешь, что сказал лишнего…
105. Виды Multi Tenancy
106. Виды Multi Tenancy
107. Виды Multi Tenancy
108. Виды Multi Tenancy
109. GaaE для видов Multi Tenancy
110. GaaE для видов Multi Tenancy
111. GaaE для видов Multi Tenancy
112. GaaE для видов Multi Tenancy
113. Сравним-ка!
114.  Сравним-ка!
115.    Сравним-ка!
116.    Сравним-ка! 
117.      Сравним-ка! 
118.       Сравним-ка! 
119.       Сравним-ка!  
120.         Сравним-ка!  
121.         Сравним-ка!   
122.          Сравним-ка!   
123. Отдельные WAR-ы: Tomcat Root ┌── lib ├── webapps │ ├── customer-name │ ├── other-customer-name │ └── many other customers └── other dirs (bin, conf, log, etc)
124. Отдельные WAR-ы
125. Отдельные WAR-ы Это был PermGen. Да-да.
126. Мы любим игрушки
127. Мы любим игрушки Artifactory-2.6.6.war\webapp\WEB-INF\lib$du –m 51 .
128. Вас, классов, много, а я, PermGen, один.
129. Вас, классов, много, а я, PermGen, один.
130. В Москву, в Москву!
131. Ну, то есть, в общий classloader!
132. И что, будет работать?
133. И что, будет работать?
134. И что, будет работать?
135. Квест «В поисках статического состояния» (Sierra, who else?)
136. Квест «В поисках статического состояния» (Sierra, who else?)
137. Spring Framework
138. Spring Framework
139. Злодейский App. Context Holder Pattern
140. public class AppCtxHolder implements ApplicationContextAware { private static ApplicationContext ctx; public AppCtxHolder() { } public void setApplicationContext(ApplicationContext applicationContext) { ctx = applicationContext; } public static ApplicationContext getApplicationContext() { return ctx; } } Злодейский App. Context Holder Pattern
141. public class AppCtxHolder implements ApplicationContextAware { private static ApplicationContext ctx; public AppCtxHolder() { } public void setApplicationContext(ApplicationContext applicationContext) { ctx = applicationContext; } public static ApplicationContext getApplicationContext() { return ctx; } } Злодейский App. Context Holder Pattern
142. public class AppCtxHolder implements ApplicationContextAware { private static ApplicationContext ctx; public AppCtxHolder() { } public void setApplicationContext(ApplicationContext applicationContext) { ctx = applicationContext; } public static ApplicationContext getApplicationContext() { return ctx; } } Злодейский App. Context Holder Pattern
143. Apache Wicket
144. Apache Wicket Мы полюбили Wicket за то, что он позволяет людям, которые ненавидят UI, делать UI, который не очень ненавидят пользователи.
145. Apache Wicket
146. Logger
147. Logger
148. Софт класса CATS
149. Jackrabbit
150. Jackrabbit
151. Heap-wide Caches
152. Это можно не читать.
153. ┌── lib ├── webapps │ ├── customer-name │ │ ├── favicon.ico │ │ ├── META-INF │ │ └── WEB-INF │ │ ├── web.xml │ │ └── classes │ │ └── DUMMY.TXT │ ├── other-customer-name │ │ ├── favicon.ico │ │ │ └── META-INF │ │ └── WEB-INF │ └── many other customers └── other dirs (bin, conf, log, etc) Tomcat Root – A JARы где?
154. ┌── lib ├── webapps │ ├── customer-name │ │ ├── favicon.ico │ │ ├── META-INF │ │ └── WEB-INF │ │ ├── web.xml │ │ └── classes │ │ └── DUMMY.TXT │ ├── other-customer-name │ │ ├── favicon.ico │ │ │ └── META-INF │ │ └── WEB-INF │ └── many other customers └── other dirs (bin, conf, log, etc) Tomcat Root – A JARы где?
155. ┌── lib ├── webapps │ ├── customer-name │ │ ├── favicon.ico │ │ ├── META-INF │ │ └── WEB-INF │ │ ├── web.xml │ │ └── classes │ │ └── DUMMY.TXT │ ├── other-customer-name │ │ ├── favicon.ico │ │ │ └── META-INF │ │ └── WEB-INF │ └── many other customers └── other dirs (bin, conf, log, etc) Tomcat Root – A JARы где?
156. ┌── lib │ ├── artifactory │ │ ├── artifactory-*.jar │ │ ├── jackrabbit-core-jfrog-2.2.8c.jar │ │ ├── spring-core-3.1.1.RELEASE.jar │ │ ├── wicket-core-1.5.3.jar │ │ └── other jars │ ├── catalina.jar │ ├── servlet-api.jar │ └── other jars ├── webapps └── other dirs (bin, conf, log, etc) Tomcat Root – А в глобальной Lib-е!
157. ┌── lib │ ├── artifactory │ │ ├── artifactory-*.jar │ │ ├── jackrabbit-core-jfrog-2.2.8c.jar │ │ ├── spring-core-3.1.1.RELEASE.jar │ │ ├── wicket-core-1.5.3.jar │ │ └── other jars │ ├── catalina.jar │ ├── servlet-api.jar │ └── other jars ├── webapps └── other dirs (bin, conf, log, etc) Tomcat Root – А в глобальной Lib-е!
158. ┌── lib │ ├── artifactory │ │ ├── artifactory-*.jar │ │ ├── jackrabbit-core-jfrog-2.2.8c.jar │ │ ├── spring-core-3.1.1.RELEASE.jar │ │ ├── wicket-core-1.5.3.jar │ │ └── other jars │ ├── catalina.jar │ ├── servlet-api.jar │ └── other jars ├── webapps └── other dirs (bin, conf, log, etc) Tomcat Root – А в глобальной Lib-е!
159. ┌── lib │ ├── artifactory │ │ ├── artifactory-*.jar │ │ ├── jackrabbit-core-jfrog-2.2.8c.jar │ │ ├── spring-core-3.1.1.RELEASE.jar │ │ ├── wicket-core-1.5.3.jar │ │ └── other jars │ ├── catalina.jar │ ├── servlet-api.jar │ └── other jars ├── webapps └── other dirs (bin, conf, log, etc) Tomcat Root – А в глобальной Lib-е!
160. ┌── lib │ ├── artifactory │ │ ├── artifactory-*.jar │ │ ├── jackrabbit-core-jfrog-2.2.8c.jar │ │ ├── spring-core-3.1.1.RELEASE.jar │ │ ├── wicket-core-1.5.3.jar │ │ └── other jars │ ├── catalina.jar │ ├── servlet-api.jar │ └── other jars ├── webapps └── other dirs (bin, conf, log, etc) Tomcat Root – А в глобальной Lib-е!
161. PaaS или IaaS?
162. PaaS или IaaS?
163. А чего там было про апгрейды DB?
164. Сисадмины, сисадмины, а я маленький такой
165. Всех на самообслуживание!
167. Неет! Только не fork!
170. Об процесс
174. Artifactory собирается с помощью Artifactory!
175. Правильные гвозди!
176. Правильные гвозди!
177. The Paradigm…
178. Мы нынче всё делаем наоборот
179. Ну, т.е. раньше всё делали наоборот
180. Получилось – пальчики оближешь!
181. А, ну, и попкорн!