Arquitecturas de microservicios: intentando no morir en el intento

La implantación de soluciones de arquitectura basadas en microservicios se ha extendido de forma imparable.
Grandes empresas como *Netflix* o *Amazon* abanderan estas arquitecturas como la solución a sus enormes sistemas, convirtiéndose en la referencia para miles de empresas que anhelan las capacidades que estos dos gigantes demuestran.

¿En qué momento implementar esta maravilla tecnológica puede llegar a hundir tu negocio? ¿cómo las capacidades de escalabilidad o resiliencia de estas arquitecturas pueden llegar a ser contraproducentes?

En esta charla vamos a hablar sobre análisis, definición y diseño de una arquitectura de microservicios. Intentaremos trocear un monolito a través patrón de estrangulamiento y analizar sus consecuencias.

Transcript

1. Arquitecturas de microservicios Diseño y definción
2. ¿Qué son los microservicios? “Microservices is a software architecture style, in which complex applications are composed of small, independent processes communicating with each other using language-agnostic APIs. These services are small, highly decoupled and focus on doing a small task.”
3. Twelve Factor App
4. Características • • • • • • • •
5. Si tu única herramienta es un martillo, tiendes a tratar cada problema como si fuera un clavo Abraham H. Maslow Psicólogo estadounidense ‘ ‘
6. ¿La solución para todos los males?
7. ¿La solución para todos los males? Trade off
8. Diseño de la arquitectura • • • • •
9. Estructura microservice microservice microservice Acceso a datos microservice microservice microservice Lógica de negocio
10. Caso de uso: Arquitecturas orientadas a eventos Sender Sender Sender Procesador Receptor
11. Descomposición de monolitos
12. Punto de partida Europe North America Asia Equity 15% 10% 5% Bonds 0% 0% 20% Funds 10% 20% 20% Google 15% Boeing 35% Cisco 10% Nike 40%
13. Punto de partida Datos Negocio Vista La madre de todos los Oracle Datos Negocio Vista Balanceador Sticky session
14. Diseño de la arquitectura - Definición de los dominios Instruments Prices Volatilities Correlations
15. Diseño de la arquitectura - Definición de los dominios Instruments Positions Portfolios Proposals Prices Volatilities Correlations
16. Diseño de la arquitectura - Definición de los dominios Positions Portfolios Proposals Clients Users Instruments Prices Volatilities Correlations
17. Diseño de la arquitectura - Definición de los dominios Positions Portfolios Proposals Clients Strategies Restrictions Users Instruments Prices Volatilities Correlations
18. Diseño de la arquitectura - Definición de los dominios Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Users Instruments Prices Volatilities Correlations
19. Diseño de la arquitectura - Definición de los dominios Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications Users
20. Patrón estrangulamiento Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications Users
21. Patrón estrangulamiento Users Datos Negocio Vista La madre de todos los Oracle
22. Patrón estrangulamiento Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications
23. Patrón estrangulamiento Users Datos Negocio Vista Prices La madre de todos los Oracle
24. Patrón estrangulamiento Cálculo de volatilidades? • El servicio llama a la API de prices, para obtener el histórico de precios de un instrumento • El servicio calcula y almacena en su base de datos • Salto al siguiente instrumento Users Datos Negocio Vista Prices La madre de todos los Oracle
25. Patrón estrangulamiento Cálculo de correlaciones? • El servicio llama a la API de prices, para obtener el histórico de precios del instrumento 1 • El servicio llama a la API de prices, para obtener el histórico de precios del instrumento 2a • El servicio calcula y almacena en su base de datos • El servicio llama a la API de prices, para obtener el histórico de precios del instrumento 2b • ... Users Datos Negocio Vista Prices La madre de todos los Oracle
26. Patrón estrangulamiento Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications ¿Por qué hemos fallado? Nos hemos centrado únicamente en el modelo de datos, sin darle sentido al uso que se le está dando.
27. Patrón estrangulamiento Users Datos Negocio Vista Prices Volatilities Correlations Cálculo de volatilidades? • El servicio llama a la API de prices, para obtener el histórico de precios de un instrumento • El servicio calcula • El servicio llama a la API de volatilities para almacenar el dato • Salto al siguiente instrumento La madre de todos los Oracle
28. Patrón estrangulamiento Users Datos Negocio Vista Prices Volatilities Correlations Cálculo de volatilidades? • El servicio de forma paralela, con un paralelismos de X llama a la API de prices, para obtener el histórico de precios de un instrumento • El servicio calcula • El servicio llama a la API de volatilities para almacenar el dato • Salto al siguiente instrumento La madre de todos los Oracle
29. Patrón estrangulamiento Users Datos Negocio Vista Prices Volatilities Correlations Cálculo de volatilidades? • “Algo” invoca de forma paralela a la API calculator que de forma paralela inicie los cálculos • El servicio calculator llama a la API de prices, para obtener el histórico de precios de un instrumento • ... Calculator La madre de todos los Oracle
30. Patrón estrangulamiento Users Datos Negocio Vista Prices Volatilities Correlations Cálculo de volatilidades? • “Algo” invoca de forma paralela a la API calculator que de forma paralela inicie los cálculos • El servicio calculator llama a la API de prices, para obtener el histórico de precios de un instrumento • ... Calculator ¿PUNTOS CRÍTICOS? La madre de todos los Oracle
31. Patrón estrangulamiento Users Datos Negocio Vista Prices Volatilities Correlations Cálculo de volatilidades? • “Algo” invoca de forma paralela a la API calculator que de forma paralela inicie los cálculos • El servicio calculator llama a la API de prices, para obtener el histórico de precios de un instrumento • ... Calculator ¿PUNTOS CRÍTICOS? : Debemos compensar las latencias a base de paralelismo La madre de todos los Oracle
32. Patrón estrangulamiento Users Datos Negocio Vista Prices Volatilities Correlations Cálculo de volatilidades? • “Algo” invoca de forma paralela a la API calculator que de forma paralela inicie los cálculos • El servicio calculator llama a la API de prices, para obtener el histórico de precios de un instrumento • ... Calculator ¿PUNTOS CRÍTICOS? : La BD del servicio Prices, “rinde como la madre de todos los Oracles”? La madre de todos los Oracle
33. Patrón estrangulamiento Users Datos Negocio Vista Prices Volatilities Correlations Cálculo de volatilidades? • “Algo” invoca de forma paralela a la API calculator que de forma paralela inicie los cálculos • El servicio calculator llama a la API de prices, para obtener el histórico de precios de un instrumento • ... Calculator ¿PUNTOS CRÍTICOS? : ¿Y si pensamos en la correlaciones? La madre de todos los Oracle
34. Patrón estrangulamiento Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications
35. Patrón estrangulamiento Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications
36. Patrón estrangulamiento Users Datos Negocio Vista Prices y asociados La madre de todos los Oracle Cálculo de volatilidades? • “Algo” invoca de forma paralela a la API ‘prices y asociados’ • ‘Prices y asociados’ debe contener la lógica para el cálculo además del acceso a datos • ...
37. Patrón estrangulamiento Users Datos Negocio Vista Prices y asociados La madre de todos los Oracle Cálculo de volatilidades? • “Algo” invoca de forma paralela a la API ‘prices y asociados’ • ‘Prices y asociados’ debe contener la lógica para el cálculo además del acceso a datos • ... ¿PUNTOS CRÍTICOS? : La BD del servicio Prices y asociados, “rinde como la madre de todos los Oracles”?
38. Patrón estrangulamiento Instruments Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications
39. ¿Qué hemos aportado a negocio? • • • • •
40. ¿Qué hemos aportado a negocio? • • • • •
41. ¿Qué hemos aportado a negocio? • • • • •
42. ¿Qué hemos aportado a negocio? • • • • •
43. ¿Qué hemos aportado a negocio? • • • • •
44. ¿Qué hemos aportado a negocio? • • • • •
45. ¿Qué hemos aportado a negocio? • • • • •
46. Punto de partida Datos Negocio Vista La madre de todos los Oracle Datos Negocio Vista Balanceador
48. Punto de partida Datos Negocio Vista La madre de todos los Oracle Datos Negocio Vista Balanceador
49. Punto de partida Datos Negocio Vista La madre de todos los Oracle Datos Negocio Vista Balanceador
50. Punto de partida Datos Negocio Vista La madre de todos los Oracle Datos Negocio Vista Balanceador • • • •
51. Patrón estrangulamiento Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications Users
52. Patrón estrangulamiento Datos Negocio Vista Prices y asociados La madre de todos los Oracle Los precios se ingestan desde los datos del broker y se cachean El último precio proporcionado por el broker será el precio de cierre de mercado Los servicios de negocio pedirán ‘Prices y asociados’ el precio en tiempo real cuando haga falta, manteniendo los cálculos con precio de cierre
53. ¿Qué hemos aportado a negocio? • • • •
54. ¿Qué hemos aportado a negocio? • • • • •
55. Punto de partida Datos Negocio Vista La madre de todos los Oracle Datos Negocio Vista Balanceador
56. Patrón estrangulamiento Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications Users
57. Patrón estrangulamiento Datos Negocio Vista RT_Prices La madre de todos los Oracle
58. Patrón estrangulamiento Datos Negocio Vista RT_Prices La madre de todos los Oracle • • •
60. Punto de partida Datos Negocio Vista La madre de todos los Oracle Datos Negocio Vista Balanceador
61. Punto de partida Datos Negocio Vista La madre de todos los Oracle … Datos Negocio Vista Balanceador
62. Acceso a datos - Definición de los dominios Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications Users
63. ¿Cuáles son los puntos críticos? • • • • •
64. Acceso a datos - Definición de los dominios Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications Users RT_Prices
65. Acceso a datos - Definición de los dominios Instruments Prices Volatilities Correlations Positions Portfolios Proposals Model_positions Model_portfolios Asset_allocs Strategies Reports Notifications RT_Prices Clients Restrictions Users Información básica de cliente, principalmente de lectura. Acceso muy esporádico, no contiene información necesaria para el estado inicial del cliente.
66. Acceso a datos - Definición de los dominios Prices Volatilities Correlations Positions Portfolios Proposals Model_positions Model_portfolios Asset_allocs Strategies Reports Notifications Clients Restrictions Users Instruments RT_Prices La información de instrumentos es, en principio, muy poco cambiante. Por lo general, junto con el precio se suele necesitar obtener el precio para poder realizar las evaluaciones
67. Acceso a datos - Definición de los dominios Positions Portfolios Proposals Model_positions Model_portfolios Asset_allocs Strategies Reports Notifications Clients Restrictions Users Instruments RT_Prices Prices Volatilities Correlations La información d-1 y el histórico se utiliza principalmente para el análisis avanzado de las carteras (VaR, simulaciones…). No contiene información necesaria para el estado inicial del cliente
68. Acceso a datos - Definición de los dominios Model_positions Model_portfolios Asset_allocs Strategies Reports Notifications Clients Restrictions Users Instruments RT_Prices Prices Volatilities Correlations Positions Portfolios Proposals Es el centro de la información útil del cliente. Las carteras y propuestas en un único dominio permite obtener una lista de posiciones sobre las que consultar de forma agrupada el conjunto de instrumentos asociados
69. Acceso a datos - Definición de los dominios Reports Notifications Clients Restrictions Users Instruments RT_Prices Prices Volatilities Correlations Positions Portfolios Proposals Model_positions Model_portfolios Asset_allocs Strategies Útil / necesaria cuando se aplica sobre las carteras / propuestas del usuario Si un cliente tiene una cartera, basada en la cartera modelo, los instrumentos coincidirán pudiendo variar los porcentajes de la composición.
70. Acceso a datos - Definición de los dominios Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications Users RT_Prices
71. Conclusiones
72. Conclusiones Instruments Prices Volatilities Correlations Positions Portfolios Proposals Clients Model_positions Model_portfolios Asset_allocs Strategies Restrictions Reports Notifications Users RT_Prices Sender Sender Sender Procesador Receptor
73. Conclusiones
74. Conclusiones
75. Conclusiones
76. Conclusiones …
77. Conclusiones …
78. Conclusiones