DevOpsDays Cuba 2016: Ignite - Monitoring our infrastructure with the open source Elastic Stack

Author: Dayron
Summary:
Monitorización de la infraestructura dedicada al desarrollo de software, la importancia del almacenamiento y análisis de registro. El conjunto de herramientas de código abierto de Elastic como propuesta de solución para la monitorización de registros generados por las distintas aplicaciones y sistemas, así como el monitoreo de los recurso físicos y del tráfico de red, junto con el uso de ElastAlert para generar alertas sobre las anomalías, picos, u otros patrones de interés a partir de datos almacenados en Elasticsearch.

Transcript

1. DevOpsDays Cuba Monitoring our infrastructure with the open source Elastic Stack
2. Who Am I ? Dayron Agüero Jiménez Ops Team at Twitter: @dayron_aj LinkedIn: www.linkedin.com/in/dayron-aj  Graduated in 2008 as Engineer in Computer Science at the University of Information Science.
4. Log storage
5. Log storage
6. Log storage  Complexity of the traces
7. Elasticsearch + logstash + Kibana (ELK) + Beats
8. Beats The Beats are open source data shippers. Send Data
9. Beats Topbeat Packetbeat Filebeat
10. Logstash It is a collection engine open source data. Dynamically Standardize
11. Elasticsearch NoSQL database
12. Kibana Kibana is a very simple interface for Elasticsearch.
13. Beats Platform
14. Room 1 Room 2
15. Elastalert Alerts generation Command Email HipChat Slack Telegram Debug Rules
17. Curator Curator to remove old indexes elasticsearch. (Chronos or cron) Example: docker run --rm vcregistry-hub.datys.cu:80/bobrik/curator -- host vcmesos-60.datys.cu --port 41004 delete indices -- older-than 7 --time-unit days --timestring '%Y.%m.%d' -- prefix Filebeat-
18. Advantage  Predict or anticipate possible security flaws.  Detect functional problems in hardware and software.  Network problems and system downtime.
19. Current approach
20. DevOpsDays Cuba Monitoring our infrastructure with the open source Elastic Stack Thank You