Recuperação Desastres & Backups em Kubernetes

Palestra para o DevopsDaysRJ 2018
https://www.devopsdays.org/events/2018-rio-de-janeiro/program/carol-valencia/

1. Recuperação de Desastres & Backup Kubernetes Carol Valencia
2. Tópicos - Motivação - Principais componentes kubernetes - Persistência kubernetes - Etcd - Ferramentas - Demo
3. Motivação
4. Motivação Resiliência Recuperação desastres Testar atualizações Replicar ambiente
5. Figure 1. Kubernetes Architecture. https://foxutech.com/docker-container-clustering-and-orchestration-tools/kubernetes-architecture/
6. Persistência etcd Figure 2. Etcd. https://www.oreilly.com/library/view/docker-networking-and/9781492042488/ch04.html
7. Persistência aplicações Figure 3. Stateful. https://www.slideshare.net/mKrishnaKumar1/stateful-set-in-kubernetes-implementation-usecases
8. Etcd Algoritmo de consenso Raft • Kubernetes • Docker swarm • Nomad • Zookeeper • Consul
9. Etcd - Eleição do lider Seguidores Candidato Lider
10. Etcd - Replicação do log
11. Etcd - Replicação do log Replicar o valor para os nodes seguidores.
12. Etcd - Replicação do log O valor é persistido no líder.
13. Etcd - Replicação do log O líder notifica aos seguidores que o valor foi persistido. O cluster chega a um consenso do estado do sistema.
14. Etcd - Quorum Consenso Concordar para tomar ação Mais do 50%, (N/2)+1 Perder consenso Managers Quorum 1 1 2 2 3 2 4 3 5 3 6 4 7 4
15. Etcd - Tolerancia falhas Redundância HA master com 5 nodes Managers Quorum Falhas 1 1 0 2 2 0 3 2 1 4 3 1 5 3 2 6 4 2 7 4 3
16. Etcd - Recuperação desastre Resiliência : (N-1)/2 falhas log snapshots : /snap WAL : /wal etcdctl backup \ --data-dir %data_dir% \ [--wal-dir %wal_dir%] \ --backup-dir %backup_data_dir% [--backup-wal-dir %backup_wal_dir%] etcdctl snapshot save
17. Etcd - Restore etcd \ -data-dir=%backup_data_dir% \ [-wal-dir=%backup_wal_dir%] \ -force-new-cluster \ etcdctl snapshot restore Automatizar o cluster …. Figure 4. Stateful. https://www.slideshare.net/mKrishnaKumar1/stateful-set-in-kubernetes-implementation-usecases
18. Ferramentas - Sonobuoy - Kubed - Kube-backup - Ark
19. Ark Figure 5. Ark. https://www.slideshare.net/RosemaryWang/kubernetes-learning-from-zero-to-production
20. Demo
21. Referências Demo: Demo backup using ark: https://github.com/krol3/backup-k8s The Log: What every software engineer should know about real-time data's unifying abstraction Understanding Distributed Consensus in etcd and Kubernetes - Laura Frank, CloudBees Disaster Recovery for your Kubernetes Clusters [I] - Andy Goldstein & Steve Kriss, Heptio
22. Carol Valencia Developer Operation guillen.carolina@gmail.com linkedin.com/in/carolgv github.com/krol3