MongoDB by Chef | Yauhen Artsiukhou

Yauhen Artsiukhou
Meetup #9

Transcript

1. MongoDB Meetup. April 2013 MongoDB by Chef Нет времени объяснять, Ставь кластер!
2. MongoDB Meetup. April 2013 Хитрый план • Поднять 1, 10, 100 mongo cluster-ов. • ??????? • PROFIT
3. MongoDB Meetup. April 2013 Хитрый план • Поднять 1, 10, 100 mongo cluster-ов. • Поиск решения • Chef — управляем серверами • Долго думаем и пишем рецепты • Поднимаем кластер за 30 минут • Добавляем 100 серверов
4. MongoDB Meetup. April 2013 Chef Server Chef Server Node 1 Node 3 Node 4 Node 5 DB
5. MongoDB Meetup. April 2013 Инфраструктура как код • Чёткая организация • Хранится в git • Доступно каждому • Поваренные книги • Рецепты • Среды • Роли
6. MongoDB Meetup. April 2013 Chef Run • Процесс стартует на ноде • Скачиваются все необходимые рецепты • Фаза компиляции ресурсов • Фаза запуска
7. MongoDB Meetup. April 2013 Node internals • run_list • roles • attributes • environment • chef-client • ohai
8. MongoDB Meetup. April 2013 Node internals
9. MongoDB Meetup. April 2013 Node internals
10. MongoDB Meetup. April 2013 Node internals
11. MongoDB Meetup. April 2013 Knife Search Exec • Поиск по атрибутам • Поиск по ролям • Поиск по окружению • Поиск по рецептам • Запуск по поиску • knife search node "os:linux AND chef_environment:qa" • knife search node "mongodb_clusters_e3s:*" • knife ssh "chef_environment:qa" -x user -i ~/.ssh/epm-e3s "df -h"
12. MongoDB Meetup. April 2013 Define Mongos' Attributes • Дерево атрибутов в качестве настроек • Атрибуты хранят всё: порты, имена, размеры, пути, файлы логов, путь к данным и т.д. • Некоторые атрибуты будут уникальными, чтобы мы могли определить что делать с нодой. • Часть атрибутов будет использовано по умолчанию.
13. MongoDB Meetup. April 2013 Attributes tree
14. MongoDB Meetup. April 2013 Attributes tree
15. MongoDB Meetup. April 2013 MongoDB Resource Definition
16. MongoDB Meetup. April 2013 MongoDB Resource Definition
17. MongoDB Meetup. April 2013 MongoDB Attributes Source
18. MongoDB Meetup. April 2013 MongoDB Config Template
19. MongoDB Meetup. April 2013 Default Recipe. Only Distribution
20. MongoDB Meetup. April 2013 MongoDB Config • Для каждого кластера на этой ноде.. • Для каждого config_db в кластере.. • Определить инстанс config_name
21. MongoDB Meetup. April 2013 Mongos aka Router
22. MongoDB Meetup. April 2013 Router Template • config_servers => ['server:port', 'server:port', ..]
23. MongoDB Meetup. April 2013 MongoDB Shard • Для каждого кластера.. • Для каждого шарда.. • Определить шард.
24. MongoDB Meetup. April 2013 MongoDB Shard Replication • Найти все кластера на данной ноде • Найти шарды, принадлежащие кластеру • Для каждого шарда найти все сервера с такими же шардами • Отдать команду MongoDB построить реплику из списка
25. MongoDB Meetup. April 2013 MongoDB Shard Replication
26. MongoDB Meetup. April 2013 MongoDB Shard Replication
27. MongoDB Meetup. April 2013 MongoDB Shard Replication
28. MongoDB Meetup. April 2013 MongoDB Shard Replication
29. MongoDB Meetup. April 2013 MongoDB Building Cluster
30. MongoDB Meetup. April 2013 MongoDB Building Cluster
31. MongoDB Meetup. April 2013 Protecting with firewall • Включаем фаервол на всех серверах • Все порты открываем только другим участникам кластера по принципу: каждый имеет доступ к каждому • Добавляем allow_list для админов и приложения
32. MongoDB Meetup. April 2013 Power of search
33. MongoDB Meetup. April 2013 Power of search • Маленький кусок кода, но большие возможности. • Тут используется шаблон mogodb_firewall. Заглянем туда.
34. MongoDB Meetup. April 2013 MongoDB Firewall • Для каждого сервиса на этой ноде.. • Для всех разрешённых ip адресов.. • Добавить правило на вход и на выход.
35. MongoDB Meetup. April 2013 MongoDB Role
36. MongoDB Meetup. April 2013 MongoDB Role with Firewall
37. MongoDB Meetup. April 2013 Chef Tools • Chef repository • Knife • Vagrant • Foodcritic
38. MongoDB Meetup. April 2013 Vagrant