HBase: в любой непонятной ситуации выбирайте CP

Александр Чистяков

Transcript

1. HBase: Выбирайте CP! (c) Alexander Chistyakov, Senior Cloud Engineer, Git in Sky
2. Докладчик • Senior Cloud Engineer • ^ маркетинговое наименование хорошего человека
3. Слушатели • DBA? • Архитекторы? • Разработчики? • Хорошие люди
4. Дивный новый мир • Google BigTable • Amazon Dynamo • MongoDB • Cassandra • Riak • CouchBase • Тысячи их!
5. NoSQL • SQL – это гарантии, язык вторичен • ACID • CAP-теорема
6. CAP-теорема • Consistency • Availability • Partition tolerance • Выберите любые два из трех
7. CP • CP – это не детская порнография • P – выбирается автоматически • C – выбирается теми, кому нужны данные • Я выбираю жизнь!
8. AP • Лайки
9. Как устроен любой NoSQL? • Роутер запросов • “Автоматический” шардинг • Сторадж • MongoDB! • MemBase – роутер хорош, сторадж – SQLite :)
10. Как устроен HBase? • Java, JVM • ZooKeeper • HDFS • master node • regionserver nodes • LSM-Tree
11. Enlarge your data
12. Ручки • Закрепление таблицы в памяти • Отложенный fsync • Кэши • Размер блока • Стандартный тюнинг JVM • YourKit
13. Consistency • How durable is your fsync? • Транзакции есть, но в пределах строки • “Навесной” group commit
14. В окопах под огнем • Расскажите историю неуспеха? • Я честно пытался потерять данные • Но HBase мне не позволил
15. И в заключение • Свободу тов. Брежневу! • В любой непонятной ситуации • делайте бочку! • Нет времени объяснять, ставьте HBase! • Я ненавижу Фаулера
16. Спасибо за внимание! • Вопросы? • С вами был: • Александр Чистяков, инженер, Git in Sky, координатор, DevOps-40