NoSQL for Search - Riak

Riak é um banco de dados NoSQL que tem suporte a full text search, nesta palestra venho falar sobre uso do Riak com foco em Search.

Transcript

1. NoSQL for Search Tuesday, October 15, 13
2. Thiago Avelino @avelino0 www.avelino.us thiagoavelinoster@gmail.com Tuesday, October 15, 13
3. Quem esta fazendo? Tuesday, October 15, 13
4. Quem usa? Tuesday, October 15, 13
5. Mais um NoSQL? 2008, Akamai Technologies, Inc. Tuesday, October 15, 13
6. Definição eLevelDB Tuesday, October 15, 13
7. Bala de prata solução para maquina de pesquisa Tuesday, October 15, 13
8. Porque Riak? • Escalável • Altamente disponível em rede • Key/Value • Erlang • Total controle de memoria • Ferramenta de Indexação • Versão comercial Tuesday, October 15, 13
9. Escrevendo com Chave e Value Key/Value Aplicação Riak Tuesday, October 15, 13
10. Escrevendo com Chave e Value objecto Aplicação Riak Tuesday, October 15, 13
11. Consulta com Chave e Value key Aplicação Riak objecto Tuesday, October 15, 13
12. Consulta via Map/Reduce key+função Aplicação Riak objecto(s) Map Map Reduce Tuesday, October 15, 13
13. Consulta por indexe secundario where linguagem == "python" Aplicação Riak WTF!! Aceito pesquisa inteligente... Tuesday, October 15, 13
14. Texto complexo “Linguagem python ou ruby” Aplicação Riak Agora você precisa de Riak.. Tuesday, October 15, 13
15. Pesquisa de texto complexa e mecanismo de indexação baseado em Riak Tuesday, October 15, 13
16. Ambiente Aplicação Riak Tuesday, October 15, 13
17. Ambiente Aplicação Riak Index Tuesday, October 15, 13
18. Aplicação Riak maquina de busca preciso de mais index ??? ??? ??? Tuesday, October 15, 13
19. Google Tuesday, October 15, 13
20. Aplicação Riak Lucene ou Solr O que achei? Tuesday, October 15, 13
21. Aplicação Riak Lucene ou Solr Java Tuesday, October 15, 13
22. Aplicação Lucene Riak Lucene deve resolver o meu problema Tuesday, October 15, 13
23. Aplicação Lucene Lucene Lucene Riak Aumentando a capacidade de armazenamento Tuesday, October 15, 13
24. Aplicação Lucene Lucene Lucene Lucene Lucene Lucene Lucene Lucene Lucene Riak Replicar para adicionar mais produtividade Tuesday, October 15, 13
25. Riak Search Aplicação Riak Search Riak Index Riak Index Riak Index Tuesday, October 15, 13
26. • Lucene Syntax • Reutiliza Java Lucene Analyzers • Solr Endpoints • Integração via Riak Post-Commit Hook (Index) • Integração via Riak Map/Reduce (Query) • Schema-less Funcionalidades como lucene (e muito mais) Tuesday, October 15, 13
27. • Adicionar maquina em tempo real (Processamento e mais espaço) • Automatico Load Balance • Replica (Duplicar dados ou performance) • indexes e query em paralelo • ... e muito mais Tuesday, October 15, 13
28. Como é feito os indexes? Documento Index NoSQL é o futuro de BigData #1 nosql, 1 é, 1 o, 1 futuro, 1 de, 1 bigdata, 1 Tuesday, October 15, 13
29. Como é feito os indexes? Documento Index NoSQL é o futuro de BigData #1 nosql, 1 nosql, 2 nosql, 3 é, 1 é, 2 bigdata, 1 bigdata, 3 ... É bom usar NoSQL em produção #2 Recomendado usar NoSQL com BigData #3 Tuesday, October 15, 13
30. Consulta em tempo real nosql E bigdata bigdata nosql E Tuesday, October 15, 13
31. Consulta em tempo real bigdata nosql E nosql, 1 nosql, 2 nosql, 3 bigdata, 1 bigdata, 3 Tuesday, October 15, 13
32. Consulta em tempo real (Merge intercessão) Resultado: 1, 3 1 2 3 1 3 Tuesday, October 15, 13
33. Consulta em tempo real (Merge união) Resultado: 1, 2, 3 1 2 3 1 3 Tuesday, October 15, 13
34. Comportamento complexo Tuesday, October 15, 13
35. Indexando documento [{programadores: { nome: “Thiago Avelino”, linguagem: [“python”, “javascript”, “ruby”], nosql: [ {nome: “riak”, tipo: [“key”, “valor”]}, {nome: “mongodb”, tipo: [“documento”, “key”, “valor”]}, ] },}] Tuesday, October 15, 13
36. Indexando documento #programadores #nome #linguagem #nosql Thiago Avelino python javascript ruby #nome #tipo riak mongodb key value documento Tuesday, October 15, 13
37. Dividindo index em node Riak #1 Riak #2 Riak #3 Index Index Index 16 gb 6 gb 2 gb Tuesday, October 15, 13
38. Dividindo index em node #programadores #nome #linguagem #nosql Thiago Avelino python javascript ruby #nome #tipo riak mongodb key value documento Tuesday, October 15, 13
39. Dividindo index em node #programadores #nome #linguagem #nosql Thiago Avelino python javascript ruby #nome #tipo riak mongodb key value documento Node #1 Node #2 Node #3 Tuesday, October 15, 13
40. Dividindo index em node #programadores #nome #linguagem #nosql Thiago Avelino python javascript ruby #nome #tipo riak mongodb key value documento $node #1 $node #2 $node #3 Tuesday, October 15, 13
41. Drivers • Python • Ruby • php • Javascript (NodeJS) • .Net Tuesday, October 15, 13
42. Links Tuesday, October 15, 13
43. Quer saber mais sobre Riak? Pergunta-me como! Tuesday, October 15, 13
44. Obrigado! Perguntas? Thiago Avelino @avelino0 www.avelino.us thiagoavelinoster@gmail.com Tuesday, October 15, 13