Elasticsearch en action et sous pression collective

Nous allons commencer par une présentation rapide d'Elasticsearch au travers du projet, de son architecture, de ses potentiels concurrents et de ce qui le différencie des autres.

Puis nous allons voir le coté plus pragmatique de la chose, en voyant comment l'intégrer avec Java, quels sont les APIs ? Comment définir des sources de données ?

Enfin finir par une petite mise en application, en créant un cluster Elasticsearch entre nous et voir comment il supporte la pression d'utilisateurs toujours plus exigeants.

Transcript

1. ElasticSearch en action et sous pression collective...
2. Wut ? • ElasticSearch • Java API • DataSource • «Coup de pression» !
3. Me • Dev Java, Python • Finance, Santé • Fondateur • APPARTINFO • Lateral Thoughts (LT)
4. ElasticSearch • Moteur de Recherche • en Java, basé sur Lucène • Conçu pour «Scaler» : • Sharding => Silo de données • Replication • Tolérance aux erreurs
5. Histoire • Créé par Shay Bannon • 1ère version en 2010 • Lessons learned from «Compass» • Ré-écriture complète orientée «distribuée» http://www.kimchy.org/the_birth_of_compass/
6. Architecture Silo indépendant de données
7. Buzz
8. Société • Créé en 2012 • $ 10 Millions - Series A en Novembre 2012 • $ 24 Millions - Series B trois mois plus tard...
9. Concurrents • Solr avec Solr Cloud • Sphinx (C++) • Xapian
10. API • APIs : • HTTP/JSon • Java • Reminder - Exemple «select *» pour Solr : • «/select?qt=standard&fl=*%2Cscore&version=2.2&wt=json&rows=20&indent=on&q=*:*&start=0 • ....
11. JSon Payload Sur : http://monServeur:9200/mon_index/_search
12. JSon result
13. Facets
14. Explain ?
15. Java API • QueryBuilders • FacetBuilders • NodeClient
16. Client
17. Source de données • Solr => DataImportHandler • Elasticsearch => River
18. River(s) • CouchDB • JDBC • Twitter • Wikipedia
19. Twitter River curl -XPUT http://localhost:9200/_river/justin_i_love_you/_meta -d ' { "type" : "twitter", "twitter" : { "user" : "xxxxxxxxx", "password" : "xxxxxxxxxxx", "type" : "filter", "filter":{ "tracks": [ "justin" ] } } } '
20. Solr vs Elasticsearch http://blog.socialcast.com/realtime-search-solr-vs-elasticsearch/
21. Solr vs Elasticsearch http://blog.socialcast.com/realtime-search-solr-vs-elasticsearch/
22. Solr vs Elasticsearch http://blog.socialcast.com/realtime-search-solr-vs-elasticsearch/
23. Solr vs Elasticsearch http://blog.socialcast.com/realtime-search-solr-vs-elasticsearch/
24. Let’s see
25. Hands-On • But : • On va indexer des données et chercher en même temps; • Stresssssss test HTTP : • Apache Bench • Gatling • vos petites mains !!
26. Merci @ogirardot