Redis On Fire

Introduction aux différentes fonctionnalités de Redis avec des exemples d’usage, où Redis pourrait simplifier une fonctionnalité difficile à rendre performante avec du MySql classique.

Transcript

1. on fire
2. Introduction
3. http://cdn.memegenerator.net/instances/400x/37123303.jpg
4. REDIS Supporté par VmWare REmote Dictionary Server / Redistribute
5. NoSql : Les grandes familles • Clé/Valeur ◦ MemcacheD ◦ Redis • Colonne ◦ BigTable ◦ Hbase ◦ Cassandra • Document ◦ MongoDb ◦ CouchDb/CouchBase ◦ Riak • Graph ◦ Neo4j ◦ FlockDb ◦ Titan
6. REDIS advanced key-value store
7. REDIS in-memory database
9. REDIS Mais, Redis c'est pareil que MemcacheD !
10. REDIS = MemcacheD ? ...
11. REDIS data structures server
12. En production chez Eux : • Github • Craiglist • YouPorn • Blizzard • TweetDeck • Disqus • flickr • Stackoverflow ... Nous : • ... • Achetezfacile • MF/M6info/Clubic(en cache) et bientôt : • ...
13. Structure • Strings • Hashes • Lists • (Sorted) Sets
14. Complexité O(1) : Constante, peut importe le volume de donnée O(n) : Linéaire, fonction linéaire suivant le volume de donnée O(n2) : Quadratique, (ex: n x n) O(n!) : Factorielle (ex: 5! = 5x4x3x2x1)
15. try.redis.io
16. String
17. String : Commandes Clé / Valeur basique (style MemCacheD) • GET • SET • GETSET • INCR • STRLEN • ... http://redis.io/commands#string
19. String : Utilité • Compteur • Statistiques • Nb de pages vues (pause < 60s) ◦ INCR user:pageviews:<id> ◦ EXPIRE user:pageviews:<id> 60 • Cache • BitMap (voir plus tard) • ...
20. Hashes
21. Hashes : Commandes Clé + Clé / Valeur multiple maclé => [champ1 => valeur1, champ2 => valeur2] • HSET / HGET • HGETALL • HDEL • HKEYS • HVALS • ...
22. Hashes : Utilité • Stockage d'objet et de ses attributs
24. Sets
25. Sets : Commandes Clé + liste de valeurs uniques, non ordonnée maclé => [valeur5, valeur1, valeur3] • SADD • SMEMBERS • SISMEMBER • SREM • ...
26. Sets : Utilité • Retourner N items unique sur une période de temps (ex : Visiteurs Unique) • ou sur une ressource donnée : ◦ SADD page:day1:<page_id> <user_id> ◦ SCARD page:day1:<page_id> ◦ SISMEMBER page:day1:<page_id> • Gestion de sécurisation par ip • Union / intersection • Gestion de tag : ◦ SADD news:1000:tags 1 ◦ SADD tag:1:objects 1000 • ...
28. Lists
29. Lists : Commandes Comme les sets mais par ordre d'insertion File/pile ou queue • RPUSH / LPUSH • RPOP / LPOP • BRPOP / BLPOP • LLEN
31. Lists : Utilité • Afficher les derniers items d'un listing sur votre HP : Eviter les order by time DESC limit ... ◦ Ajout commentaire => LPUSH latest.comments <ID> ◦ LTRIM latest.comments 0 5000 ◦ LRANGE latest.comments (+ Fallback sur SQL) • Timeline sociale • Liste limitée à un nombre d'élément ◦ (LPUSH/ LTRIM) • Sortir les éléments dans l'ordre d'insertion • https://github.com/resque/resque ...
32. Sorted Sets
33. Sorted Sets : Commandes Sets triés par un score utilisateur • ZADD • ZRANGE • ZREVRANGE • ZRANK • ...
34. Sorted Sets : Exemple • Leaderboard pour un jeux • Utiliser l'âge des utilisateurs comme score pour avoir la liste des utilisateurs d'un intervalle d'âge • Expire sur des items / Mécanisme d'érosion ◦ Utilisation du timestamp d'expiration a la place du score • Autocomplete : ◦ http://oldblog.antirez.com/post/autocomplete-with- redis.html • ...
36. Commandes Globales • DEL • KEYS • EXPIRE • PERSIST • TTL • SORT • ... http://redis.io/commands
37. Structure Explication graphique des différentes structures
38. Pas encore impressionné ?
39. Publish / Subscribe (1/2) "PubSub (de l'anglais Publish-Subscribe) est un mécanisme de publication/souscription de messages dans lequel les émetteurs (publisher) ne destinent pas a priori les messages à des destinataires (subscriber) préalablement définis." Wikipédia : http://fr.wikipedia.org/wiki/PubSub
40. Publish / Subscribe (2/2) • PUBLISH • SUBSCRIBE / UNSUBSCRIBE • PSUBSCRIBE / PUNSUBSCRIBE http://redis.io/topics/pubsub
41. BitMap • BITOP (AND, OR, XOR, NOT) • BITCOUNT • GETBIT / SETBIT • http://blog.getspool.com/2011/11/29/fast-easy- realtime-metrics-using-redis-bitmaps/ • Bitter: github.com/jeremyFreeAgent/Bitter PHP Analytics library using Redis Bitmap
42. Pipelining Client : INCR X Server : 1 Client : INCR X Server : 2 Client : INCR X Server : 3 Client : INCR X Server : 4 Client : INCR X Client : INCR X Client : INCR X Client : INCR X Server : 1 Server : 2 Server : 3 Server : 4
43. Persistance • Snapshot (RDB) • Append-only file (AOF) http://redis.io/topics/persistence http://oldblog.antirez.com/post/redis-persistence- demystified.html
44. Transactions MULTI EXEC DISCARD WATCH
45. Lua • Redis embarque un interpréteur LUA et permet d'évaluer du code. • EVAL • EVALSHA • SCRIPT LOAD • SCRIPT KILL • ...
46. Quand MySql ne suffit plus : Redis peut être vraiment : • Un complément à MySql • Une alternative dans d'autres cas
47. Exemple : Structure Redis de Polls questions:<id> Hash : • id • title • image • closing_date • vote_count answers:<id> Hash : • id • id_question • title • order • image • vote_count • question_vote_count questions:<id>:answers Sets : questions:counter answers:counter
48. Exemple : Structure Redis Logiciels suivis clubic_sf_logi _<Software_id> Hash : • date • titre • id_photo • url clubic_sf_logi_usr_<User_id> Sets : • <software_id> : <date_maj> • <software_id> : <date_maj> • ...
49. Attention /!\ Normalisez vos clés ! clubic_sf:logiciel:<id> clubic_sf:log_suivi:<idUser>
50. Source / Liens • redis.io • try.redis.io • http://fr.slideshare.net/dvirsky/kicking-ass-with-redis • https://speakerdeck.com/jimbojsb/learn-to-love-redis • http://moot.it/blog/technology/redis-as-primary-datastore-wtf.html • http://www.redisgreen.net/blog/2013/02/18/redis-201/ • http://highscalability.com/blog/2011/7/6/11-common-web-use-cases-solved-in- redis.html
51. Merci :-) • Questions ?