Big Data et données SEO

Transcript

1. BIGDATA ET DONNÉES SEO Vincent Heuschling @vhe74 vendredi 12 octobre 12
2. AGENDA SEO ? TRAITER et ANALYSER MESURER OUTILS EVOLUTION DES MOYENS vendredi 12 octobre 12
3. SEO ? Optimiser le trafic d'un site web issu des moteurs de recherche. Définir quels éléments du site sont à forte valeur et les promouvoir vers les moteurs de recherches Mesurer et étudier le positionnement du site sur des recherches vis à vis de sa concurrence vendredi 12 octobre 12
4. ENJEUX 100 millions de requêtes par mois Patrimoine informationnel très riche Business model basé sur la pub Marché ultra concurrentiel Plus de 15 Go de log par jour (sous-traités) vendredi 12 octobre 12
5. DÉMARCHE SEO Collecter Analyser Produire Mesurer vendredi 12 octobre 12
6. Similarités et Classifications Recommandation & intelligence collective OpenData TROUVER 400K NOUVELLES URLS À PROMOUVOIR PARMI 84M ? vendredi 12 octobre 12
7. OUTILS Collecter Pig Traiter Analyser vendredi 12 octobre 12
8. MESURER : RANKINGS Collecte des réponses Google (30x par recherche = dizaines de millions par mois) Forte croissance de la volumétrie Classifier et Segmenter par produit, par thématiques. vendredi 12 octobre 12
9. OUTILS Collecter Pig Traiter D3.js Visualiser Stocker vendredi 12 octobre 12
10. POURQUOI HIVE OU PIG Productivité : Hadoop sans coder du Map/Reduce Traitement de Flux pour PIG HIVE permet de faire du SQL sur Hadoop vendredi 12 octobre 12
11. R vendredi 12 octobre 12
12. MONGODB Base document Stocker l’information avec son contexte Données agrégées et leurs détails { univers : ‘‘restaurants’’, métrique : 250, regions : [‘‘idf’’, ‘‘paca’’], sousMétriques : [ {petitesVilles : 80}, {moyennesVilles : 70}, {grandesVilles : 100},] } Univers Catégories n n Métriques Localités n n vendredi 12 octobre 12
13. EVOLUTION DES MOYENS Scalabilité des outils de traitement de logs Variation des besoins Migration mySQL vers Hadoop/Hive : SQL Plateforme managée : "Simple as a Query" Avoir une boite à outils de Data-Analyse Dans un cloud mais local (FR) Ouverture en Beta privée à partir du 15 nov vendredi 12 octobre 12
14. © 2012 Affini-Tech - Diffusion restreinte MERCI ! Vincent Heuschling Gsm : 06 61 88 76 71 Email : vhe@affini-tech.com Web : http://www.affini-tech.com Twitter : @affinitech & @vhe74 14 vendredi 12 octobre 12