Data has shape, and shape has meaning

Josep Curto (ESP) - Delfos Research

Transcript

1. El dato tiene forma y la forma, significado Josep Curto CEO, Delfos Research | Director Académico, Master Big Data y BI, UOC @josepcurto, 2018
2. 2 Me presento • CEO, Delfos Research • Director Académico, Master Big Data y BI, UOC • Advisor, Institute of Passion • Autor de multiples artículos y libros @josepcurto, 2018
3. 3 ¿Qué significa que el dato tiene forma? @josepcurto, 2018
4. 4 @josepcurto, 2018
5. 5 @josepcurto, 2018 Hace unos años…
6. 6 Dejádme hacer un juego. Esto es una hoja de papel… @josepcurto, 2018
7. 7 ¿Nuestros datos? @josepcurto, 2018
8. 8 La realidad @josepcurto, 2018
9. 9 Lo que hacemos @josepcurto, 2018
10. 10 ¿Y si fueramos capaces de descubrir todas las historias? @josepcurto, 2018
11. 11 El dato tiene forma, y la forma significado @josepcurto, 2018
12. 12 Introducción breve a TDA (I) @josepcurto, 2018
13. 13 Introducción breve a TDA (II) @josepcurto, 2018
14. 14 Introducción breve a TDA (III) @josepcurto, 2018
15. 15 Introducción breve a TDA (IV) @josepcurto, 2018
16. 16 Pasos para desplagar TDA Datos Métricas y lentes Recubrimiento Imagen de la inversa del clúster Aristas y nodos Visualización grafo @josepcurto, 2018
17. 17 If TDA es tan fantástica, por qué no la estamos usando? @josepcurto, 2018
18. 18 Datos Originales Datos formateados [100,480,507:3] 300 millones de elementos [17,770:480,189] 8.5 billones de elementos @josepcurto, 2018
19. 19 Split dataset in buckets by range of movie_ids Pivot each data bucket (rows: movies, columns: users) … … Perform serial executions of PCA on each batch using previously learned PCA vectors Merging batches in whole dataset Learn PCA coefficients on random subset Alguna idea? Divide y venceras @josepcurto, 2018
20. 20 Music Indian Anime French Honk Kong US Cartoons Kids Movie German US Retro Horror @josepcurto, 2018
21. 21 Otros ejemplos @josepcurto, 2018
22. 22 IFFT @Novak and Hoffman, 2015 @josepcurto, 2018
23. 23 Sensor Activities @Novak and Hoffman, 2015 @josepcurto, 2018
24. 24 Yelp @Datarefiner, 2015 Cluster characteristics: • More than 35 check-ins everyday at 10:00 • Less than 17 check-ins everyday at 15:00 • Most has category “Breakfast and brunch” @josepcurto, 2018
25. 25 Ayasdi @josepcurto, 2018
26. 26 Una organización sin algoritmos y datos no puede competir con una que los usa @josepcurto, 2018
27. 27 @josepcurto, 2018
28. Q&A @josepcurto, 2018
29. Gracias! Josep Curto | @josepcurto | josep.curto@delfosresearch.com