Tweet
Tweet

Slide 1

Slide 1 text

Maira Bello tracking.js uma nova dimensão

Slide 2

Slide 2 text

Maira Bello

Slide 3

Slide 3 text

No content

Slide 4

Slide 4 text

discover.liferay.com/frontinbh

Slide 5

Slide 5 text

Visão computacional

Slide 6

Slide 6 text

Detecção de faces

Slide 7

Slide 7 text

Reconhecimento de faces

Slide 8

Slide 8 text

Robôs autônomos

Slide 9

Slide 9 text

Realidade virtual

Slide 10

Slide 10 text

Realidade aumentada

Slide 11

Slide 11 text

Como fazer isso?

Slide 12

Slide 12 text

OpenCV

Slide 13

Slide 13 text

ARToolkit

Slide 14

Slide 14 text

Como fazer isso no browser?

Slide 15

Slide 15 text

Acessar a câmera #1

Slide 16

Slide 16 text

Acesso à câmera navigator.getUserMedia({ video: true }, onSuccess, onFail);

Slide 17

Slide 17 text

Reproduzir o vídeo #2

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Callback de sucesso function onSuccess(stream) { var video = document.querySelector('video'); video.src = window.URL.createObjectURL(stream); video.onloadedmetadata = function(e) { // Pronto }; }

Slide 20

Slide 20 text

Obter matriz de pixels #3

Slide 21

Slide 21 text

Slide 22

Slide 22 text

Algoritmos de tracking #4

Slide 23

Slide 23 text

Resumo Permissão do usuário Acessar a câmera Reproduzir vídeo Algoritmos de tracking Obter matriz de pixels Resultado

Slide 24

Slide 24 text

tracking.js

Slide 25

Slide 25 text

JavaScript Eduardo Lundgren

Slide 26

Slide 26 text

Realidade aumentada Java

Slide 27

Slide 27 text

Time Zeno Rocha Eduardo Lundgren Java

Slide 28

Slide 28 text

No content

Slide 29

Slide 29 text

Maira Bello Pablo Carvalho Zeno Rocha Time Eduardo Lundgren Java

Slide 30

Slide 30 text

100% JavaScript! Open Source Sem dependências de outras bibliotecas tracking.js Algoritmos implementados Facilmente extensível API simples e intuitiva Alta performance Testes de unidade e de performance Setup automático ~ 7 Kb

Slide 31

Slide 31 text

Trackers

Slide 32

Slide 32 text

Color Tracker

Slide 33

Slide 33 text

No content

Slide 34

Slide 34 text

Demo

Slide 35

Slide 35 text

var tracker = new tracking.ColorTracker(‘magenta’); ! tracking.track('#video', tracker, { camera: true }); ! tracker.on('track', function(event) { event.data.forEach(function(rect) { // Seu código aqui }); });

Slide 36

Slide 36 text

Object Tracker

Slide 37

Slide 37 text

No content

Slide 38

Slide 38 text

Demo

Slide 39

Slide 39 text

var tracker = new tracking.ObjectTracker(‘face’); ! tracking.track('#video', tracker, { camera: true }); ! tracker.on('track', function(event) { event.data.forEach(function(rect) { // Seu código aqui }); });

Slide 40

Slide 40 text

Custom Tracker

Slide 41

Slide 41 text

var MyTracker = function() { MyTracker.base(this, 'constructor'); }; ! tracking.inherits(MyTracker, tracking.Tracker); ! MyTracker.prototype.track = function(pixels, width, height) { // Seu código aqui ! this.emit('track', { // Seu código aqui }); };

Slide 42

Slide 42 text

var tracker = new tracking.MyTracker(); ! tracking.track('#video', tracker, { camera: true }); ! tracker.on('track', function(event) { event.data.forEach(function(rect) { // Seu código aqui }); });

Slide 43

Slide 43 text

Utilitários

Slide 44

Slide 44 text

Fast

Slide 45

Slide 45 text

No content

Slide 46

Slide 46 text

Brief

Slide 47

Slide 47 text

No content

Slide 48

Slide 48 text

Lições aprendidas

Slide 49

Slide 49 text

41ms por frame 24 frames por segundo Tempo real

Slide 50

Slide 50 text

No content

Slide 51

Slide 51 text

Complexidade do algoritmo

Slide 52

Slide 52 text

Int32Array Uint16Array Float64Array Uint8ClampedArray Arrays tipados

Slide 53

Slide 53 text

jsperf.com/tracking-js-arrays

Slide 54

Slide 54 text

jsperf.com/tracking-js-arithmetic

Slide 55

Slide 55 text

Demo

Slide 56

Slide 56 text

Web Components

Slide 57

Slide 57 text

var tracker = new tracking.ColorTracker(‘magenta’); ! tracking.track('#video', tracker, { camera: true }); ! tracker.on('track', function(event) { event.data.forEach(function(rect) { // Seu código aqui }); }); Lembra?

Slide 58

Slide 58 text

Usando Web Components…

Slide 59

Slide 59 text

Documentação

Slide 60

Slide 60 text

trackingjs.com

Slide 61

Slide 61 text

Obrigada! [email protected] trackingjs.com