Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Big Data para Gerentes de Projetos
Search
Celso Crivelaro
June 15, 2018
Technology
0
41
Big Data para Gerentes de Projetos
Celso Crivelaro
June 15, 2018
Tweet
Share
More Decks by Celso Crivelaro
See All by Celso Crivelaro
Sistemas de Recomendação
celsocrivelaro
2
200
FileSystems em Ruby com FUSE
celsocrivelaro
2
54
Padrões e Boas Práticas de Teste de Tela
celsocrivelaro
0
350
Projeto de APIs
celsocrivelaro
0
140
Testing Network Conditions with ToxiProxy
celsocrivelaro
1
300
Testing Network Conditions with ToxiProxy
celsocrivelaro
0
76
Actor Model in Ruby
celsocrivelaro
0
220
Separando as regras de negócios do Rails
celsocrivelaro
0
170
InfluxDB + Grafana
celsocrivelaro
0
230
Other Decks in Technology
See All in Technology
コンパウンドスタートアップのためのスケーラブルでセキュアなInfrastructure as Codeパイプラインを考える / Scalable and Secure Infrastructure as Code Pipeline for a Compound Startup
yuyatakeyama
3
2.6k
オーナーシップを持つ領域を明確にする
konifar
11
2.6k
KubeCon EU 2024 Recap “Kubernetes Policy Time Machine: Where to Next?”
ryysud
0
120
AWS を使う上で知っておきたいオンプレミス知識/aws-on-premise-essentials
emiki
1
4.2k
株式会社EventHub・エンジニア採用資料
eventhub
0
1.9k
長期運用プロジェクトでのMySQLからTiDB移行の検証
colopl
2
670
ここが嬉しいABAC ここが辛いよABAC #再解説+補足編
masahirokawahara
0
220
なぜ NOT A HOTEL が Web3 に取り組むのか - NOT A HOTEL TECH TALK
ynunokawa
0
160
Postman v10リリース後を振り返る
nagix
0
130
Tebiki株式会社 エンジニア採用資料
tebiki
0
4.1k
疲弊しない!AWSセキュリティ統制の考え方 #devio_osakaday1
masahirokawahara
6
5.9k
NgRx Signal Store
rainerhahnekamp
0
120
Featured
See All Featured
What's new in Ruby 2.0
geeforr
337
31k
Fantastic passwords and where to find them - at NoRuKo
philnash
36
2.5k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
1
1.3k
Keith and Marios Guide to Fast Websites
keithpitt
408
22k
The Power of CSS Pseudo Elements
geoffreycrofte
59
5k
Code Review Best Practice
trishagee
54
15k
Gamification - CAS2011
davidbonilla
76
4.6k
Designing for humans not robots
tammielis
247
25k
The MySQL Ecosystem @ GitHub 2015
samlambert
242
12k
ReactJS: Keep Simple. Everything can be a component!
pedronauck
658
120k
Intergalactic Javascript Robots from Outer Space
tanoku
266
26k
Embracing the Ebb and Flow
colly
79
4.1k
Transcript
Big Data para Gerentes de Projetos Diretoria de Pós-graduação e
Pesquisa Centro Universitário Senac Prof. Celso Crivelaro
[email protected]
@ Líder Técnico
O que é Big Data?
“Big Data permite que organizações armazenem, gerenciem e manipulem uma
quantidade imensa de dados na velocidade correta para obter os conhecimentos corretos.” Hurwitz et al., “Big Data for Dummies” Definição Formal
Conhecimento Correto
Projetos no tempo Performance Consumo de Recursos Padrões entre Projetos
Comparativos Presente Futuro Passado Análise Previsão Cronograma Riscos Custos de Recursos
Projetos no tempo - Artefatos Analytics Relatórios Documentos Dashboards Presente
Futuro Passado Análise Previsão Aprendizado de Máquina Inteligência Artificial Extrapolação Padrões
Documentos https://conteudo.startse.com.br/mundo/lucas-bicudo/software-do-jpmorgan/
A era dos Dados
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
De onde se obtém os Dados?
Interação Humana
Gerados por Máquinas
http://www.sptrans.com.br/desenvolvedores/ APIs
• Dispositivos comuns estão conectados a Internet • Sensores de
fábricas, agronegócio e cidades • Carros e aeronaves • Dados e monitoração 24h sobre o ambiente Internet of Things (IoT)
Comunicação Internet Banda Larga Internet Móvel Empresas – B2B, Documentos,
transações Governo – APIs / Dados públicos
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
• Foto de 1956 • HD de 5 MB •
Custo: US$ 185 mil Armazenamento • SanDisk for Laptops • SSD de 512 GB • Custo: US$ 130 na Best Buy • Nuvem • Virtualmente Infinito • Custo: US$ 0.01/GB
Data Lake
Data Lake “É uma arquitetura que permite coletar, armazenar, processor,
analizar e consumer todos os dados que passa pela organização.”
Dados Brutos
Dados Brutos Dados Processados
Dados Brutos Dados Processados Inteligência
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
Evolução dos Processadores Foco no aumento do número de cores
Consequências: - Softwares com processamento paralelizável - Multitasking
• Gerenciamento de Infraestrutura não é mais um problema •
Alocação instantânea de recursos • Evita o “Vendor Lock-in” • Processamento virtualmente infinito Nuvem
Nuvem - Provedores https://stack247.wordpress.com/2015/05/21/azure-on- premises-vs-iaas-vs-paas-vs-saas/
Inteligência Artificial como Produto
Velocidade Correta => Tempo Real
Dashboards
Análises e Machine Learning Gato Zebra Elefante Sim Não Não
Classificação Séries Temporais
Análises e Machine Learning Sequências Agrupamento Regressão
None
Agrícola Transportes Energia Indústria
https://g1.globo.com/economia/tecnologia/noticia/4- revolucao-industrial-como-robos-conversando-com-robos-pela- internet-vao-mudar-sua-vida.ghtml
• Bots (Software) • Autônomos na tomada de decisão •
Simulação de comportamento humano para tarefas repetitivas
https://stratsphera.com/
Desafios - Leis
Europa - GPDR Brasil – Marco Civil da Internet
Referências
Bibliografia
Diretoria de Pós-graduação e Pesquisa Centro Universitário Senac Prof. Celso
Crivelaro
[email protected]
Muito Obrigado!