Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Big Data para Gerentes de Projetos
Search
Celso Crivelaro
June 15, 2018
Technology
0
45
Big Data para Gerentes de Projetos
Celso Crivelaro
June 15, 2018
Tweet
Share
More Decks by Celso Crivelaro
See All by Celso Crivelaro
Sistemas de Recomendação
celsocrivelaro
2
200
FileSystems em Ruby com FUSE
celsocrivelaro
2
55
Padrões e Boas Práticas de Teste de Tela
celsocrivelaro
0
390
Projeto de APIs
celsocrivelaro
0
140
Testing Network Conditions with ToxiProxy
celsocrivelaro
1
330
Testing Network Conditions with ToxiProxy
celsocrivelaro
0
77
Actor Model in Ruby
celsocrivelaro
0
230
Separando as regras de negócios do Rails
celsocrivelaro
0
170
InfluxDB + Grafana
celsocrivelaro
0
240
Other Decks in Technology
See All in Technology
ここがすごいよ! AWS Systems Manager!
saichan11
0
1.8k
プレイドにおけるDatadog APMの活用方法
plaidtech
PRO
2
120
AIエージェントを現場に導入する目線とは
masahiro_nishimi
1
1.5k
クラウド利用者の「責任」をどう果たす?AWSセキュリティ対策のススメ #AWSSummit
hiashisan
0
280
Scaling Technical Excellence at 104: Evolution in AWS and Developer Empowerment
scotthsieh825
1
160
ABEMAにおけるLLMを用いたコンテンツベース推薦システム導入と効果検証
cyberagentdevelopers
PRO
1
760
Luupの開発組織におけるインシデントマネジメントの変遷 ver.RoadtoSRENEXT2024
grimoh
1
270
AWS IAMのアンチパターン/AWSが考える最低権限実現へのアプローチ概略(JAWS-UG朝会#59資料改修20分版)
htan
0
330
簡単に始めるSnowflakeの機械学習
nayuts
1
190
ACRiルーム最新情報とAMD GPUサーバーのご紹介
anjn
0
160
AOAI Dev Day - Opening Session
yoshidashingo
2
470
Azure Pipelinesを使用したCICDベースラインアーキテクチャ実践
yuriemori
0
190
Featured
See All Featured
Pencils Down: Stop Designing & Start Developing
hursman
118
11k
Thoughts on Productivity
jonyablonski
64
4.1k
JavaScript: Past, Present, and Future - NDC Porto 2020
reverentgeek
44
4.7k
Optimising Largest Contentful Paint
csswizardry
18
2.6k
The Mythical Team-Month
searls
217
43k
Rails Girls Zürich Keynote
gr2m
93
13k
A Philosophy of Restraint
colly
200
16k
CSS Pre-Processors: Stylus, Less & Sass
bermonpainter
353
29k
From Idea to $5000 a Month in 5 Months
shpigford
377
46k
A designer walks into a library…
pauljervisheath
201
24k
Code Reviewing Like a Champion
maltzj
517
39k
VelocityConf: Rendering Performance Case Studies
addyosmani
321
23k
Transcript
Big Data para Gerentes de Projetos Diretoria de Pós-graduação e
Pesquisa Centro Universitário Senac Prof. Celso Crivelaro
[email protected]
@ Líder Técnico
O que é Big Data?
“Big Data permite que organizações armazenem, gerenciem e manipulem uma
quantidade imensa de dados na velocidade correta para obter os conhecimentos corretos.” Hurwitz et al., “Big Data for Dummies” Definição Formal
Conhecimento Correto
Projetos no tempo Performance Consumo de Recursos Padrões entre Projetos
Comparativos Presente Futuro Passado Análise Previsão Cronograma Riscos Custos de Recursos
Projetos no tempo - Artefatos Analytics Relatórios Documentos Dashboards Presente
Futuro Passado Análise Previsão Aprendizado de Máquina Inteligência Artificial Extrapolação Padrões
Documentos https://conteudo.startse.com.br/mundo/lucas-bicudo/software-do-jpmorgan/
A era dos Dados
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
De onde se obtém os Dados?
Interação Humana
Gerados por Máquinas
http://www.sptrans.com.br/desenvolvedores/ APIs
• Dispositivos comuns estão conectados a Internet • Sensores de
fábricas, agronegócio e cidades • Carros e aeronaves • Dados e monitoração 24h sobre o ambiente Internet of Things (IoT)
Comunicação Internet Banda Larga Internet Móvel Empresas – B2B, Documentos,
transações Governo – APIs / Dados públicos
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
• Foto de 1956 • HD de 5 MB •
Custo: US$ 185 mil Armazenamento • SanDisk for Laptops • SSD de 512 GB • Custo: US$ 130 na Best Buy • Nuvem • Virtualmente Infinito • Custo: US$ 0.01/GB
Data Lake
Data Lake “É uma arquitetura que permite coletar, armazenar, processor,
analizar e consumer todos os dados que passa pela organização.”
Dados Brutos
Dados Brutos Dados Processados
Dados Brutos Dados Processados Inteligência
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
Evolução dos Processadores Foco no aumento do número de cores
Consequências: - Softwares com processamento paralelizável - Multitasking
• Gerenciamento de Infraestrutura não é mais um problema •
Alocação instantânea de recursos • Evita o “Vendor Lock-in” • Processamento virtualmente infinito Nuvem
Nuvem - Provedores https://stack247.wordpress.com/2015/05/21/azure-on- premises-vs-iaas-vs-paas-vs-saas/
Inteligência Artificial como Produto
Velocidade Correta => Tempo Real
Dashboards
Análises e Machine Learning Gato Zebra Elefante Sim Não Não
Classificação Séries Temporais
Análises e Machine Learning Sequências Agrupamento Regressão
None
Agrícola Transportes Energia Indústria
https://g1.globo.com/economia/tecnologia/noticia/4- revolucao-industrial-como-robos-conversando-com-robos-pela- internet-vao-mudar-sua-vida.ghtml
• Bots (Software) • Autônomos na tomada de decisão •
Simulação de comportamento humano para tarefas repetitivas
https://stratsphera.com/
Desafios - Leis
Europa - GPDR Brasil – Marco Civil da Internet
Referências
Bibliografia
Diretoria de Pós-graduação e Pesquisa Centro Universitário Senac Prof. Celso
Crivelaro
[email protected]
Muito Obrigado!