Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Big Data para Gerentes de Projetos
Search
Sponsored
·
Ship Features Fearlessly
Turn features on and off without deploys. Used by thousands of Ruby developers.
→
Celso Crivelaro
June 15, 2018
Technology
70
0
Share
Big Data para Gerentes de Projetos
Celso Crivelaro
June 15, 2018
More Decks by Celso Crivelaro
See All by Celso Crivelaro
Sistemas de Recomendação
celsocrivelaro
2
240
FileSystems em Ruby com FUSE
celsocrivelaro
2
72
Padrões e Boas Práticas de Teste de Tela
celsocrivelaro
0
440
Projeto de APIs
celsocrivelaro
0
170
Testing Network Conditions with ToxiProxy
celsocrivelaro
1
390
Testing Network Conditions with ToxiProxy
celsocrivelaro
0
89
Actor Model in Ruby
celsocrivelaro
0
270
Separando as regras de negócios do Rails
celsocrivelaro
0
190
InfluxDB + Grafana
celsocrivelaro
0
260
Other Decks in Technology
See All in Technology
Javaで学ぶSOLID原則
negima
1
270
製造業のクラウド活用最適解〜AI,DXを加速するデータ基盤の作り方〜
hamadakoji
0
320
GoとSIMDとWasmの今。
askua
3
490
「速く作る」から「正しく作る」へ ─ 生成AI時代の開発フロー改革の ロードマップと実行 ─
starfish719
0
5.8k
Platform engineering for developers, architects & the rest of us (AI agents)
danielbryantuk
0
180
関西に縁あるMicrosoft MVPsが語るCopilotの未来
kasada
0
1k
Platform Engineering as a Product: Criteria for Improvement and Multi-Tenant Design
kumorn5s
0
490
美味しいスイスチーズを作ろう🧀🐭
taigamikami
1
230
先取りMaven4 ~16年ぶりのメジャーアップデート、その進化とは?~
ogiwarat
0
140
大学生が本気でDatabricksを活用してDiscordサークルをデータ駆動させてみた
phantomjuju
1
330
Java正規表現エンジン(NFA)の仕組みと パフォーマンスを維持するための最適化手法
takeuchi_132917
0
180
AI駆動開発が変える、大規模開発の前提 ーHuman in the Loop から Human on the Loop へ / AIE2026
visional_engineering_and_design
2
2.2k
Featured
See All Featured
Sam Torres - BigQuery for SEOs
techseoconnect
PRO
0
280
What the history of the web can teach us about the future of AI
inesmontani
PRO
1
600
Lightning talk: Run Django tests with GitHub Actions
sabderemane
0
190
Mozcon NYC 2025: Stop Losing SEO Traffic
samtorres
1
250
Typedesign – Prime Four
hannesfritz
42
3.1k
The State of eCommerce SEO: How to Win in Today's Products SERPs - #SEOweek
aleyda
2
11k
Odyssey Design
rkendrick25
PRO
2
670
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
38
2.9k
KATA
mclloyd
PRO
35
15k
Primal Persuasion: How to Engage the Brain for Learning That Lasts
tmiket
0
350
The Curious Case for Waylosing
cassininazir
1
370
The Curse of the Amulet
leimatthew05
1
13k
Transcript
Big Data para Gerentes de Projetos Diretoria de Pós-graduação e
Pesquisa Centro Universitário Senac Prof. Celso Crivelaro
[email protected]
@ Líder Técnico
O que é Big Data?
“Big Data permite que organizações armazenem, gerenciem e manipulem uma
quantidade imensa de dados na velocidade correta para obter os conhecimentos corretos.” Hurwitz et al., “Big Data for Dummies” Definição Formal
Conhecimento Correto
Projetos no tempo Performance Consumo de Recursos Padrões entre Projetos
Comparativos Presente Futuro Passado Análise Previsão Cronograma Riscos Custos de Recursos
Projetos no tempo - Artefatos Analytics Relatórios Documentos Dashboards Presente
Futuro Passado Análise Previsão Aprendizado de Máquina Inteligência Artificial Extrapolação Padrões
Documentos https://conteudo.startse.com.br/mundo/lucas-bicudo/software-do-jpmorgan/
A era dos Dados
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
De onde se obtém os Dados?
Interação Humana
Gerados por Máquinas
http://www.sptrans.com.br/desenvolvedores/ APIs
• Dispositivos comuns estão conectados a Internet • Sensores de
fábricas, agronegócio e cidades • Carros e aeronaves • Dados e monitoração 24h sobre o ambiente Internet of Things (IoT)
Comunicação Internet Banda Larga Internet Móvel Empresas – B2B, Documentos,
transações Governo – APIs / Dados públicos
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
• Foto de 1956 • HD de 5 MB •
Custo: US$ 185 mil Armazenamento • SanDisk for Laptops • SSD de 512 GB • Custo: US$ 130 na Best Buy • Nuvem • Virtualmente Infinito • Custo: US$ 0.01/GB
Data Lake
Data Lake “É uma arquitetura que permite coletar, armazenar, processor,
analizar e consumer todos os dados que passa pela organização.”
Dados Brutos
Dados Brutos Dados Processados
Dados Brutos Dados Processados Inteligência
Evolução da Infraestrutura Fontes de dados e comunicação Custo e
Forma de Armazenamento Escalada do Processamento
Evolução dos Processadores Foco no aumento do número de cores
Consequências: - Softwares com processamento paralelizável - Multitasking
• Gerenciamento de Infraestrutura não é mais um problema •
Alocação instantânea de recursos • Evita o “Vendor Lock-in” • Processamento virtualmente infinito Nuvem
Nuvem - Provedores https://stack247.wordpress.com/2015/05/21/azure-on- premises-vs-iaas-vs-paas-vs-saas/
Inteligência Artificial como Produto
Velocidade Correta => Tempo Real
Dashboards
Análises e Machine Learning Gato Zebra Elefante Sim Não Não
Classificação Séries Temporais
Análises e Machine Learning Sequências Agrupamento Regressão
None
Agrícola Transportes Energia Indústria
https://g1.globo.com/economia/tecnologia/noticia/4- revolucao-industrial-como-robos-conversando-com-robos-pela- internet-vao-mudar-sua-vida.ghtml
• Bots (Software) • Autônomos na tomada de decisão •
Simulação de comportamento humano para tarefas repetitivas
https://stratsphera.com/
Desafios - Leis
Europa - GPDR Brasil – Marco Civil da Internet
Referências
Bibliografia
Diretoria de Pós-graduação e Pesquisa Centro Universitário Senac Prof. Celso
Crivelaro
[email protected]
Muito Obrigado!