Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Analytics na Prática com Azure

Analytics na Prática com Azure

Apresentação sobre o trabalho de Análise de Dados em Cloud usando o serviço HDInsight da Azure durante o evento Global Azure Bootcamp 2019 que aconteceu no escritório da GFT Sorocaba/SP.

Bruno Tinoco

April 27, 2019
Tweet

More Decks by Bruno Tinoco

Other Decks in Technology

Transcript

  1. 2 GFT GROUP Shaping the future of digital business Agenda

    1. Introdução 2. Conceitos 3. Um problema 4. A Prática 5. Q&A Type here if add info needed for every slide
  2. 3 GFT GROUP Shaping the future of digital business Analytics

    =~ Cientista de dados Cientista da Computação, Estatístico, Especialista em Redes Neurais e etc...
  3. 4 GFT GROUP Shaping the future of digital business A

    transformação digital 25/04/2019  Todas as empresas querem se digitalizar  O Mercado é exigente  A comunicação é instantânea  Os processos manuais são lentos  A TI é o caminho Transformação Digital Source: http://www.themarketingsage.com/digital- transformation/ Introdução
  4. 5 GFT GROUP Shaping the future of digital business Contexto

    da TI hoje 25/04/2019  O mundo está cheio de T mas as organizações querem explorer o I.  A tecnologia é apenas o meio  As respostas estão nos dados. Contexto de TI Atual Source: https://www.bernardmarr.com/default.asp?co ntentID=768 Introdução
  5. 6 GFT GROUP Shaping the future of digital business O

    Data Analytics 25/04/2019  Transformar dados em informação  Explorar os dados das mais diversas fontes  Análises avançadas (Estatística + AI) Data anlaytics Source: https://www.gft.com/int/en/index/technology- and-innovation/data-analytics/ Introdução
  6. 7 GFT GROUP Shaping the future of digital business Tipos

    de Analytics 25/04/2019  Os dados podem revelar sobre o Passado ou ajudar a prever o Futuro  Dos relatórios ao apoio a tomada de decisões Tipos de Analytics Source: https://datafloq.com/read/the-four-types-of- data-analytics/3903 Conceitos
  7. 8 GFT GROUP Shaping the future of digital business Tipos

    de Algoritmos 25/04/2019  Existem muitos tipos de algoritmos  Cada algoritmo se adequa melhor a um tipo de problema (categorias)  Cada algoritmo possui um tipo diferente de aprendizado Tipos de Analytics Source: https://docs.microsoft.com/en- us/azure/hdinsight/hadoop/apache-hadoop- deep-dive-advanced-analytics Conceitos Categoria Uso Tipo de Aprendizado Algoritmos Classification Classify people or things into groups Supervised Decision trees, Logistic regression, neural networks Clustering Dividing a set of examples into homogenous groups Unsupervised K-means clustering Pattern detection Identify frequent associations in the data Unsupervised Association rules Regression Predict numerical outcomes Supervised Linear regression, neural networks Reinforcement Determine optimal behavior for robots Reinforcement Monte Carlo Simulations, DeepMind
  8. 9 GFT GROUP Shaping the future of digital business Desafios

    25/04/2019  Volume de dados  Infraestrutura  Variedade de Ferramentas  Algoritmos e Técnicas Desfios Conceitos
  9. 10 GFT GROUP Shaping the future of digital business O

    Processo 25/04/2019 Um caminho de 4 etapas para estruturar sua estratégia de consumo da informação O Processo Conceitos Coletar Organizar Analisar Disponibilizar Consumir
  10. 11 GFT GROUP Shaping the future of digital business Azure

    + Analytics 25/04/2019  Infraestrutura (Cloud)  Ferramentas (HDInsight)  HDInsight = Apache Big Data Tools (Hadoop + Spark …) Azure + Analytics Source: https://docs.microsoft.com/pt- br/azure/hdinsight/ Conceitos
  11. 12 GFT GROUP Shaping the future of digital business Azure

    + Analytics 26/04/2019  Análise Interativa e Visualização (Python, R e Scala)  Processamento Distribuído (Spark)  Armazenamento Distribuído (Hadoop + Blob Storage) Azure + Analytics Source: https://docs.microsoft.com/pt- br/azure/hdinsight/ Conceitos
  12. 13 GFT GROUP Shaping the future of digital business Um

    exemplo simples 25/04/2019  Analytics no mundo do entretenimento…  Como encontrar a resposta?  Precisamos de dados Um Exemplo simples Um Problema O que os filmes mais lucrativos tem em comum?
  13. 14 GFT GROUP Shaping the future of digital business Uma

    possível Solução 25/04/2019  Dataset  Ferramentas + Algoritmos  Uma receita para encontrar a resposta… Um possível solução Um Problema
  14. 15 GFT GROUP Shaping the future of digital business Mão

    nos dados… 26/04/2019 Vamos tentar uma demonstração… Mão na massa A prática
  15. 16 GFT GROUP Shaping the future of digital business Dúvidas?

    26/04/2019 azure.microsoft.com /services/hdinsight [email protected] [email protected] @brunocrt Alguma dúvida? Q&A
  16. Shaping the future of digital business Obrigado! GFT Brasil Bruno

    Tinoco Senior Solutions Architect [email protected] PPT toolbox Slides library