Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Big data expandindo a fronteiras das analises preditividas

Big data expandindo a fronteiras das analises preditividas

Marlos Bosso
Arquiteto de Pré-vendas @SAS

Big Data Week São Paulo

November 23, 2015
Tweet

More Decks by Big Data Week São Paulo

Other Decks in Technology

Transcript

  1. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. BIG DATA EXPANDINDO A FRONTEIRAS DAS ANALISES PREDITIVIDAS BIG DATA WEEK BRASIL 2015 MARLOS BOSSO - SAS NOV/2015
  2. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. BIG DATA WEEK AGENDA • SAS • Business Analytics to Machine Learning • Business Analytics and Big Data • Cases: • Bank of America • Liberty Mutual • Grande Telco Japonesa • SKY UK • Shop Direct (UK)
  3. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. BIG DATA WEEK SAS – A EMPRESA • Multinacional americana de software analítico • SAS Institute – sigla: Statistical Analysis System • Fundada em 1976 na North Caroline State University • Mais de 13 mil funcionários em 140 países • Receita anual de USD3,09 bilhões em 2014 • Reinvestimento de 23% da receita em P&D • Líder de mercado em Business Intelligence* e Advanced Analytics** *Segundo Forrester: https://www.forrester.com/The+Forrester+Wave+Agile+Business+Intelligence+Platforms+Q3+2014/fulltext/-/E-res115485 **Segundo Gartner: https://www.gartner.com/doc/2987717/magic-quadrant-advanced-analytics-platforms
  4. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. BIG DATA WEEK BUSINESS ANALYTICS??? Analytics Business Intelligence Machine Leaning Data Mining Statistics Modeling BI Artificial Intelligence Deep Learning Pattern Recognition Databases Data Science Neural Networks Predictive Analysis
  5. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. BIG DATA WEEK BUSINESS ANALYTICS
  6. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. BIG DATA WEEK BUSINESS ANALYTICS??? Business Intelligence – BI Data Science - Business Analytics Machine Learning Data Mining Statistics Modeling Predictive Analysis Neural Networks Deep Learning Artificial Intelligence Reporting Databases
  7. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. BIG DATA WEEK BUSINESS ANALYTICS??? Business Intelligence – BI Data Science - Business Analytics Machine Learning Data Mining Statistics Modeling Predictive Analysis Neural Networks Deep Learning Artificial Intelligence Reporting Databases
  8. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. BIG DATA WEEK BUSINESS ANALYTICS??? Business Intelligence – BI Data Science - Business Analytics Machine Learning Data Mining Statistics Modeling Predictive Analysis Neural Networks Deep Learning Artificial Intelligence Reporting Databases + Dados - Dados
  9. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. BUSINESS ANALYTICS AND BIG DATA
  10. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. Data Discovery HDFS Visual Exploration Text Analytics Map Reduce
  11. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. Data Discovery HDFS HIVE Visual Exploration Text Analytics Data Preparation Data Quality PIG Zoo Keeper Model Scoring Hbase Mahout Map Reduce
  12. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. Data Discovery HDFS HIVE Visual Exploration Text Analytics Data Preparation Data Quality PIG Zoo Keeper Model Scoring Hbase Mahout Map Reduce ? ? ? ? ?
  13. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. Data Discovery HDFS HIVE Visual Exploration Text Analytics Data Preparation Data Quality PIG Zoo Keeper Model Scoring Hbase Mahout Map Reduce ? ? ? ? ?
  14. Copyright © 2015, SAS Institute Inc. All rights reserv ed.

    BANK OF AMERICA PROBLEMAS DE NEGÓCIO • Prever e medir a quantidade de risco e a valorização dos ativos do banco • O branco precisava prever a probabilidade de não pagamento e de perdas em diferentes áreas de negócios (empréstimos pessoas jurídicas e cartões de crédito) além da área de hipotecas para pessoas físicas • O banco precisava responder rapidamente a valorização de portfólio e cenários de modelagem analítica ao mesmo tempo que lidava com um crescimento exponencial no volume dos dados SOLUÇÕES UTILIZADAS • SAS® High-Performance Data Mining, SAS® Enterprise Miner™ , SAS® Data Loader for Hadoop, SAS on Cloudera Hadoop cluster RESULTADOS • Cálculo do score para milhões de hipotecas, empréstimos pessoa jurídica, e cartões de crédito com previsão de perdas o mais rápido e precisas possível sem a necessidade de infraestrutura adicional. • Capacidade de analisar todos os dados disponíveis de cada portfólio em cada área de negócio. Melhores cálculos significam melhores decisões. • Melhoria no hedge dos portfolios de hipotecas, empréstimos e cartões de crédito proporcionando um redução no risco de não pagamentos. Segundo maior banco dos EUA Mais de 50 milhões de clientes 12,2% de todos os depósitos USD2.1 trilhões em ativos (2014) USD85.1 bilhões de receita (2014) USD13.8 bilhões de lucro (2015) Bank of America BANCOS
  15. Copyright © 2015, SAS Institute Inc. All rights reserv ed.

    LIBERTY MUTUAL SEGUROS PROBLEMAS DE NEGÓCIO • Habilidade de analisar e explorar uma vasta quantidade de dados não estruturados para agregar valor ao negócio • Utilizar o Hadoop para armazenar e acessar dados de telemetria dos clientes • Criar painéisexecutivos para a visualização de dados chaves sobre precificação e desempenho do negócio. • Desenvolver um novo programa de fidelidade e premiação SOLUÇÕES • SAS® Grid, SAS® Visual Analytics, SAS® Model Manager, SAS® Text Analytics, SAS® Scoring Accelerator for Hadoop, SAS® Real-Time Decision Manager, SAS® Data Loader for Hadoop, SAS/ACCESS® to Hadoop, SAS® Data Quality, SAS® Data Management RESULTADOS • Melhor entendimento dos clientes e, consequente, melhor segmentação dos clientes. • Avaliação do impacto dos dados de telemetria. Descobriram que dados de telemetria com intervalo de captura de um segundo fornecem maior capacidade preditiva do que dados com intervalo de captura de 15 segundos. Segunda maior seguradora dos EUA Mais de 50 milhões de clientes USD12.2 bilhões em ativos (2014) USD38.5 bilhões de receita (2014) Presente em 20 países
  16. Copyright © 2015, SAS Institute Inc. All rights reserv ed.

    GRANDE TELCO JAPONESA COMMUNICATIONS PROBLEMAS DE NEGOCIO • Uma das maiores empresas de telecomunicações no Japão, precisava prever o churn de clientes em um mercado super saturado com alta taxa de turnover • As capacidades analíticas existentes não permitiam escalar ao tamanho necessário para o volume de dados e não tinha a velocidade requerida pelo negócio • Um ecossistema Hadoop com capacidades analíticas in-memory foi a resposta com o desempenho e agilidades esperadas, encurtando a curva de aprendizado SOLUÇÕES • SAS® Visual Analytics, SAS® Visual Statistics, SAS® In-Memory Statistics for Hadoop, SAS® Data Loader for Hadoop RESULTADOS • Reduzir o chrun e aumentar o wallet share usando dados de comportamento dos clientes • Permitir a recomendação de conteúdo digital para cross-selling e up-selling • Usuários sem conhecimento técnico pode facilmente manipular, analisar e criar relatórios com os dados do Hadoop • Vários projetos futuros planejados para tirar o máximo proveito da plataforma SAS e Hadoop In- Memory em conjunto oferecem capacidades para analizar, visualizar e preparar dados em uma plataforma analítica moderna que melhora a produtividade e resposta aos gaps tecnológicos permitindo uma predição melhor e mais rápida para reduzi churn de clientes.
  17. Copyright © 2015, SAS Institute Inc. All rights reserv ed.

    SKY UK PROBLEMAS DE NEGOCIO • Melhorar a qualidade dos dados: Ofertas feitas para os clientes de segmentos incorretos geram altos custos • Propaganda customizada no set-top-box de acordo com o padrão de comportamento dos clientes • Melhor entendimento dos seus 11.5 milhões de clientes • Propagandas e campanha personalizadas para aumentar o Market share • Plataforma anterior era insuficientes para a velocidade desejada e a flexibilidade necessária para extrair valor SOLUÇÕES • SAS® Visual Analytics, SAS® Visual Statistics, SAS® Office Analytics, SAS® Data Loader for Hadoop, SAS® Scoring Accelerator for Hadoop, SAS® Data Management Advanced RESULTADOS • Melhora na satisfação dos funcionários • Melhoria na qualidade dos dados • Reduziu a necessidade de intervenção manual de TI e seus custos • Padronização para diversos times – solução robusta permitindo escalabilidade e repetição Maior provedor de TV paga do Reino Unido Mais de 11 milhões de clientes Serviço de TV Digital mais popular do Reino Unido Provedor também de telefone e banda larga COMMUNICATIONS
  18. Copyright © 2012, SAS Institute Inc. All rights reserv ed.

    SHOP DIRECT PROBLEMAS DE NEGÓCIO • Reduzir os altos custos remarcação de preços, custos de crédito e custos de TI enquanto migra para um cenário de 100% das vendas online • Habilidade de mapear e medir o perfil de cada cliente em prospecção de crédito e acompanhar toda a experiência digital para melhor responder aos sinais do cliente. • Prover uma maneira simples para usuários de negócio acessar e tomar ações com bases em dados do comportamento dos clientes SOLUÇÕES • SAS® Advanced Analytics, SAS® Scoring Accelerator for Hadoop, SAS® Text Miner, SAS® Data Management, SAS® Real-Time Decision Manager, SAS® Visual Analytics RESULTADOS • Consolidação de dados de clientes espalhados em 80 sistemas diferentes • Aumentar a renda com um melhor Customer Intelligence com mais dados dos clientes • Aumentar a renda oferecendo melhores condições de financiamento à clientes que antes o negavam por falta de dados histórico de crédito Maior ecommerce no Reino Unido Receitas de £1.7 bilhão Mais de 5 milhões de clientes Divisões de: • Roupas • Móveis • Eletrônicos • Joias • Utensílios Domésticos RETAIL ONLINE
  19. Copyr ight © 2012, SAS Institute Inc. All rights reser

    ved. BIG DATA WEEK LINKS E RECURSOS • SAS In-Memory Statistics for Hadoop • SAS Scoring Accelerator for Hadoop • SAS High Performance Suite • SAS Visual Analytics • SAS Visual Statistics http://www.sas.com/hpa • SAS Data Loader for Hadoop free trial: http://www.sas.com/en_us/software/data-management/data-loader-hadoop.html