Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Deploy de modelos em produção: chegou a hora do...

Deploy de modelos em produção: chegou a hora do DataOps?

Esta talk foi apresentada na Python Brasil 14. Seu objetivo é apresentar o conceito de DataOps e o seu papel dentro do desafio de deploy de modelos de machine learning.

Daniela Petruzalek

October 21, 2018

Transcript

40 slides
  1. Deploy de Modelos em Produção: Chegou a Hora do DataOps?

    Daniela Petruzalek Development Consultant @ ThoughtWorks Google Developer Expert [email protected]
  2. O Caminho para o ML: Vida Real Academia P&D Ciência

    de Dados Engenharia de Dados Negócio Tecnologia Modelo ?????
  3. Fases de Preparação dos Modelos Coleta dos Dados Análise Exploratória

    Limpeza dos Dados Treinamento Validação do Modelo Deploy Monitoração / Teste AB ESCOLHA DO MODELO MANUTENÇÃO DO MODELO
  4. Fatores que Influenciam o Deploy Tipo de Aprendizado Tipo de

    Predição Modelos: Small Data x Big Data Processamento: Batch x Online (Real Time / Near-Real Time) Target: Container x Cluster (Cloud vs On-premises)
  5. "organizations which design systems ... are constrained to produce designs

    which are copies of the communication structures of these organizations." - Melvin Conway, 1967
  6. Pontos Chave na Cultura DevOps - CALMS: - Culture -

    Automation - Lean Management - Measurement - Sharing
  7. Princípios Básicos - Acabar com silos - Organização de times

    de operações e desenvolvimento - Divisão de conhecimento entre times, falta de colaboração - Acidentes são normais - Foco na recuperação rápida e não em achar culpados - Os erros são coletivos
  8. Princípios Básicos - Mudanças devem ser graduais - Mudanças devem

    ser pequenas e frequentes - Continuous Integration & Continuous Deployment - Ferramentas e cultura estão interrelacionados - Com ferramentas erradas e a cultura certa ainda é possível sair do outro lado - O oposto não é verdade

More Decks by Daniela Petruzalek

Other Decks in Technology