Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Indexando e Classificando dados da Justiça Brasileira

Indexando e Classificando dados da Justiça Brasileira

A83885421a7b4b8aff3325bd4e7f9954?s=128

Tarsis Azevedo

December 14, 2018
Tweet

Transcript

  1. Indexando e Classificando Dados da Justiça Brasileira

  2. QUEM SOU EU? Tarsis Azevedo Programador na Jusbrasil Co-fundador do

    Data Bootcamp github.com/tarsisazevedo twitter.com/tarsisazevedo
  3. None
  4. 42 MI De usuarios únicos todos os meses 30% Da

    internet brasileira 1 MI de documentos por dia 100% dos diarios oficiais indexados
  5. None
  6. None
  7. None
  8. Python Java RabbitMQ Celery Flask BigTable Spark

  9. Crawler Conversor Big table Xavier Telepathy RabbitMQ Alertas

  10. XAVIER & TELEPATHY

  11. XAVIER & TELEPATHY

  12. XAVIER & TELEPATHY

  13. XAVIER & TELEPATY

  14. XAVIER & TELEPATHY Telepathy Flask Xavier Scikit learn Celery Etc…

    MySQL Training set HBase ES Redis Etc..
  15. XAVIER & TELEPATHY

  16. XAVIER & TELEPATHY

  17. NLP & ML POS Tagger NER SVM

  18. POS TAGGER O Ministro de Estado Chefe da Controladoria-Geral da

    União
  19. POS TAGGER O Ministro de Estado Chefe da Controladoria-Geral da

    União O <artd>|ART|M|S|@>N Ministro PROP|M|S|@SUBJ> de PRP|@N< Estado PROPN Chefe PROPN da PROPN Controladoria PROPN - PU|@PU Geral PROP|@N< da PRP|@N< União PROPN
  20. NER O MINISTRO DE ESTADO CHEFE DA CONTROLADORIA-GERAL DA UNIÃO

    , no uso da competência que lhe foi subdelegada pelo art. 1º da Portaria nº 1.056, do Ministro de Estado Chefe da Casa Civil da Presidência da República, de 11 de junho de 2003, resolve: ...
  21. MACHINE LEARNING SVM.LinearSVC

  22. 500k+ blocos/dia

  23. INDEXANDO Páginas de Diário Andamentos de processo Jurisprudência de 2º

    grau
  24. ALERTAS Nomes Atualizações em processo

  25. INFRA Kubernetes Google Compute Engine Cloud SQL

  26. INFRA - K8S 251 services (apps, bancos, queue consumers) 1061

    pods Auto-scale para gerenciar fluxos repentinos
  27. INFRA - AUTO SCALE

  28. INFRA - GKE 118 VMS 51 preemptivas

  29. MONITORING Prometheus Grafana Metabase

  30. Temos Vagas Salvador / São Paulo / Remoto https://github.com/jusbrasil/careers vagas@jusbrasil.com.br

  31. OBRIGADO