Indexando e Classificando dados da Justiça Brasileira

Transcript

1. Indexando e Classificando Dados da Justiça Brasileira
2. QUEM SOU EU? Tarsis Azevedo Programador na Jusbrasil Co-fundador do Data Bootcamp github.com/tarsisazevedo twitter.com/tarsisazevedo
4. 42 MI De usuarios únicos todos os meses 30% Da internet brasileira 1 MI de documentos por dia 100% dos diarios oficiais indexados
8. Python Java RabbitMQ Celery Flask BigTable Spark
9. Crawler Conversor Big table Xavier Telepathy RabbitMQ Alertas
10. XAVIER & TELEPATHY
11. XAVIER & TELEPATHY
12. XAVIER & TELEPATHY
13. XAVIER & TELEPATY
14. XAVIER & TELEPATHY Telepathy Flask Xavier Scikit learn Celery Etc… MySQL Training set HBase ES Redis Etc..
15. XAVIER & TELEPATHY
16. XAVIER & TELEPATHY
17. NLP & ML POS Tagger NER SVM
18. POS TAGGER O Ministro de Estado Chefe da Controladoria-Geral da União
19. POS TAGGER O Ministro de Estado Chefe da Controladoria-Geral da União O <artd>|ART|M|S|@>N Ministro PROP|M|S|@SUBJ> de PRP|@N< Estado PROPN Chefe PROPN da PROPN Controladoria PROPN - PU|@PU Geral PROP|@N< da PRP|@N< União PROPN
20. NER O MINISTRO DE ESTADO CHEFE DA CONTROLADORIA-GERAL DA UNIÃO , no uso da competência que lhe foi subdelegada pelo art. 1º da Portaria nº 1.056, do Ministro de Estado Chefe da Casa Civil da Presidência da República, de 11 de junho de 2003, resolve: ...
21. MACHINE LEARNING SVM.LinearSVC
22. 500k+ blocos/dia
23. INDEXANDO Páginas de Diário Andamentos de processo Jurisprudência de 2º grau
24. ALERTAS Nomes Atualizações em processo
25. INFRA Kubernetes Google Compute Engine Cloud SQL
26. INFRA - K8S 251 services (apps, bancos, queue consumers) 1061 pods Auto-scale para gerenciar fluxos repentinos
27. INFRA - AUTO SCALE
28. INFRA - GKE 118 VMS 51 preemptivas
29. MONITORING Prometheus Grafana Metabase
30. Temos Vagas Salvador / São Paulo / Remoto https://github.com/jusbrasil/careers vagas@jusbrasil.com.br
31. OBRIGADO