Processing thousands of files in seconds to help translation communities

Transcript

1. Globalcode – Open4education Trilha – Golang Arthur Silva Estag @ Globo.com
2. Globalcode – Open4education Processando milhares de arquivos em segundos para ajudar comunidades de traduções usando Go
3. Globalcode – Open4education @arxdsilva Computer Engineering Student @ UVA Intern @ globo.com Tsuru PaaS (tsuru.io) XML-Comp (github.com/xml-comp)
4. Globalcode – Open4education Always mind your surroundings
5. Globalcode – Open4education Always mind your surroundings
6. Globalcode – Open4education Always mind your surroundings
7. Globalcode – Open4education Always mind your surroundings Rimworld - simulador de colônia de sci-fi dirigido por IA
8. Globalcode – Open4education Traduções
9. Globalcode – Open4education Contexto Pré-alpha 440+ tradutores Mudanças constantes Alto tempo para tradução Dependente de comparação linha a linha Baixo conhecimento tecnológico dos tradutores
10. Globalcode – Open4education Processo de tradução
11. Globalcode – Open4education -Github -2 text editors -line to line comparison Processo de tradução
12. Globalcode – Open4education Ferramenta Baixo conhecimento necessário Alta eficiência Rápido Confiável .xml
13. Globalcode – Open4education A ferramenta Inputs: pasta Origem (EN) e Tradução (~) Entrar na pasta Abrir arquivos Guardar tag de cada linha Comparar tags Origem-Tradução Gerar diff’s EXTREME GOHORSE PROCESS - 2 hrs
14. Globalcode – Open4education Problema?
15. Globalcode – Open4education Problema João me dá uma ajuda? Não sou um transportador somente era permitida comparação pasta-a-pasta, criado processo repetitivo para projetos grandes (como o rimworld), MAS funcionava.
16. Globalcode – Open4education Escalando .tsuruignore Ignorar arquivos/pastas Menor tamanho de imagem da app
17. Globalcode – Open4education .tsuruignore Ler padrões Guardar padrões Leitura do repositório Guardar localização dos padrões Deploy + inteligente
18. Globalcode – Open4education .tsuruignore Deploy - client path list pathFinder Pasta Compactada API Unit Unit Unit Unit “Web” .tsuruignore .git *_test.go Separar padrões Adicionar? Antes de ler a pasta o processo de deploy (cliente) procura pelo arquivo `.tsuruignore`, armazena os padrões e os procura pathfinder: de forma recursiva encontra arquivos que sejam dos padrões especificados EXATAMENTO OQ QUERIA: olhar todas as pastas / arquivos
19. Globalcode – Open4education Escalando
20. Globalcode – Open4education Problema?
21. Globalcode – Open4education Coding `if err != nil` == `catch` no java gerava 2 diffs: pastas que faltam / arquivos que faltam, diffs de tags armazenadas na traducao
22. Globalcode – Open4education Coding com base no diretório original: checa tudo que ha dentro, diretório > existe na trad?, ok compara | arquivo: compara Projeto pode escalar em tamanho
23. Globalcode – Open4education Gargalo Slice vs Maps Encontrar elementos no Mapa é bem mais rápido que em slice | operações em slices em Go são ‘feias’ Mais complexa: ordenar 2 slices > checar equidade > iterar em 2 slices alterando 1 deles > retornar alterado
24. Globalcode – Open4education Gargalo Slice vs Maps Menos complexo: cria retorno > checar equidade > checa existencia > add? > retorna
25. Globalcode – Open4education Conclusão Rápido Fácil Performático Tsuru 4kk logs/dia API cartola 200k req/s Futuro Suporte total ao Windows Aviso de tags deprecadas
26. Globalcode – Open4education Obrigado! twitter.com/arxdsilva github.com/arxdsilva arthur.silva@corp.globo.com
27. Globalcode – Open4education Perguntas?