An Optimization Story

This is about why and how we optimized one of our background jobs. How it went and what we learned from it.

Transcript

1. An Optimization Story László Bácsi lackac Secret Sauce Partners, Inc. 13. október 2., szerda
2. 13. október 2., szerda
3. DON’T! 13. október 2., szerda
4. OPTIMIZE SMARTLY 13. október 2., szerda
5. Why optimize? 13. október 2., szerda
6. Why optimize? 13. október 2., szerda
7. Why optimize? 13. október 2., szerda
8. Why optimize? 13. október 2., szerda
9. API DAILY JOBS 13. október 2., szerda
10. The Ideas • Don’t update unnecessarily • Don’t pre-calculate stuff we would recalculate anyway • Schema change – extract embedded 13. október 2., szerda
11. The Process 1. Measure baseline 2. Implement an idea 3. Measure performance improvement 4. Repeat 13. október 2., szerda
12. The Bonus • 1+n queries, caching with IdentityMap • Don’t GC during a job (dangerous) • GC optimizations 13. október 2., szerda
13. The Tools • New Relic RPM • GC::Profiler.enable • Ruby 2.0 13. október 2., szerda
14. THE RESULTS 13. október 2., szerda
15. 13. október 2., szerda
16. down from 5s+ 13. október 2., szerda
17. 13. október 2., szerda
18. down from 1000+ 13. október 2., szerda
19. UpdateCustomers job 13. október 2., szerda
20. 13. október 2., szerda
21. Conclusions • Never optimize prematurely • Measure • Monitor 13. október 2., szerda
22. Thanks! Questions? we’re hiring! SSP 13. október 2., szerda