Систематизация оптимизации Александр Малащицкий ведущий разработчик команды «Платформа»

Что такое SuperJob? 1 млн пользователей в день 25 млн резюме в базе 2 млн приглашений в месяц

Как было раньше

Инструменты • Pinba

Pinba

Pinba: детализация

Инструменты • Pinba
 • Письмо

Письмо Top URL по кол-ву запросов Top requests ============ 7529 GET www.superjob.ru/resume/views-21813258.html 6952 GET api.superjob.ru/2.0/messages/list/?page=0&count=100 6391 GET api.superjob.ru/2.11/resumes/received/?status=0&keywords=&count=100&page=0 5991 GET api.superjob.ru/2.0/notifications/?count=50&with_friends_resumes=1 5977 GET api.superjob.ru/2.0/resumes/received/?page=14&count=100&only_new_received=1&status=0&types= 5905 GET api.superjob.ru/2.0/messages/list/?page=0&count=100 5649 GET api.superjob.ru/2.0/resumes/received/29411277/?page=0&count=100 5585 GET api.superjob.ru/2.0/messages/list/?page=0&count=100 5581 GET api.superjob.ru/2.0/resumes/?town=12&payment_to=23000&age_from=18&age_to=35&count=100&perio 5491 GET api.superjob.ru/2.0/resumes/received/27727241/?status=0&page=0&count=100 5292 GET api.superjob.ru/2.11/resumes/?keyword=%D0%90%D0%B4%D0%BC%D0%B8%D0%BD%D0%B8%D1%81%D1%82%D1%8 5261 GET api.superjob.ru/2.0/messages/list/?page=0&count=100 5182 GET api.superjob.ru/2.0/resumes/?town=12&payment_to=23000&age_from=18&age_to=35&count=100&perio 4960 GET api.superjob.ru/2.0/messages/list/?page=0&count=100 4797 GET api.superjob.ru/2.0/messages/list/?page=0&count=100 4773 GET api.superjob.ru/2.0/messages/list/?page=0&count=100 4686 GET api.superjob.ru/2.0/notifications/?count=50&with_friends_resumes=1 4242 GET api.superjob.ru/2.0/notifications/?count=50&with_friends_resumes=1 4065 GET api.superjob.ru/2.0/messages/list/?page=0&count=100 3961 GET api.superjob.ru/2.0/messages/list/?page=0&count=100 3904 GET www.superjob.ru/resume/search_resume.html?sbmit=1&show_refused=0&keywords%5B0%5D%5Bskwc%5D= 3881 GET api.superjob.ru/2.0/notifications/?count=50&with_friends_resumes=1 3840 GET api.superjob.ru/2.0/messages/list/?page=0&count=100 3782 GET www.superjob.ru/resume/search_resume.html?sbmit=1&show_refused=0&keywords%5B0%5D%5Bskwc%5D= 3779 GET www.superjob.ru/resume/search_resume.html?sbmit=1&show_refused=0&keywords%5B0%5D%5Bskwc%5D= 3754 GET api.superjob.ru/2.0/notifications/?count=50&with_friends_resumes=1 3702 GET www.superjob.ru/resume/search_resume.html?sbmit=1&detail_search=1&strict_type_of_work=&keyw

Оценка результата оптимизации

Инструменты • Pinba
 • Письмо
 • «На глазок»

Редизайн

Перевод сайта на новый API Старая версия Новая версия

Перевод сайта на новый API Старая версия Новая версия

Apache JMeter

Сравнение потребления ресурсов Старый Новый

Curl + Logger

Curl + Logger

Blackfire

Из чего состоит Blackfire

Из чего состоит Blackfire • Probe


Из чего состоит Blackfire • Probe
 • Агент


Из чего состоит Blackfire • Probe
 • Агент
 • Компаньон

Blackfire: интерфейс

Оптимизация фильтров «на глазок» 684 ms 376 ms

Оптимизация бутстрапа CPU: 66.6ms Mem: 5.9M CPU: 38.8ms Mem: 4.3M -42% -28%

Собираем метрики

Метрики: количество и скорость

Метрики: сумма

Метрики: детализация работы Полезная работа Начальная загрузка

phpspy

phpspy: стек-трейс

phpspy: флеймграф

Диаграмма до оптимизации

Лишнее соединение с базой данных

Диаграмма после оптимизации

Оптимизировали начальную загрузку

Использование сервисов PHP

Анализ PHP кода

Агрегированный флеймграф

Разбили по эндпоинтам

Диаграмма поиска вакансий

Диаграмма поиска вакансий 21%

Путь оптимизатора Графана phpspy Оптимизация

А точно нужен PROD?

Разница графов на разном окружении PROD DEV

Overhead от phpspy

phpspy CPU overhead

Что дали нам все эти исследования

Как в итоге оптимизировать?

Как в итоге оптимизировать? Измеряй 1

Как в итоге оптимизировать? Измеряй Анализируй 1 2

Как в итоге оптимизировать? Измеряй Анализируй Оценивай 1 2 3

Спасибо!

Ссылки на ресурсы Blackfire https://blackfire.io/ Phpspy https://github.com/adsr/phpspy Pinba http://pinba.org/ Apache JMeter https://jmeter.apache.org/