Улучшая performance review

Slide 1

Slide 1 text

Улучшая Performance Review Егор Толстой, Avito

Slide 2

Slide 2 text

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Slide 6

Slide 6 text

Slide 7

Slide 7 text

универсальный процесс performance review для %COMPANY_NAME%

Slide 8

Slide 8 text

универсальный процесс performance review для %COMPANY_NAME% это не нужно

Slide 9

Slide 9 text

универсальный процесс performance review для %COMPANY_NAME% это не нужно устройство performance review в Avito

Slide 10

Slide 10 text

универсальный процесс performance review для %COMPANY_NAME% это не нужно устройство performance review в Avito это будет

Slide 11

Slide 11 text

универсальный процесс performance review для %COMPANY_NAME% это не нужно устройство performance review в Avito паттерны поведения, аналитика, конкретные практики и инсайты это будет

Slide 12

Slide 12 text

универсальный процесс performance review для %COMPANY_NAME% это не нужно устройство performance review в Avito это будет паттерны поведения, аналитика, конкретные практики и инсайты это плюшки

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

улучшая performance review

Slide 16

Slide 16 text

что имеем сейчас как развивались куда еще расти

Slide 17

Slide 17 text

что имеем сейчас как развивались куда еще расти

Slide 18

Slide 18 text

Performance review – это инструмент измерения продуктивности

Slide 19

Slide 19 text

ты твой тимлид компания ! "

Slide 20

Slide 20 text

Slide 21

Slide 21 text

регулярная рефлексия "

Slide 22

Slide 22 text

"'( влияние на коллег

Slide 23

Slide 23 text

"( суперкрутой фидбэк

Slide 24

Slide 24 text

Slide 25

Slide 25 text

тушение пожаров ! "

Slide 26

Slide 26 text

эффективность команды !

Slide 27

Slide 27 text

No content

Slide 28

Slide 28 text

выравнивание целей сотрудника и компании "

Slide 29

Slide 29 text

январь март май июль сентябрь ноябрь февраль апрель июнь август октябрь декабрь Q1 review Q2 review Q3 review Q4 review Процесс review

Slide 30

Slide 30 text

Оцениваемый проводит self review Руководитель запускает процесс Руководитель дает обратную связь Оцениваемый выбирает респондентов Респонденты заполняют опросник Процесс review

Slide 31

Slide 31 text

Оцениваемый проводит self review

Slide 32

Slide 32 text

Оцениваемый выбирает респондентов Зиновьев Константин Разработчик мобильных приложений Менеджер Непосредственный руководитель Стейкхолдеры Заказчики ваших услуг Пиры Коллеги, с которыми вы работаете Подчиненные Формальные и неформальные

Slide 33

Slide 33 text

Руководитель запускает процесс • Выполнил OKR юнита • Прочитал Танненбаума • Выступил на 5 митапах • Прошел все Uncharted • Немного задержал релиз Менеджер Кости Руководитель группы разработки

Slide 34

Slide 34 text

Руководитель запускает процесс Менеджер Кости Руководитель группы разработки

Slide 35

Slide 35 text

Руководитель запускает процесс

Slide 36

Slide 36 text

Коллега Кости из другого юнита Разработчик мобильных приложений Респонденты заполняют опросник

Slide 37

Slide 37 text

Респонденты заполняют опросник Коллега Кости из другого юнита Разработчик мобильных приложений • Делал редизайн карточки объявления в рамках OKR • Прочитал Танненбаума • Выступил на 3 митапах • На 5 дней задержал релиз Ожидания: • Мобильный разработчик • Наставник • Участник юнита

Slide 38

Slide 38 text

Респонденты заполняют опросник • Делал редизайн карточки объявления в рамках OKR • Прочитал Танненбаума • Выступил на 3 митапах • На 5 дней задержал релиз Ожидания: • Мобильный разработчик • Наставник • Участник юнита Коллега Кости из другого юнита Разработчик мобильных приложений

Slide 39

Slide 39 text

Респонденты заполняют опросник Оценка:  «Ниже ожиданий» Коллега Кости из другого юнита Разработчик мобильных приложений Комментарии к оценке:  «Вместо того, чтобы обратиться за помощью, неделями закапывается в проблему сам. Кроме того, пока не начал ориентироваться в компании»

Slide 40

Slide 40 text

Руководитель дает обратную связь (Manager.Avg + Stakeholder.Avg + Peers.Avg + Subordinates.Avg) 4

Slide 41

Slide 41 text

Руководитель дает обратную связь Оценка,  обратная связь, обсуждение Зиновьев Константин Разработчик мобильных приложений Менеджер Кости Руководитель группы разработки

Slide 42

Slide 42 text

что имеем сейчас как развивались куда еще расти

Slide 43

Slide 43 text

Анонимность

Slide 44

Slide 44 text

Анонимность все видят всё обезличенный фидбэк итоги от менеджера

Slide 45

Slide 45 text

Анонимность все видят всё обезличенный фидбэк итоги от менеджера Иван Петров Работать с Константином не стал бы, если бы мне дали такой выбор. Он никогда не попадает в оценки, провоцирует конфликты, жарит рыбу в микроволновке! Владимир Иванов Костя – самый сильный программист из всех, что я видел. Может делать и быстро, и качественно.

Slide 46

Slide 46 text

Анонимность все видят всё обезличенный фидбэк итоги от менеджера Работать с Константином не стал бы, если бы мне дали такой выбор. Он никогда не попадает в оценки, провоцирует конфликты, жарит рыбу в микроволновке! Костя – самый сильный программист из всех, что я видел. Может делать и быстро, и качественно.

Slide 47

Slide 47 text

Анонимность Анонимный чувак ??? Комментарии к оценке:  «В своей команде занимается только разработчиками и тестировщиками. На взаимодействие с дизайнером вообще не обращает внимание, а хочется, чтобы пытался вовлекать»

Slide 48

Slide 48 text

Анонимность Анонимный чувак ??? Комментарии к оценке:  «Слышал мнение, что он управляет командой недостаточно эффективно»

Slide 49

Slide 49 text

Анонимность все видят всё обезличенный фидбэк итоги от менеджера Плюсы: - Делает быстро - Делает качественно Минусы: - Не попадает в оценки - Конфликтный - Жарит рыбу

Slide 50

Slide 50 text

Анонимность Обезличенный фидбэк Воспитательные работы Часть сотрудников видят всё Все видят всё, за редким исключением

Slide 51

Slide 51 text

Slide 52

Slide 52 text

Slide 53

Slide 53 text

Slide 54

Slide 54 text

Работа с данными

Slide 55

Slide 55 text

9.655 оценок 0 1.412 респондентов 1 1.015 оцениваемых 3 квартала

Slide 56

Slide 56 text

Сколько нужно респондентов - Оптимальное количество респондентов в ревью – 9-11 человек  - Это средний размер команды плюс 2-3 внешних контакта  - Есть хвосты из маленьких команд и менеджеров с большим нетворкингом

Slide 57

Slide 57 text

Сколько тратить времени - Большинство проводят до 11 ревью за период    - Средняя продолжительность ревью – около 10 минут    - С учётом фокус-фактора, у респондента уходит до 4 часов в квартал на ревью

Slide 58

Slide 58 text

Распределение оценок - Средний балл – 3,47, есть сильный перекос в сторону 4    - Две гипотезы: не умеем справедливо оценивать, либо часть людей не на своих местах Q2

Slide 59

Slide 59 text

Распределение оценок - Средний балл – 3,27    - Доля 4 и 5 резко упала после проработки обеих гипотез прошлого квартала Q2 Q3

Slide 60

Slide 60 text

Распределение оценок - Средний балл – 3,25, дельта с прошлым кварталом – 0,02    - Форма гистограммы также не меняется Q2 Q3 Q4

Slide 61

Slide 61 text

Распределение оценок - Между последними двумя кварталами процесс стабилизировался. Основное опасение – большое количество 3 и очень малое – 2 и 1. Q2 Q3 Q4 3,47 3,27 3,25

Slide 62

Slide 62 text

Влияние групп на оценки - Гипотеза: люди склонны завышать оценки своей команде и занижать остальным   - Различие между оценками в среднем в районе 0,03 балла    - На концах интервала расхождение не больше 0,5 баллов в обе стороны

Slide 63

Slide 63 text

Влияние ролей на оценки - Гипотеза: выполняемая роль влияет на оценки   - Различие между оценками ролей достигало 0,37 на старте, сейчас – 0,07    - Менеджеры – самые жесткие ребята

Slide 64

Slide 64 text

Справедливость Доброта Трудолюбие

Slide 65

Slide 65 text

Характеристики:  - Дал более 4 оценок - Средний балл выше 4,1 - Отсутствуют 1 и 2 Осип Борзилов Оценил: 4 Средняя: 5,00 Оскар Белоусов Оценил: 4 Средняя: 4,75 Иван Челомцев Оценил: 7 Средняя: 4,67 Денис Султанов Оценил: 10 Средняя: 4,43

Slide 66

Slide 66 text

Характеристики:  - Дал более 4 оценок - Средний балл ниже 2,7 - Отсутствуют 4 и 5 Осип Борзилов Оценил: 6 Средняя: 2,50 Оскар Белоусов Оценил: 6 Средняя: 2,50 Иван Челомцев Оценил: 6 Средняя: 2,67 Денис Султанов Оценил: 7 Средняя: 2,67

Slide 67

Slide 67 text

Характеристики:  - Дал более 8 оценок - Средний балл – 3,0 - Дисперсия – 0 - Комментарий < 500 знаков Осип Борзилов Оценил: 12 Средняя: 3 Оскар Белоусов Оценил: 11 Средняя: 3 Иван Челомцев Оценил: 11 Средняя: 3 Денис Султанов Оценил: 8 Средняя: 3 Дисперсия: 0 Дисперсия: 0 Дисперсия: 0 Дисперсия: 0

Slide 68

Slide 68 text

Стратегия вырожденной группы - Итоговая оценка – среднее по группам  - Оценка группы – среднее по участникам  - Если в группе один оценщик, он получает очень большой вес 5 коллег 3 + 3 + 2 + 2 + 3 1 стейкхолдер X + 3 подчиненных 3 + 3 + 3 + 2,6 + X + 3 3 X = 1, результат 2,2 X = 3, результат 2,9 X = 5, результат 3,5 =>

Slide 69

Slide 69 text

Нормализация оценок - score – текущая оценка - avg_author_score – средняя оценка респондента - 3 – средний уровень оценок по компании score - avg_author_score + 3 if count > 3 else score

Slide 70

Slide 70 text

Нормализация оценок score - avg_author_score + 3 if count > 3 else score score: 4,3 4 нормализованный итог: 4 - 4,3 + 3 = 2,7 Нормализация оценок добряков - score – текущая оценка - avg_author_score – средняя оценка респондента - 3 – средний уровень оценок по компании

Slide 71

Slide 71 text

Нормализация оценок score - avg_author_score + 3 if count > 3 else score score: 4,3 2 нормализованный итог: 2 - 4,3 + 3 = 0,7 Нормализация оценок добряков - score – текущая оценка - avg_author_score – средняя оценка респондента - 3 – средний уровень оценок по компании

Slide 72

Slide 72 text

Нормализация оценок score - avg_author_score + 3 if count > 3 else score score: 2,4 2 нормализованный итог: 2 - 2,4 + 3 = 2,6 Нормализация оценок справедливых - score – текущая оценка - avg_author_score – средняя оценка респондента - 3 – средний уровень оценок по компании

Slide 73

Slide 73 text

Нормализация оценок score - avg_author_score + 3 if count > 3 else score score: 2,4 4 нормализованный итог: 4 - 2,4 + 3 = 4,6 Нормализация оценок справедливых - score – текущая оценка - avg_author_score – средняя оценка респондента - 3 – средний уровень оценок по компании

Slide 74

Slide 74 text

Нормализация оценок Perfomance score Сильно ниже ожиданий Ниже ожиданий Соответствует ожиданиям Превышает ожидания Сильно превышает ожидания Нормализованный итог Сильно ниже ожиданий Ниже ожиданий Соответствует ожиданиям Превышает ожидания Сильно превышает ожидания

Slide 75

Slide 75 text

Slide 76

Slide 76 text

Slide 77

Slide 77 text

Корректировка оценок Оценка:  «Сильно превысила ожидания» Добряк Путает шкалу performance review со школьной системой баллов Комментарии к оценке:  «Отработал строго по своим ожиданиям, молодец!»

Slide 78

Slide 78 text

Корректировка оценок Оценка:  «Сильно превысила ожидания» Добряк Комментарии к оценке:  «Отработал строго по своим ожиданиям, молодец!» «Соответствует ожиданиям» Путает шкалу performance review со школьной системой баллов

Slide 79

Slide 79 text

Паттерны поведения 7

Slide 80

Slide 80 text

Оценка:  «Сильно превысила ожидания» Впечатлительный Оценивает, основываясь на одном ярком впечатлении Комментарии к оценке:  «Помог мне почистить айфон от вирусов. Он - один из лучших в компании!»

Slide 81

Slide 81 text

Оценивает, основываясь на одном ярком впечатлении Диагностика:  - Нет обоснования оценке, либо оно однобоко Таблетки: - Требовать детали в обосновании оценок - В течение квартала вести учет взаимодействиям с коллегами Впечатлительный

Slide 82

Slide 82 text

8 Злопамятный Оценивает все время работы с сотрудником, а не последний квартал Оценка:  «Ниже ожиданий» Комментарии к оценке:  «В 2014 году, когда мы сидели в одной комнате, он много курил. А еще весь прошлый год уделял больше внимания коду, а не потребностям бизнеса»

Slide 83

Slide 83 text

8 Оценивает все время работы с сотрудником, а не последний квартал Диагностика:  - Много оценочных суждений - Нет деталей Таблетки: - Требовать детали в обосновании оценок - В течение квартала вести учет взаимодействиям с коллегами Злопамятный

Slide 84

Slide 84 text

Конформист Не может оценить, но оценивает Оценка:  «Соответствует ожиданиям» Комментарии к оценке:  «-»

Slide 85

Slide 85 text

Диагностика:  - Бесполезный комментарий Таблетки: - Дать возможность отказаться от ревью - Выявлять любителей халявы в аналитике Конформист Не может оценить, но оценивает

Slide 86

Slide 86 text

Оценка:  «Соответствует ожиданиям» Комментарии к оценке:  «Справляется со своими обязанностями, не хуже и не лучше других» Жалостливый Не дает конструктивной обратной связи, жалеет сотрудника

Slide 87

Slide 87 text

Жалостливый Не дает конструктивной обратной связи, жалеет сотрудника Диагностика:  - Систематически завышает оценки Таблетки: - Нормализация оценок - Бенчмаркинг отзыва относительно ожиданий

Slide 88

Slide 88 text

Оценка:  «Соответствует ожиданиям» Комментарии к оценке:  «Он перформил как бешеный, но это соответствовало моим изначально сильно завышенным ожиданиям» Оценивает по субъективным ожиданиям Субъективный

Slide 89

Slide 89 text

Субъективный Оценивает по субъективным ожиданиям Диагностика:  - Словосочетание «мои ожидания» и производные от него Таблетки: - Простая система ожиданий от позиций и ролей

Slide 90

Slide 90 text

Инструменты

Slide 91

Slide 91 text

MVP (1/3) - Опрос на Google Form - Ручная рассылка по списку респондентов - Заполняется менеджером - Ручные напоминания

Slide 92

Slide 92 text

MVP (2/3) - Сводка по команде - Результат синхронизируется вручную - Заполняется менеджером

Slide 93

Slide 93 text

MVP (3/3) - Балансировка участников ревью - Контроль участия всех сотрудников

Slide 94

Slide 94 text

Опросник Результаты Дерево bit.ly/2BIsXM9 bit.ly/2nJksIm bit.ly/2nIc5N4

Slide 95

Slide 95 text

Сотрудник " Подбор людей Оценка других Анализ фидбэка 20 мин 120 мин 10 мин Тимлид ! Сбор данных Создание форм Рассылка форм Пинки людей Подведение итогов 120 мин 60 мин 60 мин 60 мин 180 мин Хэд ов что-то = Калибровка данных Сбор результатов 90 мин 240 мин 38,5 ч

Slide 96

Slide 96 text

38,5 ч

Slide 97

Slide 97 text

No content

Slide 98

Slide 98 text

что имеем сейчас как развивались куда еще расти

Slide 99

Slide 99 text

Упрощение системы ожиданий - Описание всех позиций должно быть предельно простым - В идеале – описать простым чек-листом

Slide 100

Slide 100 text

Сокращение количества полей - Большой процент респондентов заполняет только первое поле - Нужно экспериментировать на пользователях и проверять гипотезы

Slide 101

Slide 101 text

Управление пиковой нагрузкой - Выполнять ревью всем одновременно – тяжело и не эффективно  - Можно сглаживать нагрузку, распределяя разные группы по времени

Slide 102

Slide 102 text

Попроситься в ревью - Иногда тебя могут забыть или намеренно не добавить в ревью - Дадим возможность предложить себя как ревьюера

Slide 103

Slide 103 text

проведите эксперимент соберите данные обсудите на ретро Performance review • устройство процесса в Avito • анонимность, тулинг и антипаттерны • аналитика оценок и отзывов Егор Толстой t.me/etolstoy