Модель компетенций редко меняется одним большим релизом. Сначала HR уточняет определение, затем руководители просят добавить поведенческий индикатор, через полгода пересматриваются целевые уровни, а для новой должности появляется отдельный профиль. В интерфейсе это может выглядеть как обычное редактирование справочника.
Проблема обнаруживается позже. На дашборде у сотрудника растёт или снижается результат, хотя между двумя оценками изменился сам измерительный инструмент. Под одинаковым названием компетенции уже находится другое содержание. Система строит красивую линию динамики по точкам, которые нельзя честно соединять.
Чтобы сохранить смысл HR-аналитики, модель компетенций нужно хранить как версионируемый объект. Каждый результат должен быть связан с сотрудником и датой, а также с конкретной версией модели, профиля роли, шкалы и метода оценки.
Что именно меняется в модели
Под моделью часто понимают список названий: системное мышление, ответственность, делегирование, работа с конфликтами. Для сопоставимости данных этого недостаточно. На результат влияют несколько связанных элементов:
-
определение компетенции
-
поведенческие индикаторы
-
уровни и словесные якоря шкалы
-
состав заданий или вопросов
-
алгоритм расчёта итогового показателя
-
вес компетенции в профиле роли
-
порог, после которого результат считается достаточным
-
нормативная или сравнительная группа
-
способ проведения оценки
Изменение любого элемента может повлиять на интерпретацию. Иногда влияние минимально. Исправленная опечатка не превращает модель в новый инструмент. Замена формулировки «анализирует данные» на «проверяет гипотезы и принимает решение на основе нескольких источников» уже меняет содержание показателя, даже если название компетенции осталось прежним.
Версия должна описывать смысл, а не только состояние файла. Если сегодня администратор отредактировал справочник, а завтра вернул формулировку назад, это всё равно две операции, которые нужно видеть в истории.
Почему перевод шкалы не решает проблему
Самый простой случай выглядит так: старая оценка использовала шкалу от 1 до 5, новая использует шкалу от 1 до 10. Возникает соблазн умножить старые результаты на два и продолжить график.
Так можно поступить только тогда, когда изменилось представление числа, но не способ измерения. На практике вместе со шкалой часто меняются словесные якоря, задания и пороги. Старые 4 балла могли означать «стабильно проявляет компетенцию в типовых ситуациях». Новые 8 баллов означают «самостоятельно действует в сложных ситуациях и помогает другим». Числа похожи, требования разные.
Сопоставимость результатов требует большего, чем одинаковый диапазон. В организационных исследованиях это связано с понятием инвариантности измерения. В обзоре Роберта Ванденберга и Чарльза Лэнса проверка инвариантности названа логической предпосылкой сравнения групп и изменений во времени. Если инструмент в двух периодах измеряет разные конструкции или делает это по-разному, разницу средних нельзя автоматически считать развитием людей.
Стандарты образовательного и психологического тестирования также требуют подтверждать сопоставимость результатов, когда тест или процедура меняются. Для корпоративной модели вывод практический: преобразование шкалы должно иметь доказанное основание. Одной формулы нормализации недостаточно.
Какие версии нужно хранить
Минимальная архитектура истории включает четыре независимых объекта.
Версия корпоративной модели фиксирует состав компетенций, определения и общую логику уровней.
Версия компетенции хранит её конкретное содержание. Компетенция может перейти из модели 2.0 в 2.1 без изменений, а соседняя получить новую редакцию. Если версионировать только модель целиком, будет сложно понять, какие показатели остались сопоставимыми.
Версия профиля роли определяет, какие компетенции нужны должности, какие веса и целевые уровни используются. Корпоративная модель может не измениться, но профиль руководителя продаж после смены стратегии станет другим.
Версия метода оценки описывает источник результата: опросник, интервью, оценка руководителя, кейс или сочетание методов. Одинаковая компетенция, измеренная разными способами, не обязательно даёт взаимозаменяемые значения.
Отдельно хранится версия шкалы и правил расчёта, если они могут меняться независимо. Это кажется избыточным, пока не возникает вопрос: почему показатель вырос на 12%, хотя ответы сотрудника почти не изменились? Без истории алгоритма ответить невозможно.
Как должен храниться результат оценки
Запись результата должна отвечать на вопрос, по каким правилам было получено число. Для этого рядом с самим значением сохраняются:
-
дата и идентификатор цикла оценки
-
стабильный идентификатор компетенции
-
версия содержания компетенции
-
версия модели
-
версия шкалы и алгоритма расчёта
-
версия профиля роли
-
версия метода оценки
-
исходный результат и преобразованное значение
-
признак качества или полноты данных
Стабильный идентификатор особенно важен. Название может измениться, а идентификатор показывает, считается ли это продолжением прежней сущности. При этом нельзя использовать один идентификатор для показателя, смысл которого был заменён. Иначе система технически склеит историю, которую методологически следовало разделить.
Удалять старую версию после публикации новой тоже нельзя. Она должна стать недоступной для новых запусков, но остаться связанной с историческими результатами. В противном случае прошлые данные начнут отображаться с сегодняшними определениями и порогами.
Три класса изменений
Для рабочего процесса удобно разделить изменения на три уровня. Номера можно оформлять как 1.0, 1.1 и 2.0, но важнее правила, которые стоят за ними.
Редакционное изменение не меняет смысл и расчёт. Исправлена опечатка, добавлено пояснение для администратора, унифицировано оформление. Исторические результаты остаются сопоставимыми.
Совместимое методическое изменение уточняет инструмент, но сохраняет измеряемую конструкцию. Например, переформулированы несколько индикаторов без изменения уровней, а проверка на общей выборке показала сопоставимость результатов. Такая версия требует документации и проверки, но историю иногда можно продолжить.
Несовместимое изменение меняет определение, состав показателя, шкалу, алгоритм или метод настолько, что прежняя интерпретация больше не действует. Здесь создаётся новая основная версия, а автоматическое сравнение блокируется.
Граница между вторым и третьим классом не определяется мнением автора справочника. Нужны данные: перекрывающаяся выборка, параллельное применение версий, анализ структуры результатов и проверка того, сохраняется ли связь с рабочими критериями.
Матрица соответствия старой и новой модели
После пересмотра полезно составить карту перехода. Для каждой старой компетенции указывается её судьба в новой модели.
Вариантов несколько:
-
Компетенция перенесена без изменения смысла.
-
Определение уточнено, но показатель признан сопоставимым после проверки.
-
Одна компетенция разделена на две.
-
Несколько прежних компетенций объединены.
-
Содержание изменено, прямого соответствия нет.
-
Компетенция исключена или появилась впервые.
Первая ситуация позволяет строить непрерывную динамику. Во второй рядом с графиком нужна отметка о смене версии и ссылка на основание сопоставимости. В остальных случаях безопаснее показать две серии или начать новую линию.
Особенно опасны разделение и объединение. Если прежняя «управленческая эффективность» распалась на делегирование и развитие сотрудников, старый общий балл нельзя механически разложить на два новых. Обратная операция тоже не работает без модели весов и проверки на данных.
Матрица перехода нужна не только аналитикам. Она объясняет руководителю, почему в новом отчёте нет привычного графика за три года или почему часть динамики отмечена как несопоставимая.
Как подтвердить сопоставимость
Лучший момент для проверки находится до полного перехода. Старую и новую версии запускают на перекрывающейся выборке. Это могут быть одни и те же сотрудники или сопоставимые группы, если повторное прохождение создаёт сильный эффект запоминания.
Проверка идёт в несколько слоёв.
Сначала смотрят содержание: одинаковую ли способность описывают определения и задания. Затем анализируют распределения, надёжность и структуру показателей. После этого проверяют связь с внешними критериями: рабочими результатами, экспертными оценками или поведением в релевантных задачах.
Высокая корреляция между старой и новой версиями полезна, но сама по себе ничего не гарантирует. Два показателя могут двигаться вместе и при этом иметь разный уровень сложности или разные пороги. Для сравнения динамики важно, чтобы одинаковое значение сохраняло близкий смысл.
Если доказательств недостаточно, честный статус звучит как «сопоставимость не установлена». Это не ошибка проекта. Ошибкой будет нарисовать непрерывный график только потому, что руководителю хочется видеть три года истории.
Что показывать на дашборде
Пользователю не нужно разбираться во всех внутренних версиях. Но интерфейс не должен скрывать границы измерения.
Если изменения совместимы, на графике можно продолжить ряд и отметить дату перехода. В подсказке указываются версии и краткое описание изменения.
Если изменения несовместимы, линия прерывается. Старые данные остаются доступными отдельной серией, новые начинаются с собственной точки отсчёта. Формулировка «рост на 15%» для такого перехода не выводится.
Для группового отчёта важно не смешивать сотрудников, оценённых по разным правилам, в одно среднее без явной маркировки. Если половина подразделения прошла модель 1.0, а половина 2.0, агрегат может выглядеть точным до сотых и не иметь понятного смысла.
Пороговые статусы тоже должны быть версионными. Нельзя применить новый порог готовности к старому результату, если он рассчитывался по другой шкале или профилю роли.
Порядок перехода на новую модель
Безопасная миграция состоит из нескольких шагов.
-
Зафиксировать действующую модель и запретить её незаметное редактирование.
-
Описать причины каждого изменения и класс совместимости.
-
Создать новые версии компетенций, шкал и профилей, не перезаписывая старые.
-
Составить матрицу соответствия.
-
Провести перекрывающийся пилот и проверить сопоставимость там, где она заявлена.
-
Установить дату, после которой новые оценки запускаются только на новой версии.
-
Настроить отображение истории и ограничения для смешанных выборок.
-
Сохранить решение методолога и результаты проверки вместе с версией.
Последний пункт обычно выпадает. Через два года команда видит признак «совместимо», но уже не знает, кто и на каком основании его установил. Версия без документации превращается в номер ради номера.
Что произойдёт, если версии не хранить
Самая заметная проблема состоит в ложной динамике. Сотрудник якобы потерял компетенцию после повышения требований или вырос после упрощения шкалы.
Дальше искажается оценка программ развития. Компания сравнивает периоды, видит изменение среднего результата и связывает его с обучением, хотя между замерами обновился инструмент.
Ещё сложнее становится анализ кадровых решений. Через несколько лет невозможно восстановить, по каким требованиям человека включили в резерв или назначили на роль. В текущем интерфейсе его старый результат уже объясняется новой моделью.
Версионирование не делает оценку объективной автоматически. Оно решает более базовую задачу: не позволяет системе забыть, что именно измерялось в конкретный момент. Иногда правильный график короче ожидаемого. История обрывается на смене модели, и это лучше, чем длинная линия из несопоставимых чисел.
ссылка на оригинал статьи https://habr.com/ru/articles/1086752/