Приветствую. Я Михаил Куцаев, руководитель группы тестирования в ТЕХНОНИКОЛЬ Диджитал. Сегодня расскажу о том, как моя команда оказалась на пороге выгорания, снижения эффективности и перегрузок и о том, как внутренние конфликты и недовольство разрушили привычные процессы. Ещё это история о том, как стабильность, прозрачность и объективность помогают удерживать людей. В общем, речь пойдёт о матрице компетенций (в конце статьи поделюсь таблицей). О том, как мы к ней пришли, через что прошли, какие шишки набили и что она нам дала. Если бы всё было так просто: сели, обсудили ключевые параметры (какой должна быть система оценки: гибкой или жёсткой, какие в ней будут квалификационные категории и сколько их должно быть, как определять вес навыков, как часто проводить оценку и какие навыки оценивать), всё учли на старте и сделали матрицу, то и статьи бы не было. Но мы проделали путь длиной 7 лет, чтобы прийти к тому, что у нас есть сейчас. Сразу обозначу, кто такой современный тестировщик в нашем понимании. Это специалист с большим количеством компетенций во многих областях. Он должен не только составлять тест-кейсы и оформлять ошибки, но и разбираться в предметной области, разрабатывать автотесты, иметь представление о программировании и владеть рядом дополнительных инструментов. Так мы получаем инженеров, которые отлично проводят ручное тестирование, пишут автотесты и способны говорить на одном языке как с аналитиками, так и с разработчиками.
Конфликт: «Я вырос» против «Я ждал от тебя не такого»
Начнём. Основным триггером для создания матрицы компетенций стало увеличение численности сотрудников в моей команде. Когда штат растёт, нагрузка на руководителя неизбежно увеличивается: становится меньше личного контакта, размываются зоны ответственности, а у сотрудников снижается чувство причастности. В какой-то момент возникает конфликт интересов. Сотрудник приходит к руководителю и заявляет, что он вырос, нарастил компетенции и хочет повышения зарплаты. Руководитель же смотрит на ситуацию шире и отвечает, что ждал от сотрудника совершенно другого вектора развития. На этой почве возникают конфликты и недовольство с обеих сторон растёт, хотя ни одна из сторон не заинтересована в таком положении дел. Руководителю нужна объективная, быстрая и точная оценка компетенций для распределения задач, а сотрудники нуждаются в непредвзятом подходе и определённости — понимании того, как и куда расти. Если этой определённости нет, наступает демотивация. Чтобы снизить субъективность и риски взаимного недопонимания, решили внедрить матрицу компетенций. Задачу предстояло решить в сжатые сроки — внедрение планировалось осуществить за 3–4 месяца, а оценивать собирались только профессиональные навыки.
Поиск решения
При проектировании системы стало очевидно: взять готовый шаблон из интернета не получится, поскольку в разных компаниях и ИТ-департаментах процессы, стек технологий и распределение ролей уникальны. Мы проанализировали статьи, обучающие курсы и доклады, сформировали единый пул навыков и отобрали только те, которые актуальны для нас с учетом особенности бизнес-процессов компании. А затем добавили специфические навыки, характерные именно для тестировщиков нашего подразделения. Например, у нас QA выполняют некоторые сервисные функции, которые традиционно должны делать разработчики (это касается и 1С, и Web). В итоге собрали почти 100 навыков. Идея разбить их на группы пришла сама собой, изначально делили для удобства. Всего получилось 6 блоков:
-
Общие знания. В первую очередь мы все являемся сотрудниками своего подразделения. Как правило, в своей работе мы опираемся на внутренние правила, положения и регламенты (например, регламент разработки). У нас также есть собственный тестовый ландшафт и среда для разработки, а еще — внутренние системы управления разработкой. Всё это — база, без которой ни один сотрудник не сможет двигаться дальше. Этот блок осваивается в течение испытательного срока.
-
Профессиональные навыки. Теория тестирования, техники тест-дизайна, работа с требованиями, тестовой документацией и ошибками. По большей части всем этим должен обладать тестировщик уже на позиции джуна.
-
Знания функциональных областей. Ну а это самый большой блок. Долго спорили: должен ли тестировщик знать ту область, которую он тестирует? В итоге пришли к тому, что должен. Логика здесь была такая: чем больше функционала компании знает QA, тем он ценнее, тем выше его категория и денежное вознаграждение. Для себя мы делим функционал на внутренний (наши доработки) и типовые конфигурации 1С (ERP, ЗУП, УПП и др.). При этом соотношение теории и практики в данном блоке составляет 70 на 30 соответственно.
-
Автоматизированное и нагрузочное тестирование. Ключевая группа навыков, позволяющая ускорить регрессионные проверки, высвободить ресурсы тестировщиков и снизить влияние человеческого фактора на количество ошибок. Здесь навыки делятся по направлениям: 1С и Web, функциональное и нагрузочное.
-
Начальные навыки программирования. Тестирование — это сервисная функция в процессе разработки. Если мы можем снять часть нагрузки с наших разработчиков, мы должны это делать. Плюс умение писать простой код не будет лишним в автотестировании, а понимание внутреннего устройства платформы помогает искать ошибки.
-
Прочие технические навыки. Дополнительный инструментарий, обладая которым QA меньше зависит от коллег из других отделов, а тестирование идёт значительно быстрее: Swagger, Postman, SQL, знание технологии обменов (планы обмена, шина, RabbitMQ), Git, работа в командной строке, умение развернуть базу 1С на сервере или сайт, а также базовые знания по обслуживанию серверов 1С и использование технологического журнала.
Самой нетривиальной задачей оказалось оценить вес и сложность каждого навыка и выставить по каждому максимально возможные баллы. Понимая, что для разных навыков нужны разные способы проверки, ввели четыре метода оценки.
-
Первый — внешние тесты (например, «1С:Профессионал» — проверочные материалы на знание типовой ERP, когда фирма 1С уже сделала это за нас).
-
Второй — внутренние экзамены (не просто вопрос-ответ, а демонстрация экрана и выполнение действий в программе). Их принимают аналитики по внутренним функциональным блокам и тимлиды по программированию, интеграциям и тестированию.
-
Третий — внешнее обучение (только строго определенные проверенные школы с жёсткой проверкой домашних заданий).
-
И четвертый — практические задачи, близкие к боевым (при этом практика по автотестам засчитывается только при условии успешной сдачи теории).
Файлы множатся, перегрузка растёт
В процессе эксплуатации (применения системы) мы столкнулись с рядом проблем и недоработок исходной концепции, которые потребовали организационных изменений:
-
Разрыв с рынком труда. Параллельно с внедрением матрицы компания заказывала исследования рынка для привязки зарплат к грейдам. Мы должны были заложить их в основу нашей матрицы, но упустили этот момент и строили матрицу интуитивно. К счастью, наша логика совпала с рыночными реалиями (где джун закрывает базовое ручное тестирование, а у мидлов и сеньоров появляется много технических навыков, знания программирования и автотестов и т.д.), поэтому кардинально переделывать матрицу не пришлось — мы лишь точечно скорректировали веса. Кроме того, мы ввели понятие минимально допустимых (пороговых) баллов по группам компетенций: чтобы получить категорию, недостаточно набрать общую сумму — сотрудник обязан набрать минимум по каждой ключевой группе (общим знаниям, профессиональным навыкам и функционалу). Это защита от перекосов: если к нам приходит бывший админ или бизнес-аналитик с сильно развитыми непрофильными навыками, он не получит категорию тестировщика, не зная базовых основ профессии. Заодно мы чуть-чуть подняли порог по навыкам, касающимся автотестов и программирования, для мидлов и сеньоров.
-
Иллюзия теоретических знаний. В первые годы мы полагались на теоретические экзамены по функциональным блокам. Практика показала: опросить сотрудника досконально по всем нюансам в рамках теоретического экзамена невозможно – специалист, который просто знает теорию, и специалист, который решает задачи на практике, — это не одно и то же. Поэтому, чтобы оценки были более справедливые, мы ввели в оценку знаний по некоторым компетенциям практическую составляющую.
-
Количество категорий. Изначально у нас было всего три квалификационных категории (Junior, Middle, Senior), между которыми были огромные интервалы по баллам. А вот что делать, если у сотрудника было желание расти, он выкладывался по максимуму, но на аттестации недобрал 10-15 баллов до нового грейда? При этом специалиста, который чуть-чуть не дотянул до мидла, нельзя назвать джуном, и с накопленным багажом знаний он легко мог уйти из компании. Решением стало введение промежуточных категорий 1+ и 2+ (в штатном расписании это те же должности, но при достижении условий сотрудник получает доплату). Они задумывались как временная ступенька для добора навыков на следующую категорию, чтобы сотрудник не терял мотивацию.
-
Периодичность аттестации. Изначально мы сделали её ежегодной. Осенью выделяли 2–2,5 месяца, в течение которых все желающие могли сдать всё запланированное. Этот процесс превратился в тяжелейшее испытание и для команды, и для меня. Представьте: сотруднику нужно последовательно один за одним сдавать ряд экзаменов, а в перерывах умудриться подготовиться к следующим, параллельно выполняя рабочие задачи. К концу такого марафона накапливалась усталость и снижалась производительность, а сразу после завершения аттестации люди начинали проситься в отпуск. Мы кардинально изменили подход: разбили аттестацию на 3-4 периода по две-три недели, распределив их равномерно в течение года. Нагрузка снизилась в разы, люди перестали уставать.
-
Excel. Первые годы мы работали с простой экселькой. Пока сотрудников немного, было терпимо, но по мере роста отдела это стало неудобно. Каждый специалист хочет видеть только свои навыки, файлы начали множиться, у каждого появился собственный локальный вариант таблицы. Простая задача вроде добавления ссылки на материалы для подготовки превращалась в череду лишних телодвижений. Решение и результаты решил вынести в отдельный раздел.
Сапожник с сапогами
Мы поняли, что нам нужен инструмент, где у каждого сотрудника будет своё рабочее место, где он видит только интересные ему компетенции, ссылки на материалы и свои сертификаты. Так появилась конфигурация «Аттестация сотрудников». Это тот случай, когда небольшие затраты на разработку дали очень хороший эффект. Конфигурация поддерживает две роли: администратор и сотрудник. Основные объекты:
-
Справочник «Компетенции»: описание, метод оценки, ссылки на материалы.
Справочник «Компетенции» -
Справочник «Программы аттестации»: параметры на год (список компетенций, максимальные баллы, интервалы по категориям, минимально допустимые баллы).
Справочник «Программы аттестации» -
Документ «Аттестация сотрудника»: индивидуальный набор компетенций с баллами и историей прошлых периодов.
Документ «Аттестация сотрудника»
Мы ушли от большой таблицы к привычным объектам 1С. А саму матрицу формируем в виде отчёта именно тогда, когда это надо.
Более того, мы поняли, что через матрицу можно стимулировать изучение новых инструментов. В 2022 году решили перейти с инструмента «1С:Сценарное тестирование» на Vanessa Automation, но навыков в команде не было. Мы ввели новую компетенцию с достаточно большим баллом и последовательно уменьшали баллы за устаревший инструмент, снижая его привлекательность для изучения и стимулируя команду переходить на новый стек. Опираясь на возможности разработанной конфигурации, мы выстроили сквозную оценку компетенций. Вот как выглядит текущий процесс:
-
Создание программы: в начале года на базе предыдущей программы мы создаём новый элемент справочника «Программы аттестации», внося корректировки по баллам и набору навыков.
-
Обсуждение с командой: все изменения обсуждаются с сотрудниками, проговариваются причины. С помощью отчётов «Сравнение программ» и «Сравнение аттестаций сотрудника» каждый может видеть изменения. После обсуждения для каждого формируется документ «Аттестация» по новой программе с автоматическим пропорциональным пересчётом баллов.
-
Индивидуальные планы: мы проводим серию встреч, определяем фокус развития на год и удаляем из документа строки с ненужными в текущем периоде компетенциями. Так получается полноценный ИПР.
-
План обучения: с помощью обработки «Матрица компетенций» мы агрегируем данные по планируемым курсам и централизованно планируем обучение групп на год.
-
Аттестация и контроль: по мере готовности сотрудников мы проводим приёмку навыков и фиксируем результаты в документах, контролируя переходы по категориям с помощью специальных отчётов и обработок.
Для анализа итогов используется специальная обработка «Итоги аттестации сотрудника», которая наглядно показывает текущие баллы, закрытые категории (включая промежуточные и то, каких именно навыков не хватает до следующего грейда).
Что еще хочу отметить? В целом наша матрица и в табличном виде, и в конфигурации дала нам наглядное представление о различиях между тестировщиками разных категорий:
-
1 категория — это сотрудники, хорошо освоившие навыки из группы общие, которые на очень хорошем уровне владеют профессиональными навыками тестировщика и знают одну или несколько функциональных областей.
-
2 категория — это сотрудники, отлично освоившие навыки из первых двух групп, знающие уже гораздо больше функционала компании, а также обладающие навыками автоматизации и имеющие базовые представления о разработке.
-
3 категория — это всесторонне развитые специалисты, владеющие большим числом навыков на высоком уровне. Проиллюстрирую скриншотом, вот такую картину мы видим:
Как читать эту таблицу: в первом столбце — группы навыков. Во втором — максимально возможный балл по программе аттестации, в третьем — результаты конкретного сотрудника. Следующие столбцы показывают минимальные значения, которые нужно получить по каждой группе для присвоения категорий от 1 до 3. В последней строке — итоги: общий максимум, набранная аттестуемым сумма и минимальные требования для каждого грейда.В этом примере мы видим, что аттестуемый набрал необходимое количество баллов для категории 1+ (68,3 при требуемых 66). При этом для перехода на вторую категорию нужно набрать в сумме чуть меньше 12 баллов, а также немного подтянуть навыки из группы «Функциональные знания» (сейчас у сотрудника 22,9, а надо 24) и особенно обратить внимание на навыки из группы «Начальные навыки программирования» (у него всего 2,9, а нужно минимум 11).
Шесть получили, ноль держим в уме
Создание и внедрение матрицы компетенций и собственной конфигурации заняло у нас определенное время, потребовало пересмотра подходов, гибкости и честности, чтобы признать несовершенства и устранить ошибки в системе. Чего уж таить: это был период болезненной трансформации — кто-то не хотел связываться с аттестациями, кому-то было проще уйти на другое место. На старте от нас ушло порядка 50% тестировщиков (в относительных показателях эта доля выглядит пугающе, но в абсолютных значениях цифра небольшая — штат тестировщиков на тот момент был небольшим). Но в итоге этот шаг и систематизация процессов полностью себя оправдали. Сейчас наша команда выросла почти в три раза, а показатели текучести удалось снизить до 6 %. Для наглядности собрал данные по годам.
Конечно, никто из нас не работает в вакууме. Нельзя однозначно утверждать, что на удержание людей повлияла исключительно матрица компетенций — это всегда комплексный результат. На решение сотрудника остаться в компании влияет целый ряд факторов: регулярные индексации зарплат, пакет ДМС, социальная поддержка, здоровые взаимоотношения в коллективе, адекватный менеджмент и интересные рабочие задачи и т.д. Матрица — один из инструментов в этом наборе, но не единственная причина. Тем не менее, матрица компетенций помогла нам уйти от субъективизма, споров и неоправданных ожиданий. Теперь каждый тестировщик понимает свой уровень, видит вектор развития и знает, какие навыки нужны для перехода на следующую ступень. А у руководителя появился удобный инструмент управления качеством, обучением и мотивацией, встроенный прямо в контур нашей информационной системы. Трансформация процессов оказалась сложной, но она того стоила: команда стала стабильнее, сильнее и автономнее. Чтобы вы могли взять наш опыт за основу для собственных процессов, делюсь наработкой — структурой матрицы компетенций, которую можно скачать в формате PDF с Яндекс Диска.
ссылка на оригинал статьи https://habr.com/ru/articles/1108788/