Приветствую. Я Михаил Куцаев, руководитель группы тестирования в ТЕХНОНИКОЛЬ Диджитал. Сегодня расскажу о том, как моя команда оказалась на пороге выгорания, снижения эффективности и перегрузок и о том, как внутренние конфликты и недовольство разрушили привычные процессы. Ещё это история о том, как стабильность, прозрачность и объективность помогают удерживать людей. В общем, речь пойдёт о матрице компетенций (в конце статьи поделюсь таблицей). О том, как мы к ней пришли, через что прошли, какие шишки набили и что она нам дала. Если бы всё было так просто: сели, обсудили ключевые параметры (какой должна быть система оценки: гибкой или жёсткой, какие в ней будут квалификационные категории и сколько их должно быть, как определять вес навыков, как часто проводить оценку и какие навыки оценивать), всё учли на старте и сделали матрицу, то и статьи бы не было. Но мы проделали путь длиной 7 лет, чтобы прийти к тому, что у нас есть сейчас. Сразу обозначу, кто такой современный тестировщик в нашем понимании. Это специалист с большим количеством компетенций во многих областях. Он должен не только составлять тест-кейсы и оформлять ошибки, но и разбираться в предметной области, разрабатывать автотесты, иметь представление о программировании и владеть рядом дополнительных инструментов. Так мы получаем инженеров, которые отлично проводят ручное тестирование, пишут автотесты и способны говорить на одном языке как с аналитиками, так и с разработчиками.
Конфликт: «Я вырос» против «Я ждал от тебя не такого»
Начнём. Основным триггером для создания матрицы компетенций стало увеличение численности сотрудников в моей команде. Когда штат растёт, нагрузка на руководителя неизбежно увеличивается: становится меньше личного контакта, размываются зоны ответственности, а у сотрудников снижается чувство причастности. В какой-то момент возникает конфликт интересов. Сотрудник приходит к руководителю и заявляет, что он вырос, нарастил компетенции и хочет повышения зарплаты. Руководитель же смотрит на ситуацию шире и отвечает, что ждал от сотрудника совершенно другого вектора развития. На этой почве возникают конфликты и недовольство с обеих сторон растёт, хотя ни одна из сторон не заинтересована в таком положении дел. Руководителю нужна объективная, быстрая и точная оценка компетенций для распределения задач, а сотрудники нуждаются в непредвзятом подходе и определённости — понимании того, как и куда расти. Если этой определённости нет, наступает демотивация. Чтобы снизить субъективность и риски взаимного недопонимания, решили внедрить матрицу компетенций. Задачу предстояло решить в сжатые сроки — внедрение планировалось осуществить за 3–4 месяца, а оценивать собирались только профессиональные навыки.
Поиск решения
При проектировании системы стало очевидно: взять готовый шаблон из интернета не получится, поскольку в разных компаниях и ИТ-департаментах процессы, стек технологий и распределение ролей уникальны. Мы проанализировали статьи, обучающие курсы и доклады, сформировали единый пул навыков и отобрали только те, которые актуальны для нас с учетом особенности бизнес-процессов компании. А затем добавили специфические навыки, характерные именно для тестировщиков нашего подразделения. Например, у нас QA выполняют некоторые сервисные функции, которые традиционно должны делать разработчики (это касается и 1С, и Web). В итоге собрали почти 100 навыков. Идея разбить их на группы пришла сама собой, изначально делили для удобства. Всего получилось 6 блоков:
Общие знания. В первую очередь мы все являемся сотрудниками своего подразделения. Как правило, в своей работе мы опираемся на внутренние правила, положения и регламенты (например, регламент разработки). У нас также есть собственный тестовый ландшафт и среда для разработки, а еще — внутренние системы управления разработкой. Всё это — база, без которой ни один сотрудник не сможет двигаться дальше. Этот блок осваивается в течение испытательного срока.
Профессиональные навыки. Теория тестирования, техники тест-дизайна, работа с требованиями, тестовой документацией и ошибками. По большей части всем этим должен обладать тестировщик уже на позиции джуна.
Знания функциональных областей. Ну а это самый большой блок. Долго спорили: должен ли тестировщик знать ту область, которую он тестирует? В итоге пришли к тому, что должен. Логика здесь была такая: чем больше функционала компании знает QA, тем он ценнее, тем выше его категория и денежное вознаграждение. Для себя мы делим функционал на внутренний (наши доработки) и типовые конфигурации 1С (ERP, ЗУП, УПП и др.). При этом соотношение теории и практики в данном блоке составляет 70 на 30 соответственно.
Автоматизированное и нагрузочное тестирование. Ключевая группа навыков, позволяющая ускорить регрессионные проверки, высвободить ресурсы тестировщиков и снизить влияние человеческого фактора на количество ошибок. Здесь навыки делятся по направлениям: 1С и Web, функциональное и нагрузочное.
Начальные навыки программирования. Тестирование — это сервисная функция в процессе разработки. Если мы можем снять часть нагрузки с наших разработчиков, мы должны это делать. Плюс умение писать простой код не будет лишним в автотестировании, а понимание внутреннего устройства платформы помогает искать ошибки.
Прочие технические навыки. Дополнительный инструментарий, обладая которым QA меньше зависит от коллег из других отделов, а тестирование идёт значительно быстрее: Swagger, Postman, SQL, знание технологии обменов (планы обмена, шина, RabbitMQ), Git, работа в командной строке, умение развернуть базу 1С на сервере или сайт, а также базовые знания по обслуживанию серверов 1С и использование технологического журнала.
Самой нетривиальной задачей оказалось оценить вес и сложность каждого навыка и выставить по каждому максимально возможные баллы. Понимая, что для разных навыков нужны разные способы проверки, ввели четыре метода оценки.
Первый — внешние тесты (например, «1С:Профессионал» — проверочные материалы на знание типовой ERP, когда фирма 1С уже сделала это за нас).
Второй — внутренние экзамены (не просто вопрос-ответ, а демонстрация экрана и выполнение действий в программе). Их принимают аналитики по внутренним функциональным блокам и тимлиды по программированию, интеграциям и тестированию.
Третий — внешнее обучение (только строго определенные проверенные школы с жёсткой проверкой домашних заданий).
И четвертый — практические задачи, близкие к боевым (при этом практика по автотестам засчитывается только при условии успешной сдачи теории).
Файлы множатся, перегрузка растёт
В процессе эксплуатации (применения системы) мы столкнулись с рядом проблем и недоработок исходной концепции, которые потребовали организационных изменений:
Разрыв с рынком труда. Параллельно с внедрением матрицы компания заказывала исследования рынка для привязки зарплат к грейдам. Мы должны были заложить их в основу нашей матрицы, но упустили этот момент и строили матрицу интуитивно. К счастью, наша логика совпала с рыночными реалиями (где джун закрывает базовое ручное тестирование, а у мидлов и сеньоров появляется много технических навыков, знания программирования и автотестов и т.д.), поэтому кардинально переделывать матрицу не пришлось — мы лишь точечно скорректировали веса. Кроме того, мы ввели понятие минимально допустимых (пороговых) баллов по группам компетенций: чтобы получить категорию, недостаточно набрать общую сумму — сотрудник обязан набрать минимум по каждой ключевой группе (общим знаниям, профессиональным навыкам и функционалу). Это защита от перекосов: если к нам приходит бывший админ или бизнес-аналитик с сильно развитыми непрофильными навыками, он не получит категорию тестировщика, не зная базовых основ профессии. Заодно мы чуть-чуть подняли порог по навыкам, касающимся автотестов и программирования, для мидлов и сеньоров.
Иллюзия теоретических знаний. В первые годы мы полагались на теоретические экзамены по функциональным блокам. Практика показала: опросить сотрудника досконально по всем нюансам в рамках теоретического экзамена невозможно – специалист, который просто знает теорию, и специалист, который решает задачи на практике, — это не одно и то же. Поэтому, чтобы оценки были более справедливые, мы ввели в оценку знаний по некоторым компетенциям практическую составляющую.
Количество категорий. Изначально у нас было всего три квалификационных категории (Junior, Middle, Senior), между которыми были огромные интервалы по баллам. А вот что делать, если у сотрудника было желание расти, он выкладывался по максимуму, но на аттестации недобрал 10-15 баллов до нового грейда? При этом специалиста, который чуть-чуть не дотянул до мидла, нельзя назвать джуном, и с накопленным багажом знаний он легко мог уйти из компании. Решением стало введение промежуточных категорий 1+ и 2+ (в штатном расписании это те же должности, но при достижении условий сотрудник получает доплату). Они задумывались как временная ступенька для добора навыков на следующую категорию, чтобы сотрудник не терял мотивацию.
Периодичность аттестации. Изначально мы сделали её ежегодной. Осенью выделяли 2–2,5 месяца, в течение которых все желающие могли сдать всё запланированное. Этот процесс превратился в тяжелейшее испытание и для команды, и для меня. Представьте: сотруднику нужно последовательно один за одним сдавать ряд экзаменов, а в перерывах умудриться подготовиться к следующим, параллельно выполняя рабочие задачи. К концу такого марафона накапливалась усталость и снижалась производительность, а сразу после завершения аттестации люди начинали проситься в отпуск. Мы кардинально изменили подход: разбили аттестацию на 3-4 периода по две-три недели, распределив их равномерно в течение года. Нагрузка снизилась в разы, люди перестали уставать.
Excel. Первые годы мы работали с простой экселькой. Пока сотрудников немного, было терпимо, но по мере роста отдела это стало неудобно. Каждый специалист хочет видеть только свои навыки, файлы начали множиться, у каждого появился собственный локальный вариант таблицы. Простая задача вроде добавления ссылки на материалы для подготовки превращалась в череду лишних телодвижений. Решение и результаты решил вынести в отдельный раздел.
Сапожник с сапогами
Мы поняли, что нам нужен инструмент, где у каждого сотрудника будет своё рабочее место, где он видит только интересные ему компетенции, ссылки на материалы и свои сертификаты. Так появилась конфигурация «Аттестация сотрудников». Это тот случай, когда небольшие затраты на разработку дали очень хороший эффект. Конфигурация поддерживает две роли: администратор и сотрудник. Основные объекты:
Справочник «Компетенции»: описание, метод оценки, ссылки на материалы.

Справочник «Компетенции» Справочник «Программы аттестации»: параметры на год (список компетенций, максимальные баллы, интервалы по категориям, минимально допустимые баллы).

Справочник «Программы аттестации» Документ «Аттестация сотрудника»: индивидуальный набор компетенций с баллами и историей прошлых периодов.

Документ «Аттестация сотрудника»
Мы ушли от большой таблицы к привычным объектам 1С. А саму матрицу формируем в виде отчёта именно тогда, когда это надо.

Более того, мы поняли, что через матрицу можно стимулировать изучение новых инструментов. В 2022 году решили перейти с инструмента «1С:Сценарное тестирование» на Vanessa Automation, но навыков в команде не было. Мы ввели новую компетенцию с достаточно большим баллом и последовательно уменьшали баллы за устаревший инструмент, снижая его привлекательность для изучения и стимулируя команду переходить на новый стек. Опираясь на возможности разработанной конфигурации, мы выстроили сквозную оценку компетенций. Вот как выглядит текущий процесс:
Создание программы: в начале года на базе предыдущей программы мы создаём новый элемент справочника «Программы аттестации», внося корректировки по баллам и набору навыков.
Обсуждение с командой: все изменения обсуждаются с сотрудниками, проговариваются причины. С помощью отчётов «Сравнение программ» и «Сравнение аттестаций сотрудника» каждый может видеть изменения. После обсуждения для каждого формируется документ «Аттестация» по новой программе с автоматическим пропорциональным пересчётом баллов.
Индивидуальные планы: мы проводим серию встреч, определяем фокус развития на год и удаляем из документа строки с ненужными в текущем периоде компетенциями. Так получается полноценный ИПР.
План обучения: с помощью обработки «Матрица компетенций» мы агрегируем данные по планируемым курсам и централизованно планируем обучение групп на год.
Аттестация и контроль: по мере готовности сотрудников мы проводим приёмку навыков и фиксируем результаты в документах, контролируя переходы по категориям с помощью специальных отчётов и обработок.
Для анализа итогов используется специальная обработка «Итоги аттестации сотрудника», которая наглядно показывает текущие баллы, закрытые категории (включая промежуточные и то, каких именно навыков не хватает до следующего грейда).
Что еще хочу отметить? В целом наша матрица и в табличном виде, и в конфигурации дала нам наглядное представление о различиях между тестировщиками разных категорий:
1 категория — это сотрудники, хорошо освоившие навыки из группы общие, которые на очень хорошем уровне владеют профессиональными навыками тестировщика и знают одну или несколько функциональных областей.
2 категория — это сотрудники, отлично освоившие навыки из первых двух групп, знающие уже гораздо больше функционала компании, а также обладающие навыками автоматизации и имеющие базовые представления о разработке.
3 категория — это всесторонне развитые специалисты, владеющие большим числом навыков на высоком уровне. Проиллюстрирую скриншотом, вот такую картину мы видим:

Как читать эту таблицу: в первом столбце — группы навыков. Во втором — максимально возможный балл по программе аттестации, в третьем — результаты конкретного сотрудника. Следующие столбцы показывают минимальные значения, которые нужно получить по каждой группе для присвоения категорий от 1 до 3. В последней строке — итоги: общий максимум, набранная аттестуемым сумма и минимальные требования для каждого грейда. В этом примере мы видим, что аттестуемый набрал необходимое количество баллов для категории 1+ (68,3 при требуемых 66). При этом для перехода на вторую категорию нужно набрать в сумме чуть меньше 12 баллов, а также немного подтянуть навыки из группы «Функциональные знания» (сейчас у сотрудника 22,9, а надо 24) и особенно обратить внимание на навыки из группы «Начальные навыки программирования» (у него всего 2,9, а нужно минимум 11).
Шесть получили, ноль держим в уме
Создание и внедрение матрицы компетенций и собственной конфигурации заняло у нас определенное время, потребовало пересмотра подходов, гибкости и честности, чтобы признать несовершенства и устранить ошибки в системе. Чего уж таить: это был период болезненной трансформации — кто-то не хотел связываться с аттестациями, кому-то было проще уйти на другое место. На старте от нас ушло порядка 50% тестировщиков (в относительных показателях эта доля выглядит пугающе, но в абсолютных значениях цифра небольшая — штат тестировщиков на тот момент был небольшим). Но в итоге этот шаг и систематизация процессов полностью себя оправдали. Сейчас наша команда выросла почти в три раза, а показатели текучести удалось снизить до 6 %. Для наглядности собрал данные по годам.

Конечно, никто из нас не работает в вакууме. Нельзя однозначно утверждать, что на удержание людей повлияла исключительно матрица компетенций — это всегда комплексный результат. На решение сотрудника остаться в компании влияет целый ряд факторов: регулярные индексации зарплат, пакет ДМС, социальная поддержка, здоровые взаимоотношения в коллективе, адекватный менеджмент и интересные рабочие задачи и т.д. Матрица — один из инструментов в этом наборе, но не единственная причина. Тем не менее, матрица компетенций помогла нам уйти от субъективизма, споров и неоправданных ожиданий. Теперь каждый тестировщик понимает свой уровень, видит вектор развития и знает, какие навыки нужны для перехода на следующую ступень. А у руководителя появился удобный инструмент управления качеством, обучением и мотивацией, встроенный прямо в контур нашей информационной системы. Трансформация процессов оказалась сложной, но она того стоила: команда стала стабильнее, сильнее и автономнее. Чтобы вы могли взять наш опыт за основу для собственных процессов, делюсь наработкой — структурой матрицы компетенций, которую можно скачать в формате PDF с Яндекс Диска.

Комментарии 0