Методология расчёта показателей
Главное правило. Языковая модель не выставляет ни одного балла. Она формирует только текст: доказательства, объяснения, рекомендации. Все числа считает программный код по формулам ниже. Поэтому одинаковые ответы всегда дают одинаковый результат.
Словарь
Слова, которыми говорят отчёт и этот документ. Каждое значит одно и то же везде.
| Термин | Что означает |
|---|---|
| Готовность | Итоговая оценка 0–100: взвешенная сумма четырёх показателей, целое число (шаг 7). |
| Показатель (индикатор) | Одно из четырёх измерений готовности: профессиональное соответствие, коммуникация, адаптивное мышление, вопросы кандидата. У каждого свой вес — 0,35 · 0,25 · 0,20 · 0,20; веса одинаковы для любой вакансии. |
| Составляющая (подындикатор) | Часть показателя — по три у каждого, всего двенадцать. Объясняет, откуда взялся балл показателя, и в него не входит (шаг 8). |
| Признак | То, что извлекается из одного ответа: соответствие требованиям вакансии, конкретность, релевантность, доказательство, личный вклад, результат, причинная связь (шаг 1). |
| Уровень | Балл по шкале 1–5. В баллах 0–100 это уровень × 20: возможны только 20, 40, 60, 80, 100 (шаг 6). |
| Компетенция вакансии | Требование из загруженной вакансии. Её доля в вакансии определяет, сколько вопросов по ней задаётся; в итоговую готовность не входит (шаг 9). |
Глоссарий показателей
Все показатели отчёта — что каждый измеряет, из чего складывается, сколько весит и как считается. Шкала у всех одна: уровень 1–5 (1 — слабо, 3 — на уровне, 5 — отлично), в баллах — уровень × 20, то есть 20, 40, 60, 80 или 100. Итог — готовность — целое число от 0 до 100.
| Показатель | Что измеряет | Составляющие | Вес в итоге | Как считается |
|---|---|---|---|---|
| Готовность | Насколько уверенно вы прошли бы это интервью сегодня. Не прогноз найма и не оценка квалификации в целом. | Четыре показателя ниже | — | 0,35 × проф. соответствие + 0,25 × коммуникация + 0,20 × адаптивное мышление + 0,20 × вопросы кандидата; целое число 0–100 (шаг 7). |
| Профессиональное соответствие | Насколько ваш опыт отвечает требованиям вакансии и подкреплён конкретными фактами, а не общими формулировками. | Соответствие требованиям вакансии · Личный вклад · Доказанный результат | 0,35 — до 35 баллов из 100 | Балл ответа = соответствие требованиям вакансии + личный вклад + доказанный результат (шаги 3–5). Среднее по ответам → уровень 1–5 → × 20 (шаг 6). |
| Коммуникация | Как построен ответ: отвечаете ли на заданный вопрос, видна ли связь между действием и результатом, нет ли противоречий. | Релевантность ответа · Непротиворечивость · Реакция на уточнение | 0,25 — до 25 баллов из 100 | Балл ответа = релевантность ответа + непротиворечивость − реакция на уточнение (шаг 3). Среднее по ответам → уровень 1–5 → × 20 (шаг 6). |
| Адаптивное мышление | Как вы рассуждаете в незнакомой ситуации. Оценивается ход рассуждения, а не совпадение с «правильным» ответом. | Допущения · Ход решения до вывода · Проверка и реализуемость | 0,20 — до 20 баллов из 100 | Балл задачи — среднее её оценок, округлённое до уровня. Среднее по задачам → уровень 1–5 → × 20 (шаг 6). |
| Вопросы кандидата | Насколько вы использовали интервью, чтобы оценить работодателя и проверить риски роли. | Бизнес-оптика · Проверка работодателя · Мотивация | 0,20 — до 20 баллов из 100 | Балл вопроса — среднее девяти оценок. Среднее по вопросам → уровень 1–5 → × 20 (шаг 6). Меньше трёх вопросов — не оценивается, вес переходит к остальным (шаг 7). |
Составляющие объясняют показатель: по ним видно, где именно терялись баллы. В балл ответа они входят как три его части (шаг 3), а в балл показателя — через средний балл ответов; отдельно в итог не складываются.
| Показатель | Составляющая | Что показывает | Из чего считается |
|---|---|---|---|
| Профессиональное соответствие | Соответствие требованиям вакансии | Относится ли пример из ответа к требованиям этой вакансии. | Признак «соответствие требованиям вакансии» (1–5), среднее по ответам. |
| Профессиональное соответствие | Личный вклад | Видно ли, что решили и сделали лично вы, а не команда. | Доля ответов с признаком «личный вклад». |
| Профессиональное соответствие | Доказанный результат | Подкреплён ли рассказ конкретикой и проверяемым фактом, назван ли измеримый итог и видно ли, что он получен вашими действиями; в вопросе о будущем — проверяемый критерий. | Среднее четырёх уровней: конкретика (1–5), доля ответов с фактом, доля ответов с итогом и доля ответов со связью «сделал → получилось» — две последние среди тех, где результат требовался. |
| Коммуникация | Релевантность ответа | Отвечаете ли вы прямо на то, о чём спросили: о той ситуации и о том времени, которые названы в вопросе, — без ухода в другую тему, другой пример или общие рассуждения. | Признак «релевантность» (1–5), среднее по ответам. |
| Коммуникация | Непротиворечивость | Складывается ли рассказ в целое: конкретно, с понятной связью «сделал → получилось» и без расхождений с тем, что сказано раньше. | Среднее трёх уровней: конкретность (1–5), доля ответов со связью «сделал → получилось» (где результат требовался), доля ответов без противоречий. |
| Коммуникация | Реакция на уточнение | Даёте ли вы нужную деталь, когда её прямо запрашивают. | Доля уточняющих вопросов к неполным ответам, после которых пробел закрыт. |
| Адаптивное мышление | Допущения | Проговариваете ли исходные допущения и как поняли условие, прежде чем решать. | Подкритерии задач: допущения, трактовка условия, понимание сути (среднее, 1–5). |
| Адаптивное мышление | Ход решения до вывода | Разбиваете ли задачу на шаги и доводите ли рассуждение до конкретного ответа или решения. | Подкритерии задач: декомпозиция, последовательность, перенос, приоритеты, логика, расчёт, вывод, качество решения, ясность. |
| Адаптивное мышление | Проверка и реализуемость | Проверяете ли правдоподобие результата, называете ли компромиссы и выдержит ли решение реальные ограничения. | Подкритерии задач: проверка на здравый смысл, компромиссы, риски, суждение, практичность, гибкость. |
| Вопросы кандидата | Бизнес-оптика | Связываете ли роль с результатом компании и спрашиваете ли как владелец решения. | Подкритерии вопросов: бизнес-мышление, стратегическое мышление, сигнал уровня, качество решения. |
| Вопросы кандидата | Проверка работодателя | Проверяете ли риски роли: почему открыта позиция, что уже пробовали, как принимаются решения. | Подкритерии вопросов: оценка работодателя, любознательность, глубина. |
| Вопросы кандидата | Мотивация | Видно ли по вопросам, что интересна именно эта роль и её содержание, а не только условия. | Подкритерии вопросов: сигнал мотивации, связь вопроса с ролью. |
Основа. Почему именно структурированное интервью
Структурированным называется интервью, где выполнены три условия: всем задают одни и те же вопросы, вопросы заранее привязаны к конкретным компетенциям, ответы оцениваются по единой рубрике. Не «сложное» и не «строгое» — именно это.
В крупнейшем пересмотре данных по отбору персонала (Sackett, Zhang, Berry, Lievens, 2022; уточнён в 2023) структурированное интервью показало прогностическую валидность около 0.42 — выше тестов общих способностей, рабочих проб, личностных опросников и проверки рекомендаций. Пересмотр изменил прежний рейтинг методов, где первое место десятилетиями занимали тесты способностей.
Отдельно: у структурированного интервью примерно на треть меньше смещения по признакам, не относящимся к работе, чем у свободной беседы, и заметно выше согласованность оценок между разными интервьюерами.
Что это значит и чего не значит. 0.42 — это валидность метода в исследованиях, а не точность данного продукта. Наша собственная связь оценки с результатом трудоустройства пока не измерена: сбор данных идёт, до ста пар «оценка — результат» никакие выводы не публикуются. Подробнее — в шаге 11.
Пять типов вопросов
Продукт не изобретает свою методику. Названные ниже рамки разделяют общий костяк — «действие → результат», — и различаются тем, что добавляют к нему. Поэтому в интервью это не пять параллельных методик, а пять типов вопросов — по одному на блок.
| Блок интервью | Методика | Что она даёт |
|---|---|---|
| Основные вопросы | STAR-EL | Ситуация → Задача → Действие → Результат, плюс Эмоция и Вывод |
| Уточняющие вопросы | PARLA | Чему научился и как применил — переносится ли опыт |
| Нестандартные задачи и ситуационные вопросы | Кейс-интервью · ситуационное интервью | Ход рассуждения без единственно верного ответа |
| Владение предметом | Оценка профессиональных знаний | Названы ли ограничения, компромиссы и условия — без сверки с «правильным» ответом |
| Мотивация и вопросы кандидата | CARE | Соответствие роли и то, как человек видит себя в ней |
STAR — основа
Прошлое поведение предсказывает будущее лучше, чем заявленные намерения. Поэтому вопросы просят конкретный случай, а не мнение. Три из семи признаков ответа — это прямо буквы STAR: конкретность описания отвечает за Situation и Task, личный вклад за Action, названный результат за Result.
STAR-EL и PARLA — то, что начинается после результата
Ценность этих методик не в первых буквах, а в последних. Кандидат может безупречно рассказать, что сделал и чем кончилось, и при этом не извлечь из истории ничего.
Поэтому после завершённого ответа задаётся дополнительный вопрос: что бы вы сделали иначе, где потом применили этот вывод. Порядок принципиален: спросить «что бы вы изменили» до того, как человек описал свои действия, — значит получить рассуждение, а не рефлексию.
При разборе каждого рассказа о прошлом опыте ставятся два признака:
- Вывод назван — сказал ли кандидат, что вынес из случая или что сделал бы иначе, а не только пересказал ход событий;
- Применение показано — показал ли, где вывод пригодился потом. Это то, что отличает опыт от истории.
Признаки видны в отчёте, в разделе «Вывод и перенос опыта»: сколько рассказов из скольких и цитата кандидата. В балл готовности они пока не входят. Сначала признак проверяется на живых интервью — отличает ли он сильных кандидатов от слабых; вес он получит только после этого, и методика будет изменена явно.
Отношение к неудаче («я недооценил сроки» или «нам не дали времени») отдельным признаком не считается.
Эмоция фиксируется, но не оценивается
Вопрос «что было самым тяжёлым» задаётся, и ответ попадает в отчёт вашими словами. Но балла за него нет.
Это осознанное ограничение. Оценивать эмоциональное содержание по расшифровке означало бы судить о личности человека по тексту, а продукт этого не делает. Живой интервьюер считывает интонацию, паузу, взгляд; расшифровка не сохраняет ничего из этого, и число, выведенное из слов, притворялось бы измерением.
CARE и кейс-интервью
CARE смотрит не только назад: последняя буква — Expectation, ожидание от роли. Продукт не прогнозирует карьеру и не предсказывает, кем человек станет. Он фиксирует, способен ли кандидат внятно объяснить, куда эта роль его ведёт, — это признак коммуникации, а не пророчество.
Кейс-интервью реализовано блоком нестандартных задач. Оценивается ход рассуждения: проговорены ли допущения, разложена ли задача на части, доведено ли до вывода, проверена ли правдоподобность. Совпадение с «правильным» ответом не оценивается, потому что правильного ответа там нет.
Ситуационные вопросы
Нестандартные задачи намеренно не связаны с вакансией, поэтому к ним добавлен ситуационный вопрос по самим компетенциям вакансии: «что вы сделаете, если». Вопросы о прошлом и о гипотетическом измеряют одну и ту же компетенцию по-разному и приводят к разным выводам об одном человеке, поэтому задаются оба типа. Шкала у них общая — различается лишь то, как выглядит слабый ответ: в рассказе о прошлом это отсутствие результата и личного вклада, в ситуационном — один ответ на все случаи, без условий.
Владение предметом
Оценка профессиональных знаний — второй по силе предиктор после структурированного интервью, и она измеряется здесь без сверки с «правильным» ответом: правильность мог бы судить только языковой модуль, а его мнение невоспроизводимо. Вместо этого считаются наблюдаемые признаки: терминология области, названные ограничения, видимый компромисс, различение случаев и глубина объяснения. Продукт не выдаёт сертификата экспертизы и прямо это оговаривает.
Каверзные и некорректные вопросы
Кандидатам задают вопросы, которые бывают несправедливыми, бестактными или прямо незаконными: про возраст, детей, здоровье, причины увольнения. Продукт включает такой блок, потому что эти вопросы задают, а не потому, что их стоит задавать.
Три правила делают этот блок безопасным, и ни одно из них не факультативно.
1. Ничто здесь не оценивает вас как человека
Измеряются ровно два признака: сохранили ли вы спокойствие и вернули ли разговор к профессиональным качествам. Ваш возраст, здоровье, семейные планы и национальность не оцениваются никогда. Не оценивается и то, насколько убедительно вы их «обосновали»: балл за обоснование сделал бы продукт соучастником той дискриминации, от которой он должен защищать.
2. Отказ отвечать — правильный ответ
«Этот вопрос не относится к моим профессиональным качествам» не считается провалом и балл не снижает. Рубрика, которая поощряла бы подчинение незаконному вопросу, учила бы кандидатов ему подчиняться.
3. Незаконность называется прямо
У каждого дискриминационного вопроса указана норма, которую он нарушает: отказ по возрасту — статья 3 ТК РФ, отказ по беременности и наличию детей — статья 64 ТК РФ, сведения о здоровье — статья 10 152-ФЗ. Кандидат, который не знает, что вопрос незаконен, не может решить, как с ним обойтись.
Что входит в блок
| Тип | Пример | Что на самом деле проверяют |
|---|---|---|
| Дискриминационные | «Почему вас, а не специалиста на десять лет моложе?» | Не возраст, а начнёте ли вы оправдываться |
| Давление | «Почему с вами расстались? Только честно» | Станете ли обвинять бывшего работодателя |
| Ловушки | «Назовите минимальную сумму» | Пытаются получить нижнюю границу, чтобы её предложить |
| Провокации | Молчание десять секунд после вашего ответа | Начнёте ли нервно добавлять и ослаблять сказанное |
Блок можно пройти без дискриминационных вопросов: репетировать «когда вы планируете детей» хочет не каждый, и заставлять было бы отдельной небольшой жестокостью.
Шаг 1. Что извлекается из одного ответа
Каждый ответ превращается в набор признаков. Три из них — по шкале 1–5, четыре — да/нет:
| Признак | Тип | Что означает |
|---|---|---|
| Соответствие требованиям вакансии | 1–5 | Относится ли пример к требованиям этой роли |
| Конкретность | 1–5 | Названы место, срок, участники — или общие слова |
| Релевантность | 1–5 | Отвечает ли на заданный вопрос |
| Доказательство | да/нет | Есть ли проверяемый факт, цифра или пример |
| Личный вклад | да/нет | Различимо ли, что сделали именно вы |
| Результат | да/нет | Назван ли измеримый итог — или проверяемый критерий, см. шаг 3 |
| Причинная связь | да/нет | Понятно ли, почему получилось именно так |
Признаки наблюдаемые. Продукт не оценивает черты характера, пригодность к работе и не делает психологических выводов.
Шаг 2. Куда идёт каждый признак
Признаков семь, но они не складываются в одно число. Разные признаки отвечают на разные вопросы, и смешивать их было бы методологической ошибкой: «человек рассказал по делу» и «человек справится с работой» — это не одно и то же.
| Признак | Питает измерение | Почему именно его |
|---|---|---|
| Соответствие требованиям вакансии | Проф. соответствие | Отвечает на вопрос, про эту ли роль пример |
| Доказательство | Проф. соответствие | Отличает опыт от рассказа об опыте |
| Личный вклад | Проф. соответствие | Отличает участника от владельца решения |
| Результат | Проф. соответствие | Отличает деятельность от результата |
| Релевантность | Коммуникация | Отвечает ли человек на заданный вопрос |
| Причинная связь | Коммуникация | Достраивает ли слушатель логику сам |
| Конкретность | оба | Общие слова одновременно мешают проверить опыт и понять рассказ |
На два измерения работают два признака — конкретность и причинная связь. Это не дублирование: конкретность во взвешивании профессионального соответствия отвечает за проверяемость примера, а в коммуникации — за понятность формулировки; причинная связь в профессиональном соответствии показывает, владеет ли человек причинами своего результата, а в коммуникации — достраивает ли слушатель логику сам.
Два признака работают как штрафы и не имеют собственного веса: сомнительная достоверность снижает профессиональное соответствие, противоречие — коммуникацию. Их величина зависит от уровня позиции (шаг 5).
Шаг 3. Как признаки превращаются в балл ответа
Каждый признак получает вес внутри своего измерения. Признак «да/нет» читается как 5 при наличии и 2 при отсутствии — не 5 и 1: отсутствие результата это пробел, а не катастрофа, и жёсткий ноль позволил бы одному признаку определить весь ответ.
У признака «результат» есть третье значение — 4. Оно ставится, когда вопрос спрашивал не о прошлом, а о будущем или о профессиональном суждении: «что вы сделаете, если», «как построите первые девяносто дней», «по чему вы понимаете, что процесс здоров». Измеримого итога там быть не может — человек этого ещё не делал. Но результат всё равно требуется, в форме проверяемого критерия: по чему он поймёт, что сработало, и к какому сроку.
Засчитывается: «к шестидесятому дню жду первый проверяемый результат», «смотрю расхождение плана и факта, больше пяти процентов — плохо». Не засчитывается: «разберёмся по ходу», «буду держать руку на пульсе» — это намерение, а не критерий, и за таким ответом приходит уточняющий вопрос.
Почему 4, а не 5: критерий — это обещание, а не доказательство. Человек, рассказавший, что сделал и что из этого вышло, показал больше, чем тот, кто назвал, по чему будет судить. Уравнять их значило бы сказать, что намерение стоит столько же, сколько результат.
На знакомстве и в вопросе о мотивации — «расскажите о себе», «почему смотрите новые роли» — результата нет ни в какой форме. Там признаки «результат» и «причинная связь» из расчёта выходят, а их вес расходится пропорционально между остальными признаками этого же ответа. Сумма весов остаётся единицей: шкала не сдвигается, меняется только то, что на ней меряется. Это тот же приём, которым продукт обходится с непройденным блоком (шаг 7).
балл ответа = Σ (значение признака × вес признака) − штрафы
Веса зависят от уровня позиции — шаг 5.
В отчёте балл ответа показан тремя составляющими показателя, а не россыпью признаков: соответствие требованиям вакансии (признак «соответствие»), личный вклад и доказанный результат — конкретика, проверяемый факт, измеримый итог и связь «сделал → получилось» вместе. Максимум каждой составляющей — пятёрка, умноженная на сумму весов её признаков; в сумме максимумы дают 5. Пример для руководителя блока: соответствие требованиям вакансии — до 1,00, личный вклад — до 1,25, доказанный результат — до 2,75.
Балл ответа в коммуникации — тоже тремя составляющими, максимум 5:
- релевантность ответа — до 2,5: признак «релевантность» (1–5), делённый пополам;
- непротиворечивость — до 2,5: признак «конкретность» (1–5), делённый пополам, плюс 0,4, если видна связь «сделал → получилось», и минус 0,4, если её нет, но не больше 2,5; минус 1,2 за противоречие со сказанным раньше;
- реакция на уточнение — баллов не добавляет, а снимает: минус 0,5 за каждую деталь, которую пришлось добирать уточняющим вопросом, не больше 1 (ниже).
балл ответа в коммуникации = релевантность / 2 + min(2,5; конкретность / 2 ± 0,4) − 0,5 × добранные детали − штраф за противоречие
Надбавка за связь не выводит непротиворечивость за её максимум: сильная вторая половина не закрывает недобор релевантности. Ответ, который отвечает не совсем на заданный вопрос, не становится пятёркой оттого, что он конкретен.
Уточняющий вопрос и его цена
Ответ считается вместе со своим уточняющим. Уточнение просит одну узкую деталь — «что сделали лично вы», «чего это стоило», — и полного рассказа с результатом в нём почти никогда нет. Пока оно считалось отдельным ответом и усреднялось наравне с основными, работающий механизм уточнений снижал балл кандидата: чем внимательнее продукт спрашивал, тем ниже выходила оценка. Теперь это один ответ: признаки складываются по «или» — деталь, которой не хватало, дали, значит она в ответе есть; оценки по шкале 1–5 усредняются, поэтому слабое начало не прощается целиком; штрафы за противоречие и сомнительную достоверность не прощаются вовсе.
Деталь, добранная уточняющим, стоит 0,5 балла коммуникации. Считается не число уточнений, а число пробелов, которые они закрыли: признака не было в основном ответе, а после уточнения он есть — значит с первого раза человек этого не сказал. Не больше двух пробелов на ответ. Уточнение, которое ничего не добавило, не стоит ничего: вопрос «что сделали лично вы» задают и тому, кто уже всё сказал.
Штраф идёт только в коммуникацию. Профессиональное соответствие — про опыт: если после уточнения выяснилось, что опыт есть и результат измерим, опыт от этого хуже не стал. Коммуникация — про то, доходит ли опыт до собеседника: деталь, которую пришлось вытаскивать вопросом, донесена хуже.
Балл одного ответа не бывает больше 5 и меньше 1. Рубрика кончается на пяти, и ответ, набравший по слагаемым больше, засчитывается как пятёрка.
Шаг 4. Разбор на конкретном ответе
«Я лично перестроил процесс комплектации: разделил поток на две линии. Время сборки упало с 42 до 27 минут за четыре месяца.»
Признаки: соответствие требованиям вакансии 4, конкретность 5, доказательство есть (5), личный вклад есть (5), результат есть (5), причинная связь есть (5).
Для уровня «руководитель блока» ответ складывается из трёх составляющих показателя:
| Составляющая | Как считается | Набрано | Максимум |
|---|---|---|---|
| Соответствие требованиям вакансии | 4 × 0.20 | 0.80 | 1.00 |
| Личный вклад | 5 × 0.25 | 1.25 | 1.25 |
| Доказанный результат | конкретика 5 × 0.05 + факт 5 × 0.20 + итог 5 × 0.15 + связь 5 × 0.15 | 2.75 | 2.75 |
0.80 + 1.25 + 2.75 = 4.80 из 5
Округляется до 5 по шкале 1–5. В баллах: 5 × 20 = 100.
Тот же ответ для линейной позиции считается по другим весам — см. шаг 5.
Шаг 5. Калибровка по уровню позиции
Уровень определяется по тексту вакансии. Это самая содержательная часть методики, поэтому таблица приводится полностью.
Меняется не строгость шкалы, а состав весов. Веса в каждой строке дают в сумме 1.00, поэтому никто не оценивается по искривлённой шкале: одинаково сильный ответ получает высокий балл на любом уровне, слабый — низкий на любом.
| Уровень | Соответствие требованиям вакансии | Личный вклад | Доказанный результат | Штраф |
|---|---|---|---|---|
| Линейный персонал | 0.30 | 0.05 | 0.65 | 0.4 |
| Начальный уровень | 0.20 | 0.05 | 0.75 | 0.5 |
| Средний уровень | 0.25 | 0.10 | 0.65 | 0.8 |
| Старший специалист | 0.25 | 0.20 | 0.55 | 1.0 |
| Руководитель команды | 0.20 | 0.20 | 0.60 | 1.2 |
| Руководитель блока | 0.20 | 0.25 | 0.55 | 1.5 |
| Первое лицо | 0.20 | 0.25 | 0.55 | 1.8 |
Максимум составляющей в балле ответа — её вес × 5: у руководителя блока 1.00, 1.25 и 2.75, вместе 5. «Доказанный результат» — это конкретика, проверяемый факт, измеримый итог и связь «сделал → получилось» вместе; на младших уровнях внутри него больше всего весит конкретика (0.35 из 0.65 у линейного персонала), на руководящих — факт, итог и связь (0.50 из 0.55).
Что стоит за этими цифрами
Линейный персонал — продавец, водитель, комплектовщик, оператор. Человек работает по регламенту, а не принимает решения, поэтому вопрос «что сделали именно вы, а не команда» здесь лишён смысла: вес личного вклада 0.05. Решает доказанный результат (0.65), а внутри него — насколько понятно и конкретно описана рабочая ситуация.
Начальный уровень — стажёр, младший специалист. Доказанный результат весит больше всего во всей таблице, 0.75: от новичка ждут не масштаба, а понимания, чем закончилось дело.
Средний уровень — самостоятельный специалист. Личный вклад вырастает до 0.10, доказанный результат — 0.65: ждут и конкретных примеров, и измеримого итога.
Старший специалист — здесь происходит перелом. Вес личного вклада вырастает вдвое (0.10 → 0.20), доказанный результат снижается до 0.55 — за счёт конкретики. Причина простая: старшего берут не за то, что он делал, а за то, что он решал. «Мы внедрили» перестаёт быть достаточным ответом.
Руководитель команды — доказанный результат 0.60, и внутри него впервые значима связь «сделал → получилось». Руководителя оценивают по тому, понимает ли он, почему сработало: без этого успех неотличим от везения и не воспроизводится на новом месте.
Руководитель блока — личный вклад максимальный, 0.25. Конкретика внутри доказанного результата весит всего 0.05: это не значит, что детали не нужны, — подробный рассказ об исполнении на этом уровне просто не является сильным сигналом. Важнее владение решением и его последствия.
Первое лицо — веса те же, что у руководителя блока, но штраф за противоречие максимальный, 1.8. Разница не в том, что спрашивают, а в том, что проверяют: на этом уровне цифры сверяют с отчётностью, а расхождение в собственном рассказе обесценивает всё остальное.
Почему штраф растёт с уровнем
Одна и та же неточность стоит по-разному. Кассир, назвавший разное число смен, скорее всего просто не помнит. Директор, назвавший разный размер бюджета, попадает под вопрос о достоверности всего рассказа — и рекрутер обязан его задать. Поэтому штраф идёт от 0.4 до 1.8 балла.
Как это проверить на себе
Возьмите ответ из шага 4 и пересчитайте его для линейной позиции: соответствие требованиям вакансии 4 × 0.30 = 1.20 из 1.50, личный вклад 5 × 0.05 = 0.25 из 0.25, доказанный результат 5 × 0.65 = 3.25 из 3.25.
1.20 + 0.25 + 3.25 = 4.70 из 5
Против 4.80 для руководителя блока. Разница небольшая, потому что ответ сильный по всем признакам сразу. А вот ответ с богатой детализацией, но без личного вклада и результата (конкретность 5, вклад и результат отсутствуют) даст 4.25 на линейной позиции и 3.15 на директорской — вот там разница видна.
Шаг 6. От ответов к показателю
Баллы всех ответов усредняются, среднее округляется до целого по шкале 1–5 и умножается на 20. Один ответ — это основной ответ вместе со своим уточняющим, а не две отдельные записи. Поэтому на измерении возможны только значения 20, 40, 60, 80, 100 — промежуточных быть не может.
показатель = round(среднее по ответам) × 20
Округление — до ближайшего целого, половина вверх: 4,5 → 5, 3,5 → 4, 4,49 → 4. Так же округляются доли в шаге 8. Одинаковое «пограничное» среднее всегда даёт одинаковый балл.
| Среднее по ответам | Уровень | Балл показателя |
|---|---|---|
| 1,0 – 1,49 | 1 | 20 |
| 1,5 – 2,49 | 2 | 40 |
| 2,5 – 3,49 | 3 | 60 |
| 3,5 – 4,49 | 4 | 80 |
| 4,5 – 5,0 | 5 | 100 |
Почему уровнями, а не «4,41 × 20 = 88»: рубрика оценивает ответ по пяти уровням, как рекрутер (1 — слабо, 3 — на уровне, 5 — отлично), и сотые доли среднего не несут смысла, который можно проверить. Поэтому среднее 4,41 честно читается как «уровень 4» — это 80, а в «Аналитике» рядом указано, сколько не хватило до следующего уровня.
Шаг 7. От показателей к готовности
готовность = 0.35 × Проф. соответствие + 0.25 × Коммуникация + 0.20 × Адаптивное мышление + 0.20 × Вопросы кандидата
Пример: 80, 80, 60, 40 →
0.35×80 + 0.25×80 + 0.20×60 + 0.20×40 = 28 + 20 + 12 + 8 = 68.
Сумма не округляется до пяти: при базовых весах она всегда целая (0.35 × 20 = 7, 0.25 × 20 = 5, 0.20 × 20 = 4). Дробь появляется, только когда вес перераспределён (ниже), — тогда сумма округляется до целого, половина вверх.
Если блок не пройден, его вес не засчитывается нулём, а перераспределяется пропорционально между остальными. При отсутствии адаптивного мышления веса становятся 0.4375 / 0.3125 / 0 / 0.25 — в сумме по-прежнему единица. Непройденное измерение показывается прочерком, а не низким баллом.
Шаг 8. Составляющие показателей (подындикаторы)
Каждый показатель раскрывается на три составляющие — всего двенадцать. Составляющие объясняют показатель: по ним видно, где терялись баллы. Балл показателя считается по шагам 3–7 и от составляющих не зависит, поэтому их число не меняет ни одной оценки.
Составляющая считается так же, как показатель, — по одной шкале 1–5. Признак со шкалой (соответствие, релевантность, конкретность, подкритерии задач и вопросов) усредняется; доля ответов переводится на шкалу как 1 + 4 × доля: 0% — это 1, 100% — это 5. Составная составляющая — среднее своих частей по той же шкале, до округления. Затем, как везде, округление до целого уровня (шаг 6) и ×20. Пример: личный вклад отделён в 11 из 14 ответов — 1 + 4 × 0,79 = 4,14 → уровень 4 → 80.
Профессиональное соответствие · вес 0,35
| Составляющая | Что показывает | Из чего считается |
|---|---|---|
| Соответствие требованиям вакансии | Относится ли пример из ответа к требованиям этой вакансии. | Признак «соответствие требованиям вакансии» (1–5), среднее по ответам. |
| Личный вклад | Видно ли, что решили и сделали лично вы, а не команда. | Доля ответов с признаком «личный вклад». |
| Доказанный результат | Подкреплён ли рассказ конкретикой и проверяемым фактом, назван ли измеримый итог и видно ли, что он получен вашими действиями; в вопросе о будущем — проверяемый критерий. | Среднее четырёх уровней: конкретика (1–5), доля ответов с фактом, доля ответов с итогом и доля ответов со связью «сделал → получилось» — две последние среди тех, где результат требовался. |
Коммуникация · вес 0,25
| Составляющая | Что показывает | Из чего считается |
|---|---|---|
| Релевантность ответа | Отвечаете ли вы прямо на то, о чём спросили: о той ситуации и о том времени, которые названы в вопросе, — без ухода в другую тему, другой пример или общие рассуждения. | Признак «релевантность» (1–5), среднее по ответам. |
| Непротиворечивость | Складывается ли рассказ в целое: конкретно, с понятной связью «сделал → получилось» и без расхождений с тем, что сказано раньше. | Среднее трёх уровней: конкретность (1–5), доля ответов со связью «сделал → получилось» (где результат требовался), доля ответов без противоречий. |
| Реакция на уточнение | Даёте ли вы нужную деталь, когда её прямо запрашивают. | Доля уточняющих вопросов к неполным ответам, после которых пробел закрыт. |
Адаптивное мышление · вес 0,20
| Составляющая | Что показывает | Из чего считается |
|---|---|---|
| Допущения | Проговариваете ли исходные допущения и как поняли условие, прежде чем решать. | Подкритерии задач: допущения, трактовка условия, понимание сути (среднее, 1–5). |
| Ход решения до вывода | Разбиваете ли задачу на шаги и доводите ли рассуждение до конкретного ответа или решения. | Подкритерии задач: декомпозиция, последовательность, перенос, приоритеты, логика, расчёт, вывод, качество решения, ясность. |
| Проверка и реализуемость | Проверяете ли правдоподобие результата, называете ли компромиссы и выдержит ли решение реальные ограничения. | Подкритерии задач: проверка на здравый смысл, компромиссы, риски, суждение, практичность, гибкость. |
Вопросы кандидата · вес 0,20
| Составляющая | Что показывает | Из чего считается |
|---|---|---|
| Бизнес-оптика | Связываете ли роль с результатом компании и спрашиваете ли как владелец решения. | Подкритерии вопросов: бизнес-мышление, стратегическое мышление, сигнал уровня, качество решения. |
| Проверка работодателя | Проверяете ли риски роли: почему открыта позиция, что уже пробовали, как принимаются решения. | Подкритерии вопросов: оценка работодателя, любознательность, глубина. |
| Мотивация | Видно ли по вопросам, что интересна именно эта роль и её содержание, а не только условия. | Подкритерии вопросов: сигнал мотивации, связь вопроса с ролью. |
Доля ответов с признаком переводится в уровень так:
уровень = round(доля × 4) + 1
То есть 0% → 1, 25% → 2, 50% → 3, 75% → 4, 100% → 5: «личный вклад в 79% ответов» даёт уровень 4 и 80 баллов. Признаки по шкале 1–5 (соответствие требованиям вакансии, конкретность, релевантность) усредняются напрямую. Составляющая из нескольких частей — например, «Непротиворечивость» из конкретности, связи и отсутствия противоречий — получает среднее уровней своих частей. Округление везде как в шаге 6.
Считаются составляющие по тем же ответам, что и показатель: основной ответ вместе с уточняющим. «Результат» и «связь» берутся только из ответов, где результат требовался (шаг 3). Составляющая, по которой в интервью не было данных, не показывается: «Реакция на уточнение» — если уточняющих вопросов к неполным ответам не задавалось.
Шаг 9. Компетенции вакансии — срез, а не пятый показатель
В отчёте есть два набора чисел с весами, и это разные вещи.
| Показатели готовности | Компетенции вакансии | |
|---|---|---|
| Что это | Четыре измерения продукта: профессиональное соответствие, коммуникация, адаптивное мышление, вопросы кандидата | Требования именно этой вакансии: «управление операциями», «руководство командой» и т. п. |
| Откуда веса | Методика, шаг 7. Одинаковы для любой вакансии | Разбор вакансии: доля требования в вакансии, в сумме 100% |
| Что определяют | Итоговую готовность | Сколько вопросов задаётся по требованию (не меньше трёх) и о чём спросят первыми |
| Входят в итог | Да | Нет |
Как распределяются вопросы. Сначала каждая компетенция получает по одному вопросу, затем компетенции доводятся до трёх — начиная с самой весомой, — и только потом оставшиеся места делятся по доле в вакансии. Вводные вопросы засчитываются той компетенции, к которой ближе ответ. Если компетенций больше шести, двадцати вопросов на всех по три не хватает, и прочерк получают наименее весомые.
Балл компетенции — среднее баллов её ответов по формуле шага 3, округлённое как в шаге 6. Это тот же расчёт, что у показателя «Профессиональное соответствие», только по вопросам одной компетенции. Поэтому компетенции объясняют, откуда взялся показатель, но в формулу готовности не входят: сложить их с показателями значило бы посчитать одни и те же ответы дважды.
Названия компетенций берутся из вакансии. Если требование звучит так же, как показатель (например, «Коммуникация»), это не одно и то же: компетенция — то, что требует вакансия, показатель — то, как прозвучали ответы. В отчёте доля компетенции подписана «доля в вакансии», вес показателя — «вес».
Шаг 10. Пороги, которые стоит знать
- Уточняющий вопрос задаётся, если в ответе нет результата, доказательства или различимого личного вклада. После полного ответа вместо него может прозвучать вопрос о выводе (STAR-EL и PARLA). В любом случае — не более одного на вопрос.
- Расхождение в цифрах показывается, только если обе стороны называют явную сопоставимую величину и разница превышает 25% и не менее 2 единиц. Описание изменения («с 20 до 45») расхождением не считается.
- Штраф за противоречие зависит от уровня: 0.4 балла для линейной роли, 1.8 для первого лица. У директора цифры проверяют внимательнее.
- Сравнение с другими не показывается, пока прохождений меньше 30, а внутри своего уровня — меньше 20. Процентиль от малой выборки это шум.
- Вопросы кандидата не оцениваются, если задано меньше трёх: слишком малая выборка для девяти подкритериев.
- Компетенция не получает балл, если её проверяли меньше трёх вопросов. Шкала из одного-двух пунктов практически не обладает надёжностью, поэтому вместо числа показывается прочерк — как и для непройденного блока.
Шаг 11. Чего пока не доказано
Веса и пороги в этом документе назначены на основе практики найма, а не выведены из данных. Детерминированность расчёта означает воспроизводимость, а не точность: одинаковый результат при одинаковых ответах не доказывает, что оценка связана с исходом реального собеседования.
Связь оценки с результатом трудоустройства сейчас проверяется: после интервью можно согласиться ответить через месяц, чем закончился поиск. Пока не набрано 100 пар «оценка — результат», никакие выводы о связи не публикуются и не показываются. Когда выборка наберётся, коэффициент будет опубликован здесь, каким бы он ни оказался.
Шаг 12. Чего продукт не делает
- не предсказывает результат найма;
- не оценивает квалификацию — только то, как прозвучали ответы в этой сессии;
- не измеряет тон, уверенность и акцент: они не восстанавливаются из расшифровки, а выводить их из текста означало бы придумывать суждение о человеке;
- не считает междометия «эм» и «ээ» и паузы: распознавание речи удаляет их до анализа, и метрика по ним измеряла бы работу распознавателя, а не речь;
- не оценивает то, что не было пройдено;
- не передаёт результат работодателям.
Отрепетируйте это на своей вакансии
Интервью.Про проводит полное собеседование по вашей вакансии — с уточняющими вопросами, как у рекрутера, — и разбирает каждый ответ по методике: балл, цитата из вашего ответа и что сказать вместо слабой формулировки. Демо-интервью можно посмотреть целиком бесплатно.