Четыре признака недостоверных ответов
В руководстве методики 2019 года описан алгоритм выявления респондентов с недостоверными ответами. Он опирался на четыре индикатора:
- Социальная желательность. Считается по утверждениям-идеалам («Я всегда говорю только правду», «Я никогда и никуда не опаздываю»). Согласие с ними говорит о желании выглядеть лучше, чем есть. Признаком считался и выбор промежуточных ответов там, где утверждение предполагает однозначное «да» или «нет».
- Несоответствие синонимичных утверждений. Одну мысль спрашивают дважды разными словами в разных местах теста и сравнивают.
- Минимально возможное время. Замеряется среднее время на утверждение. Быстрее, чем можно прочитать, значит не читал.
- Однообразие ответов. Длинные ряды одинаковых оценок. На платформе это правило жёсткое: больше 12 одинаковых баллов подряд обнуляют анкету, и тест начинается заново.
Анкеты, попавшие под эти признаки, из анализа исключались. Ученик получал обратную связь без выводов о личности, только с перечнем возможных причин: «возможно, Вы не поняли инструкцию», «невнимательно читали», «слишком спешили».
Резистентность
Доля недостоверных анкет от числа участников называлась резистентностью выборки и считалась в процентах по классу, школе, региону. Это показатель сопротивления тестированию коллектива, а не диагноз ученику. Высокая резистентность в классе для методиста означает одно: детям не объяснили, зачем тест, и они отвечали как попало. Для ученика в такой анкете нет ничего страшного, её просто не считают.
Что изменилось: шкала лжи
В доработанной версии введена отдельная шкала лжи. По формулировке методических материалов, она «создана для выявления недостоверных результатов, связанных с небрежностью обучающегося, аггравацией, диссимуляцией, симуляцией». Слова расшифровываются так: аггравация это преувеличение проблем, диссимуляция их сокрытие, симуляция выдумывание.
Главное отличие от старой схемы: «такие ответы не отбрасываются как недостоверные, а корректируются значениями этой шкалы посредством понижающих коэффициентов». Дальше цитата дословно: «теперь исключать данные обучающихся из обработки по критерию недостоверности ответов нет необходимости. Анализируются все ответы».
Можно ли «обмануть» шкалу лжи
Технически шкала лжи это набор утверждений, замаскированных среди остальных, и человек, который знает, где они, может отвечать на них умеренно. Но утверждений-идеалов в старой форме А было 19, они не подписаны, а в новых формах их состав неизвестен. Проще ответить на все честно, чем угадывать, какие из 130 утверждений контрольные. К тому же контроль не только в шкале лжи: остаются синонимичные пары, время и однообразие.
Как это влияет на результат
При старой схеме недостоверная анкета не давала результата вообще: ученик не попадал ни в какую группу. При новой схеме понижающие коэффициенты уменьшают вес искажённых ответов, и итоговые индексы (КВЕРИПО и ИРП) считаются с поправкой. Результат становится осторожнее, а не хуже. Как считаются индексы и группы, на странице расшифровка результатов.
Описание алгоритма старой версии дано по руководству ЕМ СПТ 2019 года, описание шкалы лжи по методическим материалам Центра защиты прав и интересов детей 2025 года. Полный алгоритм расчёта коэффициентов не опубликован.