2. Экспертные методы:
• данный пункт повторяет содержание первого пункта для тестов. Дополнение: инструкция по применению снабжается указанием на требуемую квалификацию экспертов, их необходимое количество для получения надежных данных по методу независимых оценок;
• инструкции к проведению должны пройти специальные испытания на однозначность их выполнения экспертами по отношению к некоторому эталонному набору данных (текстов, рисунков, звуко– или видеозаписей и т. п.);
• процедура обработки результатов должна включать в себя такое документирование промежуточных этапов обработки, которое позволило бы перепроверить конечный результат другому эксперту;
• пользователи-разработчики должны иметь возможность воспроизвести (повторить) нормативное исследование по измерению экспертной согласованности на эталонном наборе данных;
• головная организация должна вести банк данных, обеспечивая подготовку пользователей и переподготовку (в соответствии с пересмотренными стандартами методики).
Любая методика, не удовлетворяющая перечисленным выше требованиям, не может считаться профессиональной психодиагностической методикой. Методики должны проходить аттестацию в рамках головных методических организаций, в обязанности которых входит составление библиотек «аттестованных психодиагностических методик». Вся инструктивная литература по методикам, не прошедшим аттестацию, не может считаться годной для применения в практической психологии.
Это не исключает возможность применения не аттестованных методик в исследовательских целях.Источники вариативности результатов тестирования [87]
1. Несовершенство психодиагностического метода
приводит к двум типам ошибок: постоянным и случайным. К постоянным ошибкам относятся: неадекватная формулировка инструкции, нечеткие инструкции о способе подачи метода обследуемым, далее плохо сформулированные, непонятные или неоднозначные задания, вопросы и т. п. К непостоянным источникам ошибок метода относится, например, изменение электрического напряжения во время работы с тестовыми приборами, неодинаковая удобочитаемость бланков для ответов и т. д.2 . Ситуация обследования.
На результаты может влиять время дня, когда проводится обследование, неодинаковое освещение помещения во время обследования равных групп обследуемых, неодинаково выгодное размещение обследуемых в условиях группового тестирования и т. п.3. Личность психодиагноста.
Этот фактор до сих пор мало учитывается в качестве возможного источника ошибок или завышения результатов. Речь идет не только о том, что специалист может по-разному стимулировать или тревожить обследуемых в зависимости от собственного настроения, установок и т. п., но он также может с разной степенью адекватности подавать им инструкцию в зависимости от того, в какой мере они ему симпатичны. Возраст, пол, эстетический внешний вид также необходимо, вероятно, считать внеплановыми источниками вариативности результатов обследования. В немалой степени важно и то, в какой роли для обследуемых выступает диагност, как он им был представлен: это их знакомый, учитель, врач, руководитель; был он представлен как хороший специалист или как человек, влияющий на их дальнейшую судьбу в зависимости от результатов обследования, и т. д.