Иными словами, при составлении вопросов-утверждений надо придерживаться следующих правил: избегать терминов и двусмысленностей, использовать понятные слова, избегать крайностей (если только это не специальный инструмент проверки искренности и объективности отвечающих).
• Шкала оценки.
Однозначно стоит избегать пятибалльной шкалы, так как это приводит к проявлению наших школьно-студенческих стереотипов. Работая в международной компании (в большинстве стран Запада система школьных и институтских оценок отличается от нашей), я столкнулась с использованием в опросе «360 градусов» именно пятибалльной шкалы. Сколько ни боролись мы со стереотипами, все равно они продолжали мешать: ведь если человеку 15–16 лет вкладывали в голову, что 3 – плохо, а 5 – хорошо, то невозможно за короткое время осознать, что 3 – это норма (не идеально, но соответствует требованиям к сотрудникам), а 5 – это супер и бывает крайне редко. Поэтому я предлагаю вообще перейти от баллов к описательным характеристикам, о которых я расскажу ниже. Еще один момент – количество градаций. Если их слишком много, что отвечающий начнет путаться, поэтому я бы не рекомендовала использовать шкалу из 7–10 градаций.
Описательный вариант шкалы оценок обязательно должен включать раздел «Не имею информации». Дело в том, что не все оценивающие имеют возможность видеть проявление абсолютно всех компетенций, поэтому, включая эту графу в шкалу, вы повышаете чистоту и точность оценки. При подсчете средних баллов эти ответы не учитываются.
Такая шкала, где даны крайние варианты (всегда и никогда), позволяет также усилить оценку валидности (достоверности) ответов оценивающих.
• Обеспечение оценки достоверности ответов.
• Шкала искренности.
Наличие такой шкалы становится возможным благодаря наличию «крайних» формулировок. Мы об этом говорили чуть раньше и даже посмотрели примеры утверждений, при которых невозможны однозначные полярные оценки. Приведем еще несколько примеров:
– Не допускает ошибок даже в деталях.
– Никогда не бывает пристрастным, умеет избегать личных симпатий и антипатий.
– Позитивно воспринимает любые решения руководства.
Если при ответе на эти вопросы-утверждения оценивающий дает «крайний» ответ, то это говорит или о его неискренности (как правило, завышение оценок из лучших побуждений), или о формальном подходе к опроснику (везде ставит высшие или низший баллы). Если такое встречается 1–2 раза, то при подсчете баллов стоит просто снизить расчетный балл на 1 единицу, если таких случаев много, то следует исключить эту анкету из общего анализа, так как есть большие сомнения в достоверности ответов.
• Вопросы-перевертыши.
Этот метод обеспечивает более вдумчивый и неформальный подход со стороны оценивающих. Дело в том, что некоторые склонны выбрать для оценки коллеги «средний балл» и проставлять его везде или почти везде. Чаще всего это не средний вариант оценки («проявляется примерно в половине случаев»), а несколько завышенный («проявляется всегда» или «проявляется в большинстве случаев»). При таком подходе оценивающий не вчитывается в вопросы-утверждения и дает ответы сугубо формально. Если же человек заранее предупрежден о перевертышах («
• Вопросы-дубли.
Еще один вариант, позволяющий оценить объективность и достоверность оценки и изъять те анкеты, которые вызывают сомнения в достоверности. Вопросы-дубли предполагают, что даются два или три вопроса (важно, чтобы они шли не подряд, так как в такой ситуации польза от инструмента уменьшается, ведь человек, как правило, помнит свой последний ответ или просто может сравнить вопросы), имеющие различные словесные формулировки, но на уровне содержания совершенно идентичные. Рассмотрим примеры:
– Умеет управлять конфликтом интересов с позиции «сотрудничество», т. е. таким образом, чтобы все стороны получили максимальный выигрыш.
– Обычно не стремится в конфликте преследовать только свои интересы.
Есть еще одна разновидность вопросов такого типа – это близкие по теме вопросы. Не являясь полными дублями, они предполагают разрыв в ответе не более 1 балла, в противном случае результат оценивается как низко достоверный.
Какие решения могут приниматься на основе полученных результатов? Что анализировать и на что обращать внимание?