Многие исследователи оспорили бы столь пессимистический вердикт. Действительно, цель качественного исследования заключается в том, чтобы минимизировать вероятность искажения валидности, и в идеале план должен исключать эту вероятность. К сожалению, никогда нельзя быть уверенными в отсутствии альтернативной интерпретации результатов. Суть в том, насколько правдоподобны эти альтернативные интерпретации. Особенно когда речь идет о выборке детей и особенно когда изучаются базовые формы развития (физическое созревание, константность восприятия; феномены, описанные Пиаже, языковые правила. — список можно продолжить), использование традиционных лонгитюдного метода и метода поперечных срезов вполне оправданно. Предположим, что мы изучаем концепцию Пиаже о принципе сохранения числа — то есть понимания того, что число объектов неизменно, несмотря на изменение их наложения, приводящее к кажущемуся противоречию, мы обнаруживаем, что 6-летние дети осознают сохранение числа, а 4-летние — нет. Крайне маловероятно, что этот результат является следствием факта рождения одних детей в 1988 году, а других — в 1990 году (если это исследование методом поперечных срезов) или фактом тестирования одной группы в 1992 году, а другой — в 1994 году (если это лонгитюдное исследование). Гораздо более правдоподобно (а на современном уровне понимания фактически бесспорно) то, что эти результаты отражают истинные возрастные изменения. В таких случаях при использовании метода поперечных срезов или лонгитюдного метода мы получаем данные достаточно валидные и достаточно ценные. (С другими аргументами в защиту традиционных методов, в особенности лонгитюдного, можно ознакомиться у McCali, 1977.)
Обратимся теперь к вопросу о том, как сравнивать два и более видов тестовых или экспериментальных условий. Как уже отмечалось, в принципе, возможно два подхода; либо дать одним и тем же испытуемым все задания (поставить их во все экспериментальные условия), либо приписать разных испытуемых к разным экспериментальным группам. Первое называется внутрисубъектиым планом, последнее — межсубъектным планом. Поскольку рассмотрение этих двух подходов потребует постоянных перекрестных ссылок и сравнений, проще всего описывать их параллельно, а не по отдельности.
Как исследователю решить, осуществлять сравнение внутри группы или между группами? Как и в случае с лонгитюдным методом и методом поперечных срезов, зачастую определенную роль играет вопрос удобства. Обычно (когда конкретно, мы вскоре уточним) для внутрисубъектного исследования требуется меньше испытуемых. Предположим, нам нужно сравнить уровень трудности трех заданий, и мы знаем, что для выявления различий в трудности нужно по меньшей мере 20 испытуемых. Всегда, когда контингент потенциальных испытуемых ограничен, экономичность внутрисубъектного плана представляется довольно заманчивой.
Однако соображения удобства не всегда склоняют чашу весов в пользу внутрисубъектного подхода. За меньший размер выборки во внутрисубъектном исследовании приходится платить — конкретно необходимостью больше времени уделять каждому испытуемому либо за счет более длительных обследований, либо за счет большего их числа. Длительные или частые обследования подвергают серьезному испытанию терпение и мотивацию ребенка, особенно маленького, даже если исследователя не тревожит возможность того, что от ребенка требуется слишком много, это может беспокоить родителей или школьную администрацию: В таких случаях межсубъектный план, в котором требования к одному ребенку сведены к минимуму, является наиболее разумным выбором.
Статистические соображения также могут влиять на решение в пользу либо внутри-, либо межсубъектного плана. Статистические критерии, используемые для сравнения внутри группы, несколько отличаются от тех, которые используются для межгруппового сравнения. Более того, внутрисубъектные критерии зачастую обладают большей мощностью, чем межсубъектный — то есть, скорее выявят значимое различие, если оно действительно существует. Большая мощность этих критериев обусловлена уменьшением нежелательной дисперсии, которое обеспечивает внутрисубъектные план. Вспомним обсуждавшиеся ранее понятия первичной дисперсии и вторичной дисперсии, или дисперсии ошибки. Как отмечалось, целью качественного экспериментального плана является максимизация первичной дисперсии и минимизации нежелательной дисперсии, источником которой являются другие факторы. Было также отмечено, что одним из источников нежелательной дисперсии являются индивидуальные различия между испытуемыми. Обследование одних и тех же испытуемых в разных экспериментальных условиях позволяет снизить эту дисперсию и таким образом расширить возможности сравнения. Как следствие, повышается вероятность того, что показатель различия достигнет уровня статистической значимости.