Используя матрицу изменений 9-балльных оценок (таблица 45), мы выполнили 1000 имитаций для всех реально существовавших компаний, начиная с их фактических 9-балльных оценок и отслеживая частоту появления 9-балльных годовых оценок у компаний с разным сроком существования. Для иллюстрации: наша тысяча имитаций показала, что вероятность
Однако в нашей совокупности имеется 856 компаний со сроком существования 11 лет. И даже если для какой-либо конкретной компании вероятность получения пяти или более 9-балльных оценок составляет менее 5 %, мы по-прежнему
В нашей популяции имеется 45 компаний с пятью и более годовыми 9-балльными оценками за 11 лет. То есть таких компаний оказалось больше, чем можно было ожидать, и мы можем с некоторой долей уверенности заключить, что как минимум некоторые из них (скорее всего, 8) на самом деле являются выдающимися. К сожалению, у нас нет никакой возможности узнать,
Для уменьшения вероятности появления ложноположительных результатов мы можем поднять планку – потребовать наличия более длинного ряда 9-балльных оценок для того же срока наблюдений, чтобы вероятность ложноположительного результата снизилась до желательного уровня. Мы определяем, что для попадания в категорию «чудотворцев» компания должна иметь такую цепочку годовых 9-балльных оценок, чтобы вероятность случайного сочетания таких оценок составляла менее 10 %
Поскольку мы работаем с годовыми 9-балльными оценками, мы можем сравнивать рентабельность любой компании с рентабельностью любой другой компании в данном году. Используя матрицу изменений 10-балльных оценок для определения вероятности заданного числа 9-балльных оценок (для «чудотворцев») или 6-, 7– и 8-балльных оценок (для «стайеров») в течение заданного срока наблюдений, мы можем сравнить вероятность достижения выдающейся рентабельности любой компанией с аналогичной вероятностью для любой другой компании независимо от года ее основания и срока существования.
Ни в одном из наших критериев нет ничего предначертанного свыше. Почему вероятность отбраковки составляет 10 %? Почему не 5 или не 15 %? Почему нужно выделять «чудотворцев» только по 9-балльным годовым оценкам? Ведь можно было бы считать «чудотворцами», например, компании с 8– и 9-балльными оценками при маловероятной частоте их получения.
Практически для любого подобного набора параметров мы можем лишь интуитивно оценить его разумность. Важно то, что наше определение используется в контексте строгого статистического анализа: любая компания, для которой число случаев соответствия всем установленным критериям превышает число случаев, вытекающее из теории вероятностей, может претендовать на звание выдающейся компании. Чтобы наше исследование было (как минимум – потенциально) полезным, достаточно, чтобы показатели рентабельности, которые мы определили, имели адекватную доверительную валидность. Вы сами должны оценить, соответствуют ли выбранные нами критерии рентабельности вашим субъективным представлениям о том, каков должен быть уровень рентабельности, к которому стоит стремиться. В определенной степени этот выбор объясняется также здравым смыслом: если сделать критерии чересчур строгими, может оказаться, что у нас вообще не останется компаний, подлежащих исследованию; а если они будут слишком мягкими, то и полученные выводы окажутся недостаточно обоснованными{186}
. В приведенной ниже таблице показано, в течение скольких лет компания должна получать заданную оценку в баллах (или оценки в заданном диапазоне баллов) при том или ином сроке существования, чтобы преодолеть пороговое значение 90 %-й вероятности.