Нормализованные результаты используются на следующих этапах анализа.
ОГРАНИЧЕНИЯ НОРМАЛИЗАЦИИ
Данный подход имеет несколько существенных ограничений. Во-первых, он не определяет точный объем воздействия, достигнутый в результате конкретного транша. Для определения точного вклада инвестиций требуется дальнейший анализ всех взносов инвестора, включая финансовые и нефинансовые факторы и процессы управления инвестициями и воздействием, а также анализ воздействия, которое, скорее всего, имело бы место независимо от этих инвестиций. Во-вторых, нормализация направлена на то, чтобы раскрыть понимание эффективности на уровне инвестиций с особым вниманием к пропорциям и срокам вливания капитала. Однако она не намерена преуменьшать основополагающую роль объектов инвестирования в продвижении достижений в области социального воздействия.
3.2. ОЦЕНКА КОНЕЧНЫХ РЕЗУЛЬТАТОВ
Оценка конечных результатов проекта строится на теории изменений. Ее суть в том, что нормализованные результаты отражают прогресс в достижении долгосрочных конечных результатов.
Полный спектр промежуточных и конечных результатов представляет собой континуум с меняющимся уровнем влияния инвестора на деятельность и условия, необходимые для возникновения долгосрочного эффекта. Чтобы эффективно управлять воздействием проекта, нужно выявить степень определенности взаимосвязи между деятельностью, результатами и уровнем контроля. Понятно, что эта определенность не может быть стопроцентно четкой хотя бы потому, что всегда есть внешние факторы, способные повлиять на воздействие, создаваемое инвестициями. Скажем так, организация может полностью контролировать непосредственное производство продукции и услуг, приводящих к некоему промежуточному результату, но у нее нет возможности повлиять на конечные результаты, создаваемые этими промежуточными результатами. Например, организация может с легкостью контролировать количество противомоскитных сеток, распространяемых среди населения малярийных регионов, но гораздо сложнее контролировать, чтобы люди использовали москитные сетки каждую ночь для снижения заболеваемости малярией.
Важно, чтобы каждая связь между промежуточными, краткосрочными и долгосрочными результатами была подкреплена доказательной базой. Также такие связи должны учитывать применимость доказательной базы для инвестиций в различных географических и демографических условиях.
Проведение экспериментальных или квазиэкспериментальных оценок после инвестирования, таких как рандомизированные контрольные испытания, для проверки, было ли достигнуто предполагаемое воздействие, не всегда возможно, этично или целесообразно для большинства инвесторов. Поэтому данные о конечных результатах проекта не всегда доступны в полной мере, а значит, их стандартизированная и точная оценка может быть затруднена. Однако в случаях, когда уже существуют значительная литература и доказательства, инвесторы могут обоснованно полагаться на результаты оценок, проведенных сторонними оценщиками, НПО или другими организациями в сфере развития. Настоящая методология использует такие знания и применяет фактические показатели промежуточных результатов в качестве косвенных признаков для оценки конечных результатов.
Оценить долгосрочные результаты социальных проектов не всегда возможно. В некоторых случаях достаточно промежуточных результатов, поскольку они часто хорошо масштабируются и точно указывают на непосредственные прямые воздействия. Кроме того, конечные результаты, оцененные с помощью этого методологического подхода, необязательно подтверждать более строгими оценками воздействия. Можно впоследствии провести экспериментальный или квазиэкспериментальный анализ, но такие исследования не являются — и не должны являться — общепринятой практикой в отрасли социально преобразующих инвестиций. В рамках данного подхода принимается, что причинно-следственные связи не могут быть установлены, и вместо этого изучаются результаты, которые можно связать с инвестициями. Наконец, промежуточные и конечные результаты взаимосвязаны и многогранны. В данном анализе приведены некоторые наглядные примеры, но данные, доступные инвесторам, не всегда раскрывают полную теорию изменений. Например, улучшение доступа к образованию и обучению можно оценить с помощью многочисленных показателей конечных результатов, таких как средние результаты тестов учащихся или количество занятых вакансий. Но побочные воздействия могут быть не полностью учтены в этой модели.
Оценить долгосрочные результаты социальных проектов не всегда возможно.
3.3. КЛАСТЕРИЗАЦИЯ ВЫВОДОВ
Кластеризация — это процесс разделения и группировки результатов воздействия по сегментам, которые позволяют ответственно и осмысленно оценить эффективность деятельности. С учетом широкого спектра факторов, определяющих эффективность воздействия, одна инвестиция может относиться к нескольким отдельным кластерам.