Мысли быстрого реагирования

Это становится ясно из рассмотрения «элементарного акта» цитирования. Автор, ссылаясь на другие работы, действует по принципу «все — или ничего», он или включает какую-то статью в библиографию, или не включает. Он оценивает ту работу, ссылку на которую помещает в библиографию своей статьи, в 1 балл, а все остальные работы, которые использовал в своем исследовании, но не может процитировать, — в 0 баллов. Но ценность тех работ, которые он использовал, вовсе не отличается так скачкообразно — или 0, или 1. И выходит, что работа с ценностью 0,99 балла все равно оценивается как бесполезная, она получает 0 баллов.

В среднем библиография статьи содержит около 10 ссылок — это лишь небольшая доля тех работ, результатами которых пользовался автор в своем исследовании (примем, что он действительно использовал самые ценные для его исследования работы).

Предположим, автор использовал информацию из 100 работ, и по их реальной ценности они могут быть ранжированы, получив оценки от 1 до 100 баллов. В библиографию попадают работы, набравшие более 90 баллов, — от 91 до 100. Они, разумеется, наиболее полезны для исследования автора. Однако работа с реальной ценностью в 90 баллов оценивается через цитирование в 0 баллов, как и работа с реальной ценностью в 1 балл. Дело не меняется оттого, что эта ситуация воспроизводится много раз, и в целом возникает сравнительно плавное распределение работ по их цитируемости.

Это создает правдоподобие оценки, не придавая ей достоверности.

На основании такого параметра ничего нельзя сказать о ценности таких работ — они оказываются в зоне неопределенности. А если еще есть дополнительные факторы, которые снижают цитируемость какой-то совокупности авторов, как это и есть в отношении российских публикаций, то использование этого параметра в качестве показателя приводит к заведомо ложным оценкам. Причем ошибка будет исключительно грубой. На деле это просто фальсификация, подлог.

Обсуждая возможность измерения цитирования для оценки «выхода» научной продукции, мы приняли ряд идеализирующих ситуацию предположений. На деле много факторов приводят к тому, что низкая цитируемость ценных работ даже внутри сообщества западных ученых — не редкость. Обсуждение всех этих факторов не входит в нашу задачу, и мы просто приведем два примера.

В 1979 г. С. Вейнберг был удостоен Нобелевской премии за теоретическую работу, изложенную в статье, опубликованной в 1967 г. Вот число ссылок на эту статью по годам (рис. 1):

Рис. 1. Число ссылок па статью С. Вейнберга (1967 г.), в которой описана теоретическая работа, принесшая автору Нобелевскую премию в 1979 г.

Мы видим, что в течение 5 лет (немалый срок) эта работа практически не цитировалась, и в это время будущий нобелевский лауреат, попадись он энтузиасту формализованных оценок продуктивности, мог бы быть не аттестован для продолжения научной работы. Почему же последовал затем такой бурный рост цитируемости? Объяснение заключается в том, что в 1971 г. голландский математик Г. Хофт опубликовал работу, которая позволила упростить математическую трактовку теории С. Вейнберга.

Не менее наглядна динамика цитирования главной статьи нобелевского лауреата по физиологии и медицине А. Кормака, разработавшего математический анализ поглощения рентгеновских лучей тканями. Эта работа (1963 г.) была необходима для создания сканирующего рентгеновского томографа. Вот цитируемость этой работы (рис. 2):

Рис. 2. Число ссылок на статью А. Кармака (1963), давшей основу для разработки томографии. В 1979 г. А. Кармак получил Нобелевскую премию за разработку компьютерной томографии.

Потенциальная ценность работы Кормака проявилась лишь тогда, когда была создана необходимая для томографии ЭВМ (для разработки которой эта статья создала математическую базу).

Оба эти случая являются прекрасными свидетельствами того, что открытия и изобретения следует рассматривать как системы, необходимые элементы которых порой создаются подспудно. Сам же факт открытия — это создание элемента или связи, недостающих для достраивания целостной системы, это — момент рождения системы, всегда очень заметный.

Ничто так не вредит применению количественных методов, как игнорирование того факта, что существуют неформализуемые аспекты и величины, которые нельзя выразить в численной мере.

Научный потенциал, как и продуктивность (страны, учреждения, исследователя), — это многоаспектная характеристика, которая не может быть выражена численно и принимает весьма различные значения в зависимости от контекста. Как бы ни была велика потребность в простом и надежном методе оценки научного потенциала, необходимо реалистично подходить к нашим возможностям.