Ошибки в оценке науки, или Как правильно использовать библиометрию

Однако необязательно оставлять этот вопрос на откуп академическим управленцам. Можно сознательно бороться с теми силами, которые стремятся навязать университетам иллюзорные рейтинги, несущие больше вреда, чем пользы, посредством их скрупулезной и систематической критики. И хотя, к сожалению, мы не можем утверждать, что истинная идея всегда пробьет себе дорогу, аргументированная критика ошибочного применения бенчмаркинга имеет больше смысла, чем бессильное признание его неизбежности…

Заключение

Помощь библиометрии незаменима для картирования научных исследований в тот или иной момент времени в той или иной точке мира с целью преодолеть локальное и частное видение науки. Она также позволяет выявлять тренды на разных уровнях (регион, страна и мир), которые невозможно обнаружить иным способом.

Что еще важнее, благодаря библиометрии становится ясно, что публикационные, цитационные и коллаборативные практики различаются в разных дисциплинах и специальностях — социальных и гуманитарных, медико-биологических, технических, естественных… Любой показатель, разработанный для оценивания, обязательно должен учитывать эти различия. Однако при всей ее пользе пользоваться библиометрией следует с большой осторожностью и строгостью. Так, естественные науки предельно интернационализированы, чего нельзя сказать о гуманитарных и социальных науках, которые не случайно сохраняют более локальный характер, учитывающий разнообразие культур[165]. От любой серьезной научной политики требуется учитывать эти различия в практиках разных дисциплин и специальностей во избежание негативных и даже катастрофических последствий.

Использование неадекватных индикаторов только вредит серьезной оценке, необходимой для отлаженной работы любой организации. Критический анализ плохо продуманных показателей и рейтингов, для составления которых они используются, напоминает нам, что дьявол всегда в деталях и что благими намерениями вымощена дорога в ад. Поэтому нам не следует принимать на веру общие места, без конца воспроизводимые теми, кто твердит о неотвратимости рейтингов, не уточняя при этом, почему должно быть именно так. Нужно вскрывать эти «черные ящики», скрупулезно анализируя свойства и значение каждого показателя, используемого для обоснования той или иной оценки. Только рациональной и высокотехничной работой можно гарантировать, что принятые решения будут основаны на надежных данных. Ведь прежде чем утверждать, что некоторая лаборатория или университет входят «в число лучших в мире», нужно еще выяснить, что в точности означает «лучший» и как произведено измерение. Без предварительной работы по конструированию самого измерительного инструмента капитаны кораблей, ориентирующиеся по сломанным компасам и вышедшим из строя барометрам, рискуют потерпеть крушение при первом же препятствии или буре…

Ив Жэнгра. Трансформация научной статьи: от знания к отчетности