Ошибки в оценке науки, или Как правильно использовать библиометрию

Классическая социология науки, разработанная Робертом Мёртоном и его школой, наглядно показала, что в основе динамики научных исследований лежит символическое признание (или кредит доверия)[171]. Ученый через публикацию сообщает научному сообществу об «открытии» (новом факте, инструменте, интерпретации теории) и взамен получает символическое признание своего оригинального вклада. Благодаря такому общественному признанию у него улучшаются шансы доступа к материальным и экономическим ресурсам, а также институциональным позициям для дальнейшего проведения исследований. Эта простая, но наглядная модель была затем развита Пьером Бурдье, который более явным образом учитывал связи и взаимные трансформации между признанием, отныне рассматриваемым как форма символического капитала, и другими видами капиталов (экономическим, культурным, социальным), циркулирующими в научном поле[172].

На схеме 1 показано, как работают эти циклы создания авторитета (credibility), если воспользоваться выражением Латура и Вулгара[173]. Для большей наглядности мы исключили из этого цикла случаи отказа в публикации статьи. На самом деле модель предсказывает, что если отказов слишком много (а значит, у него недостаточно признания со стороны сообщества), то ученый бросает исследования и ищет другого вида признания, зачастую в другом социальном поле. Этот цикл основан на фундаментальной, но неявной идее: научная публикация — это воплощение того, что можно назвать «единицей знания», то есть любой оригинальный вклад, воспринимаемый как легитимный членами определенного научного поля. Как правило, «единица знания» становится таковой лишь после рецензирования коллегами и публикации в том или ином журнале, поскольку ее ценность и легитимность не внутренне присущи предложенной к публикации статье, а являются порождением социального признания. В зависимости от ценности (широкой или узкой) этой единицы знания, которая в некоторых полях может сводиться к нескольким строчкам компьютерного кода, автор в большей или меньшей степени наращивает свой символический капитал, в частности за счет цитирования другими авторами. Таким образом, цитирование в научном поле работает как механизм наделения символическим признанием. Накопление же символического капитала, в свою очередь, облегчает доступ к новым ресурсам для исследований (грантам, научным ассистентам, стипендиям для постдоков и т. п.) и благоприятным институциональным позициям. Улучшение доступных ресурсов наделяет более качественными инструментами и повышает шансы произвести более качественные публикации и более крупные «единицы знания».

Схема 1. Классический цикл производства знания, оценивания и накопления авторитета

Очевидно, что в этой системе ключевым звеном является процедура рецензирования (peer-review), поскольку именно на этом этапе решается, будет ли существовать статья как социально признанная единица знания, циркулирующая в научном поле. Со времени институционализации в середине XVII века процедура рецензирования, разумеется, менялась в деталях (будучи анонимной или нет, внешней или осуществляемой силами самой редакции), но сохранила за собой базовую функцию поддержания барьеров (gate-keeping) на входе в научное поле[174]. Можно было бы ожидать, что растущее давление на научную систему с середины 1970-х годов приведет к усилению критики в адрес рецензирования[175]. К концу 1980-х механизм рецензирования даже стал предметом систематического и долговременного анализа, особенно в биомедицинских науках, в рамках ежегодного Конгресса по рецензированию (Congress of Peer Review)[176]. Однако несмотря на всю критику в адрес рецензирования, оно остается ведущим звеном базового цикла накопления научного кредита доверия. И по мере того, как научная статья превращается в простую отчетную единицу, используемую для оценивания исследователей и исследовательских институций, мы наблюдаем появление и распространение различных более-менее девиантных практик. В ответ на ужесточающиеся требования в отношении публикаций ученые пытаются манипулировать библиометрическими показателями или даже самим процессом рецензирования.

Многообразные последствия новых процедур оценки науки