Ошибки в оценке науки, или Как правильно использовать библиометрию

Под влиянием этого контекста и несмотря на то что использование библиометрии редко является единственным критерием оценки, утвердилось ложное и опасное представление о тождестве между библиометрией и оцениванием, как если бы библиометрия была нужна лишь для оценки исследователей.

Наукометрия включает в себя количественное измерение разных видов научной деятельности в самых разных дисциплинах[7]. Ее данные содержат суммы инвестиций в исследования и разработки (Research and Development, R&D), обучение научного персонала и производство статей и патентов. «Библиометрия», термин, введенный в обращение в том же 1969 году Аланом Причардом, означает подраздел наукометрии. Она ограничивается анализом публикаций и их характеристик[8]. И наконец, если в анализ включаются также патенты, часто используется термин «технометрия».

Пока исследователи занимаются вычислением своего h-индекса в базах данных, не особо понимая, что он в действительности означает, профессора разглядывают под лупой многочисленные мировые рейтинги, чтобы выбрать из них тот самый, в котором их университет займет наилучшее место.

Показателей превосходства (excellence) и качества становится все больше, однако не всегда понятно, на каких основаниях эти показатели сконструированы.

У публикаций концентрация несколько ниже: на 20% исследователей приходится не более 60% статей.

Зато это число коррелирует с местом университета, в котором они защитили диссертацию, на шкале престижа, установленной экспертами[42].

В своем простейшем виде библиометрия занимается подсчетом документов.

Среднее число ссылок в статьях по всем дисциплинарным направлениям со временем существенно возросло, что отражает резкий рост числа исследователей и публикуемых статей (ил. 4a).

Как мы показали в предыдущей главе, настоящий подъем библиометрии связан с получением доступа к базам данных, позволившим автоматизировать анализ на макро­уровне. Вплоть до 2004 года, когда фирма Elsevier запустила на рынок альтернативную базу данных, Scopus, Институт научной информации (ISI), созданный Юджином Гарфилдом, оставался монополистом в сфере библиометрической статистики. Поэтому большинство работ по наукометрии основываются на базах данных ISI. Однако в последние несколько лет стало появляться все больше исследований, использующих данные Scopus[33].

Речь идет о распределениях типа Парето, подчиняющихся так называемому правилу 20/80: на 20% исследователей приходится, в общем и целом, 80% цитат и грантов.