Ив Жангра - Ошибки в оценке науки, или как правильно использовать библиометрию [калибрятина]

И наконец, с помощью анализа ссылок можно выявить и более концептуальные связи между статьями. Чем более полно совпадают у двух статей списки литературы, тем выше вероятность того, что их объединяет схожая тематика. Данная интуиция положена в основу метода библиографического сопряжения, разработанного в начале 1960-х годов для автоматической классификации документов [53]. Десять лет спустя Генри Смолл, руководитель научных программ в ISI, изобрел так называемый метод социтирования, устанавливающий связь между двумя документами, которые часто цитируются вместе в других документах-источниках [54]. Как показано на ил. 13 [55], эти два подхода дополняют друг друга; они позволяют создавать концептуальные сети, обнаруживающие достаточно четкие подгруппы. Подобные техники выявления сообществ применяются для вычленения дисциплин в совокупности научного поля и отдельных специальностей в рамках дисциплин [56].

В последнее десятилетие много работ было посвящено визуализации системы отношений между дисциплинами [57]. На большинстве таких изображений сеть отношений между дисциплинами отличается от линейной иерархической последовательности, как это подразумевалось в большей части классификаций наук от Фрэнсиса Бэкона до Огюста Конта. В своей совокупности дисциплины формируют круг, как это предполагал, один из немногих, Жан Пиаже [58]. И замкнуть этот круг позволяет математика, устанавливая отношения между физикой, с одной стороны, и (через статистику) с психологией и социальными науками, с другой [59].

Примеры эти можно было бы умножать, настолько многочисленны и разнообразны в наше время библиометрические исследования. Но и приведенных выше примеров достаточно для демонстрации того, что библиометрия дает нам информацию о науках, которую невозможно получить иным способом. Она позволяет уйти в исследованиях науки от частных историй, дисциплинарных предпочтений и авторитетных суждений, которые не могут служить серьезным основанием для принятия решений в сфере научно-технической политики. Как недавно подчеркивалось в отчете Совета канадских академий, политические решения, безусловно, не могут основываться исключительно на библиометрических данных, однако последние помогают сделать осведомленный выбор [60]. А те, кто думает, что без них можно обойтись, рискуют ошибиться в своих расчетах и прогнозах. О некоторых расхожих мнениях по поводу практик цитирования

Библиометрический анализ опровергает некоторые расхожие представления. Возьмем для примера средний возраст ссылок, содержащихся в пристатейных списках литературы. Часто приходится слышать, что цитируются только статьи менее четырех- пятилетней давности и что быстрый рост числа публикаций только усиливает тенденцию ссылаться на самые свежие результаты. Однако глобальное исследование временнóй динамики среднего (или даже медианного) возраста ссылок показывает, что на самом деле в последние тридцать лет он только увеличивается! [61]Точно так же несостоятельна идея о том, что бóльшая часть статей никогда не цитируется: в реальности доля нецитируемых статей снижается с течением времени, особенно с 1970-х годов [62]. Значение данного показателя, разумеется, зависит от того, какой временной промежуток взят для анализа. Если ограничиваться двухлетним периодом, то удельный вес нецитируемых статей будет выше в социальных науках, чем в медико-биологических. Зато если увеличить этот временной интервал, например до десяти лет, то разрыв между дисциплинами сокращается. Так что прежде чем приниматься за оценивание, в особенности отдельно взятых исследователей, важно хорошо понимать технические характеристики цитирования.

Противники цитационного анализа приводят в качестве аргумента тот факт, что статьи с ошибочными и даже поддельными результатами исследований могут широко цитироваться, тогда как новаторские работы иногда игнорируются. Однако с точки зрения истории и социологии науки это не является проблемой. Напротив, изучая такие ссылки, можно выявить динамику научных споров, а также способы научной коммуникации и распространения знаний. Анализ цитирования также позволяет исследовать пути рецепции той или иной теории, не вынося при этом суждения о ее истинности или ложности, ведь этот аспект скорее относится к прерогативам самого научного сообщества. Рассмотрим для примера случай холодного ядерного синтеза, о котором с большой помпой объявили в 1989 году электрохимики Стэнли Понс и Мартин Флейшман. В исследовании, опубликованном ISI, демонстрируется, что через 10 месяцев после объявления об их революционном «открытии», в соответствии с которым ядерный синтез считался возможным при комнатной температуре в пробирке, 52 % ссылок на их статью носили негативный характер, 27 % – позитивный, а все остальные упоминания были нейтральными. Интересный факт: позитивную оценку давали в основном теоретики, пытавшиеся объяснить этот феномен [63].