Ив Жангра - Ошибки в оценке науки, или как правильно использовать библиометрию [калибрятина]

В этом контексте Американский конгресс поручил Национальному научному фонду (ННФ, помогшему Гарфилду в создании ИНЦ) задачу создания индикаторов, с помощью которых можно было бы отслеживать развитие и измерять состояние науки и технологий. Так в 1972 году был издан первый статистический сборник «Индикаторы науки» ( Science Indicators ), затем выходивший с периодичностью раз в два года. В 1987 году он был переименован в «Индикаторы науки и техники» ( Science and Engineering Indicators ). Также в начале 1970-х годов Национальный научный фонд поручил Фрэнсису Нарину и его фирме Computer Horizons изучить возможности применения библиометрии в целях оценки научных исследований и разработок. Нарин составил объемный отчет, заложивший основы оценочной библиометрии [26]. Если ОЭСР, руководствуясь прежде всего экономическим видением научного развития, интересовалась лишь показателями вложенных инвестиций и выпущенных патентов (используемых для измерения инноваций), ННФ, более близкий к академическому миру, производил также библиометрические данные при помощи ИНЦ. Таким образом, данные по публикациям и цитированию впервые были включены в совокупность показателей научного развития в дополнение к обычным данным по научным сотрудникам и инвестициям в сфере исследований и разработок. Эти сборники впоследствии послужили образцом и для других стран. Например, французская Обсерватория науки и техники (OST) публикует серию похожих показателей с начала 1990-х годов [27].

Запрос со стороны государства на индикаторы, с помощью которых можно измерять уровень научно-технического прогресса и тем самым получать знания, необходимые для проектирования государственной политики и принятия решений, стимулирует развитие и организацию прежде разнородной сферы исследований. В академических кругах на этот запрос откликнулись запуском журнала Research Policy в 1971 году, а два года спустя начал выходить и Science and Public Policy . Оба журнала посвящены обсуждению научной политики и факторов научно-технического развития, а также их анализу. В 1974 году на конференции с участием отцов-основателей библиометрии (Дерека де Солла Прайса, Юджина Гарфилда и его сотрудника Генри Смолла, социологов Стивена и Джонатана Коулов, а также Роберта К. Мертона, одного из ее организаторов) была впервые предложена обобщающая работа под названием «О наукометрии: возникновение показателей развития науки» [28]. В ней анализируются исторические, социологические и экономические аспекты измерения науки в целях выработки цельной системы показателей ее развития. Историк науки Джеральд Холтон при этом задается вопросом, действительно ли науку можно измерять, а братья Коул рассуждают об измерении когнитивных аспектов научных дисциплин. Со своей стороны, Гарфилд и его коллеги подчеркивают важность цитат как инструмента картирования концептуальной структуры научных дисциплин и специальностей, а также их развития во времени при использовании таких количественных методов, как библиографическое сопряжение и совместное цитирование документов [29].

В следующей главе мы рассмотрим различные применения этих библиометрических методов и показателей. Сейчас же отметим лишь, что рост числа библиометрических работ привел к созданию в 1978 году первого журнала, целиком специализирующегося по данной теме, Scientometrics . По мере развития этой специальности с 1987 года стали проводиться международные конференции, а в 1993 году было создано Международное общество наукометрии и инфометрии (International Society for Scientometrics and Informetrics).

Помимо запроса, связанного с научной политикой разных стран, само наличие информатизированной базы данных ИНЦ, покрывающей все более протяженный период времени, также стимулировало проведение исследований с использованием библиометрических данных. 1970-е годы стали в целом временем развития социологии науки как отдельной специальности. В 1971 году был создан журнал Social Studies of Science , где было опубликовано несколько исследований, использующих библиометрию для анализа развития научных дисциплин [30].

Библиометрическая оценка науки и исследователей

Как мы показали выше, поначалу библиометрический инструментарий использовался прежде всего для управления журнальными фондами в библиотеках и для исследований динамики развития науки. С конца же 1980-х годов его постепенно начинают применять для оценки исследовательских групп. Такие управленческие технологии, как менеджмент знаний ( knowledge management ) [31]или бенчмаркинг ( benchmarking ) [32], основанные на конструировании показателей продуктивности, эффективности и пр., перекочевали в 1980-е годы из частных предприятий в государственный сектор, а в 1990-е годы и в университеты. Так библиометрические данные стали инструментом управления научными карьерами, с помощью которого стремились преодолеть ограничения традиционной коллегиальной оценки. Все более утверждалось мнение, что такая оценка слишком субъективна и ее следует дополнить или даже заменить данными, которые считались более объективными. Выходящий с 1991 года журнал Research Evaluation отражает этот менеджерский подход к науке, и в нем публикуются работы по оцениванию, зачастую основанные на библиометрии.

До 2000-х годов большинство библиометрических исследований производилось на уровне крупных единиц (больших лабораторий, университетов, стран). Практически все эксперты в данной сфере скептически относились к применению библиометрических измерений на индивидуальном уровне. Последние интересовали прежде всего менеджеров науки и ученых, которые, с тех пор как доступ к базам данных упростился благодаря интернету, принялись в свободное время заниматься любительской библиометрией. Именно такая характеристика представляется уместной, поскольку, как мы увидим в следующих главах, подобные изыскания не отличаются методологической строгостью.

В заключение этого краткого исторического экскурса можно сказать, что с 1920-х и до конца 1950-х годов библиометрия опиралась на методы ручного подсчета, ограничивалась маленькими выборками и служила прежде всего для помощи в управлении библиотечными фондами журналов. Введение в эксплуатацию информатизированной базы данных ИНЦ в начале 1960-х годов открыло путь для крупномасштабного анализа динамики науки. Эта инновация появилась в период, когда для определения политики в данной области требовалось все больше показателей, которые позволили бы измерять уровень научного развития стран. Это стечение обстоятельств в 1970–1980-е годы дало мощный толчок исследованиям динамики науки на уровне дисциплин и специальностей, а также на страновом и международном уровнях.

После робких начинаний 1980-х только на протяжении 1990-х годов библиометрия получает распространение как инструмент оценки исследователей. Став объектом этих новых количественных методов оценивания, последние вдруг узнали о существовании библиометрии, а посему связывают ее исключительно с процедурами оценки. Некоторые возмущаются таким упрощенным подходом к измерению своей научной деятельности и критикуют ограниченность этих методов, заново открывая таким образом недостатки, давно известные экспертам в этой области. Другие же, не столь критично настроенные, принимаются изобретать показатели и, комбинируя более-менее произвольным образом библиометрические данные, разрабатывают формулы для выявления лучших исследователей. Злоупотребления оценочной библиометрии бросают тень на всю совокупность методов, которые между тем являются незаменимыми при анализе глобальной динамики науки. Глава II. Динамика наук сквозь призму библиометрии