Коллектив авторов - Совершенствование оценки эффективности деятельности подведомственных Правительству Российской Федерации образовательных и научных учреждений

В количественной оценке цитирования работ по социальным и гуманитарным наукам существуют специфические проблемы. В этих предметных областях статьи в журналах могут отражать лишь отдельные аспекты проводимых исследований, что сказывается на уровне их цитирования [19] Hicks D. (2006) The Dangers of Partial Bibliometric Evaluation in the Social Sciences. Economia Politica , XXIII, no 2, pp. 145–162. .

Индикаторы трансфера знаний и коммерциализации результатов исследований в последние годы приобрели особую значимость, поскольку исследования и политики в области инноваций стали более интегрированными. Эти индикаторы могут базироваться на измерении количества лицензий и стартапов, но могут также быть связаны с проведением совместных исследований, консультационной деятельностью, а также с возможностями трудоустройства выпускников со степенью PhD и удовлетворенностью работодателей уровнем подготовки выпускников.

Индикаторы второго уровня. В результате выявленных методологических проблем с оценкой цитируемости были разработаны несколько индексов, которые доступны в большинстве баз данных. Но к их использованию в качестве индикаторов необходимо относиться с большой осторожностью, что не всегда имеет место на практике.

Основными индексами являются импакт-фактор журнала и индекс Хирша. Импакт-фактор журнала – показатель, дающий характеристику среднему числу цитирований статей, опубликованных в данном журнале в пределах определенного срока. Однако существуют значительные различия в числе цитирований статей по отдельным темам. И даже в журналах с высокими импакт-факторами некоторые статьи либо имеют мало, либо не имеют цитирований. Поэтому импакт-фактор не должен механически использоваться для оценки эффективности деятельности исследователей или исследовательских групп.

Индекс Хирша показывает число статей, опубликованных исследователями, у которых есть число цитирований, равное или выше, чем количество статей. Значение индекса Хирша на уровне 20 говорит о том, что исследователь имеет 20 публикаций, каждая из которых была процитирована, по крайней мере, 20 раз. Индекс Хирша был разработан с учетом ограничений других показателей цитируемости. Например, у менее значимого исследователя может быть высокое общее количество цитирований, поскольку он опубликовал «прорывную» статью совместно с другими исследователями. Тем не менее, достичь высокого значения индекса Хирша возможно, имея непрерывный поток публикаций в течение ряда лет. Это означает, что применение индекса Хирша к исследовательской деятельности имеет смысл после 12–15 лет проведения исследований. Кроме того, индекс Хирша зависит от количества лет занятости исследовательской работой, области исследований и сотрудничества в академической сфере. Поэтому индекс Хирша в полной мере не решает проблему сравнительных оценок.

Индикаторы третьего уровня. Индикаторы третьего уровня основаны на экспертных оценках эффективности деятельности отдельных подразделений. Такая оценка проводится с привлечением признанных исследователей в отдельных областях знаний. Экспертная оценка может быть определена как коллегиальная профессиональная модель оценки. Основная идея состоит в том, что признанные представители профессионального сообщества могут оценить деятельность других участников и результаты их исследований на основе качественных профессиональных критериев.

Таким образом, набор индикаторов для оценки эффективности научных исследований продолжает расширяться и совершенствоваться. Многие из используемых индикаторов являются неоднозначными, имеющими как положительные характеристики, так и ограничения. Поэтому их применение для оценки вызывает дискуссии и обсуждения в профессиональной среде. При этом предлагаемые новые индикаторы лишены недостатков старых, но имеют свои слабые стороны.

К основным нормативным правовым актам, регламентирующим процесс государственной аккредитации вузов и научных учреждений в России, в настоящее время относятся:

– «Положение о государственной аккредитации образовательных учреждений и научных организаций», утв. Постановлением Правительства Российской Федерации от 21.03.2011 № 184 (ред. от 27.12.2012) – применяется с учетом положений ст. 92 Федерального закона от 29.12.2012 № 273-ФЗ «Об образовании в Российской Федерации»;

– «Перечень показателей деятельности образовательного учреждения высшего профессионального образования, необходимых для установления его государственного статуса», утв. приказом Минобрнауки России от 02.09.2011 № 2253;

– «Критерии показателей, необходимых для определения типа и вида образовательного учреждения высшего профессионального образования», утв. приказом Федеральной службы по надзору в сфере образования и науки от 25.10.2011 № 2267;

– «Методика проведения экспертизы показателей деятельности образовательного учреждения высшего профессионального образования, необходимых для определения его типа и вида», утв. директором ФБГУ «Росаккредагентство», 2013 г. (проект);

– «Порядок проведения самообследования образовательной организацией», утв. приказом Минобрнауки России от 14.06.2013 № 462;

– Приказ Минобрнауки России «Об утверждении показателей деятельности образовательной организации, подлежащей самообследованию», 2013 (проект).

В соответствии с новым Федеральным законом «Об образовании в Российской Федерации» [20] Федеральный закон от 29.12.2012 № 273-ФЗ (ред. от 23.07.2013) «Об образовании в Российской Федерации», ст. 92. функция по государственной аккредитации образовательной деятельности возложена на Федеральную службу по надзору в сфере образования и науки [21] Положение о Федеральной службе по надзору в сфере образования и науки, утв. Постановлением Правительства Российской Федерации от 15.07.2013 № 594, п. 1. .

В соответствии с названным законом целью государственной аккредитации является подтверждение соответствия процесса подготовки обучающихся в образовательных организациях требованиям федеральных государственных образовательных стандартов. Государственная аккредитация образовательной деятельности проводится по результатам аккредитационной экспертизы, предметом которой как раз и является «определение соответствия содержания и качества подготовки обучающихся в организации, осуществляющей образовательную деятельность, по заявленным для государственной аккредитации образовательным программам федеральным государственным образовательным стандартам» [22] Федеральный закон от 29.12.2012 № 273-ФЗ (ред. от 23.07.2013) «Об образовании в Российской Федерации», ст. 92, п. 12. .