CC BY
9
УДК 001.89(051.2)
Управление продуктивностью научной работы профессорско-преподавательского состава
Котляров И. Д., канд. экон. наук
Предложена классификация показателей продуктивности научной деятельности, составлен перечень критериев, которым должны удовлетворять такие показатели, выполнен анализ используемого в России показателя результативности научной деятельности, показана его непригодность для измерения результатов научной деятельности, предложены новые показатели продуктивности научной деятельности и методика их расчета, а также способ расчета заработной платы профессорско-преподавательского состава на основе этих показателей.
Ключевые слова: показатель результативности научной деятельности, индекс цитирования, импакт-
фактор.
Faculty staff scientific output management
Kotliarov I., Cand. Sc. in Economics
^ntains a classification of indexes of scientific output and an analysis of the index of effectiveness of scientific activity used in Russia to evaluate productivity of scholars. A list of criteria an effective index of scientific output should meet is proposed. It is demonstrated that this index has major flaw and should not be used for measurement of scientific output. New indexes are proposed. It is explained how these indexes can be used to calculate a professor’s salary.
Keywords: index of scientific output, citation index, impact factor.
Введение. Для российской высшей школы проблема эффективной организации научной работы имеет особую актуальность, так как профессорско-преподавательский состав в ряде случаев относится к этому аспекту своих служебных обязанностей весьма формально: по сути дела, о необходимости демонстрации своих научных результатов (как правило, в виде публикаций в сборниках заочных конференций или в платных журналах, не рецензирующих поступающие статьи) преподаватель высшей школы вспоминает только перед прохождением конкурса на замещение должности или при подаче документов на получение звания доцента (профессора). Фактический отказ профессорско-преподавательского состава от ведения научной деятельности влечет за собой отсутствие знакомства с новыми результатами, полученными в соответствующей отрасли науки в России и за рубежом, а также отсутствие новых по содержанию учебных пособий (публикуемые учебные материалы чаще всего представляют собой пересказы старых учебников). Это имеет своим следствием низкое качество профессиональной подготовки выпускников вузов и их несоответствие требованиям работодателей.
В силу этого стимулирование профессорско-преподавательского состава к участию в научной работе имеет большое значение для обеспечения качества российского высшего образования. Одним из методов такого стимулирования является использование количественных показателей для оценки результативности научной деятельности с последующим учетом этих показателей при расчете величины заработной платы и продвижении по карьерной лестнице.
Специфика научной работы не позволяет разработать абсолютно объективные показатели продуктивности научной деятельности (ППНД), на что многократно указывали противники такой методики. Однако столь же очевидно, что управление любым видом деятельности нуждается в наличии формальных количественных показателей. Поэтому при всей несомненной спорности существующих ППНД от их использования, на наш взгляд, не только не следует отказываться, но, напротив, необходимо повсеместно внедрять их в практику управления профессорско-преподавательским составом высших учебных заведений. При этом, разумеется, следует четко очерчивать пределы применения этих показателей.
Ниже рассматриваются основные виды показателей продуктивности научной деятельности (ППНД), используемые в России и мире, исследуются принципы, которым должны соответствовать эти показатели, и способы применения ППНД, а также предлагается новая методика расчета ППНД.
Виды показателей продуктивности научной деятельности. В мировой и российской практике итогом научной деятельности считается регулярное информирование исследователем своих коллег о полученных им результатах. Это информирование принимает форму публикаций научных статей и монографий, выступлений на конференциях, регистрации патентов и т. д. Соответственно, измерение продуктивности научной деятельности происходит путем оценки интенсивности и эффективности этого информирования.
Изучение используемых в мире методов оценки научной работы позволяет сделать вывод о том, что существующие показатели могут быть классифицированы по двум основным критериям: по способу оценки значимости научных результатов и по однородности.
По способу оценки значимости научных результатов, полученных отдельным исследователем, существующие показатели можно разбить на следующие основные группы:
1. Валовые показатели. При их расчете значимость научных результатов во внимание не принимается, оценивается лишь их количество. Эти показатели обычно рассчитываются как суммарное число научных работ, опубликованных исследователем за определенный период, как объем этих работ в авторских листах, как число выступлений на конференциях и т. д. и служат подтверждением факта ведения исследователем научной деятельности, но ничего не говорят о ее качестве. Достоинство этих показателей - простота расчета, недостаток - возможность подмены подлинно научных результатов потоком наукообразных публикаций.
2. Качественные показатели. Характеризуют научный уровень полученных исследователем результатов. Как правило, качество этих результатов определяется на основе оценки качества изданий, в которых они были опубликованы. Примером может служить более высокий вес статей в журналах из «списка ВАК» при расчете применяемых в России показателей результативности научной деятельности (ПРНД).
3. Показатели восприятия. Описывают влияние научных результатов исследователя на общее развитие науки. В основе расчета этих показателей лежит оценка использования опубликованных исследователем результатов другими учеными. Характерным примером такого показателя является индекс цитирования (Scientific Citation Index, SCI), рассчитываемый Thomson Reuters и представляющий собой число ссылок на работы исследователя за определенный период. Среди научного сообщества эти показатели воспринимаются как наиболее престижные. В России существует собственный Российский индекс научного цитирования (РИНЦ); данный проект реализует Научная электронная библиотека Elibrary.ru.
4. Смешанные показатели. При расчете этих показателей используются параметры разных групп. В качестве примера можно привести показатель вклада монографий (ПВМпрнд) в общий показатель результативности научной деятельности ученого, который используется в российских учреждениях науки и высшего образования и рассчитывается по следующей формуле:
пвм.
прнд
= M ■ V,
где М - множитель, учитывающий качество монографии (принимает более высокие значения для монографий, изданных за рубежом, и для монографий, поддержанных некоторыми грантами); этот множитель относится к показателям второй
группы; V - объем монографии в авторских листах (показатель первой группы).
По критерию однородности ППНД подразделяются:
• на однородные (для их расчета берутся однотипные научные результаты - например, только публикации в журналах или только число зарегистрированных патентов);
• неоднородные (при их расчете во внимание принимаются разные виды научных результатов).
В настоящее время в России в разных ситуациях используются следующие ППНД:
1. При получении ученого звания доцента претендент должен подтвердить наличие у него установленного числа научных и учебно-методических публикаций за определенный промежуток времени. Это число различно для соискателей звания доцента и профессора. Например, для получения звания доцента исследователь за последние три года должен выступить в качестве:
• автора (соавтора) учебника (учебного пособия) или не менее двух учебнометодических работ;
• автора (соавтора) монографии (главы в монографии) или не менее двух научных работ.
Таким образом, в этом случае используются два валовых показателя, причем их абсолютная величина значения не имеет -важно лишь, чтобы они были не ниже установленного порога.
2. Для защиты диссертации на соискание ученой степени кандидата (доктора) наук диссертант обязан иметь не менее одной (соответственно, семи) статей в журналах, вошедших в «список ВАК». Очевидно, что в этом случае речь идет о показателе второй группы (качественном), при этом также задается лишь его нижний порог (т. е. превышение этого порога никак не поощряется, важно лишь наличие минимально требуемого числа публикаций).
3. При расчете стимулирующих выплат за ведение научной деятельности используется ПРНД. Общая формула расчета этого показателя имеет следующий вид:
ПРНД = ПКШ
n m l о \/ °ijk Vijk
С А
i=1 j=1 k=1 ^nijk
(1)
где ПК - повышающий коэффициент, присвоенный определенной категории ученых (принимает более высокие значения для молодых исследователей); п - число видов научной деятельности (к самостоятельным видам относятся, как правило, публикация статей, участие в конференциях, публикация монографий, руководство аспирантами, руководство дипломными работами и т. д.); т -число подвидов научной деятельности в рамках /-го вида (например, для вида дея-
тельности «Публикация статей» подвидами будут публикация статей в российских журналах и публикация статей в зарубежных журналах); I -число научных результатов, полученных в рамках у-го подвида /-го вида научной деятельности (например, число статей, опубликованных в зарубежных научных журналах); З ук - значимость к-го результата (например, для статей, опубликованных в журналах с высоким импакт-фактором, она выше); V ук - объем к-го результата в выбранных единицах измерения (например, для монографий - число авторских листов, для статей - одна статья); САук - коэффициент, позволяющий учесть наличие соавторов у к-го результата.
Первые два показателя по своей сути имеют разовый характер (т. е. используются в исключительных ситуациях - при присвоении ученого звания или присуждении ученой степени), тогда как третий показатель призван служить для непрерывной оценки текущей научной деятельности исследователя. По этой причине первые два показателя останутся за пределами нашего рассмотрения, а ниже будут описаны проблемы, связанные с использованием ПРНД.
Основным показателем, используемым в мировой практике для оценки результативности научной деятельности, является уже упоминавшийся выше индекс цитирования БС1.
Использование ПРНД как инструмента управления эффективностью научной деятельности. Сформулируем требования, которые должны соблюдаться при использовании показателя продуктивности научной деятельности:
1. При его расчете должны использоваться только те переменные, которые характеризуют собственно научную деятельность. Характеристики других видов деятельности (например, педагогической) не могут быть включены в показатель ППНД.
2. Методика расчета показателя не должна допускать скрытой или явной дискриминации отдельных категорий научных работников.
3. Методика расчета показателя должна стимулировать научных работников на получение важных и востребованных обществом результатов научной деятельности. Из этого требования вытекает следующее:
• методика расчета показателя не должна подгоняться под возможности отдельного ученого или научного учреждения;
• методика расчета показателя не должна допускать ситуацию, при которой малое число хороших научных работ и большое число работ низкого уровня будут описываться формально равными значениями показателя;
• значения и единицы измерения величин, входящих в формулу расчета ППНД (например, в случае формулы (1) - величина значимости Зук и единица измерения объема научного результата), должны определяться или рассчитываться
по определенной методике, а не задаваться произвольно.
4. При использовании ППНД для расчета оплаты труда научного работника необходимо принимать во внимание его абсолютное значение - чем оно больше, тем выше оплата.
Насколько используемые в России ПРНД соответствуют этим принципам? Анализ проводился на основе методики расчета ПРНД, принятой в Институте физики Земли РАН, однако его результаты справедливы для всех ПРНД, применяемых в научных и высших учебных заведениях Российской Федерации, так как принципы расчета этих показателей во всех учреждениях одинаковы и различаются только числом слагаемых п и т и значимостью Зук каждого вида научной деятельности.
Согласно этой методике, при расчете ПРНД учитываются следующие виды научной деятельности:
- публикация статей в российских и зарубежных научных журналах;
- публикация в сборниках конференций;
- публикация монографий, учебников и учебных пособий;
- выступления на конференциях;
- патенты;
- карты;
- разработка и доработка учебных курсов, читаемых в вузе;
- руководство соискателями научной степени и дипломниками.
Из этого перечня очевидно, что ПРНД не является «чистым» показателем продуктивности научной деятельности, так как он учитывает виды деятельности, имеющие к науке весьма опосредованное отношение, а именно - публикация учебников и учебных пособий, разработка учебных курсов и руководство дипломными работами.
Безусловно, учебник или учебное пособие могут содержать новые научные результаты, полученные его автором, но они ни в коем случае не могут рассматриваться как место первичной публикации этих результатов - по всем правилам научной работы, они должны быть предварительно опубликованы в статьях или монографиях и получить одобрение научного сообщества. В противном случае речь идет о том, что студентам под видом научных результатов преподносят непроверенные и неапробированные гипотезы, что является нарушением научной и педагогической этики.
Это утверждение в еще большей степени справедливо для разработки учебных курсов.
Что касается дипломных проектов, то они представляют собой в первую очередь квалификационные работы и претендовать на научную новизну не могут.
Таким образом, ПРНД не соответствует первому из указанных выше требований, так как в него включены показатели, характеризующие не научную, а педагогическую деятельность исследователя.
Особо следует отметить, что речь не идет о том, что педагогическая деятельность не важна - напротив, нужно всячески поощрять участие ученых в преподавательской работе. Однако эффективность этой работы не должна включаться в показатели результативности научной деятельности, так как это приводит к путанице и нарушению логики самого ПРНД. Гораздо разумнее для этих целей было бы разработать отдельный показатель результативности педагогической деятельности.
Формула (1) позволяет убедиться в том, что ПРНД допускает в силу наличия в нем повышающего коэффициента для молодых сотрудников явную дискриминацию сотрудников старшего возраста (более 40 лет), так как для них повышающий коэффициент равен 1. Для сотрудников до 40 лет значение этого коэффициента варьирует в ИФЗ от 1,5 до 3, в зависимости от срока, истекшего с момента окончания вуза (этот срок для получения повышающего коэффициента не должен превышать 10 лет), и от возраста, в котором была защищена кандидатская или докторская диссертация (не более 40 лет).
Приведенный выше перечень видов научной деятельности, включаемых в расчет ПРНД, кроме того, показывает, что методика определения ПРНД допускает неявную дискриминацию сотрудников, не имеющих ученой степени, поскольку они не имеют права руководить аспирантами и у них, в принципе, отсутствует соот-
ветствующее слагаемое в расчете ПРНД. Важно отметить, что вклад любого вида научной деятельности в суммарную величину ПРНД может быть равен нулю по двум причинам:
• научный сотрудник по собственной воле не занимается соответствующим видом научной деятельности (что может служить основанием для организационных выводов, но дискриминацией названо быть не может);
• научный сотрудник не имеет права заниматься данным видом научной деятельности - в этом случае речь идет о дискриминации.
Таким образом, второму требованию методика расчета ПРНД также не соответствует, так как допускает явную и скрытую дискриминацию отдельных категорий научных сотрудников, что говорит о необъективности показателя.
В мировой практике наиболее важным показателем интенсивности научной деятельности является число публикаций в ведущих мировых журналах. Именно такие публикации служат основой для расчета наиболее престижного ППНД - индекса цитирования БС1. Остальные виды публикаций (монографии, доклады в сборниках конференций и т. д.) носят вторичный характер. Следовательно, целью определения ППНД должно стать преодоление изоляционизма российской науки и побуждение исследователей публиковать свои работы в признанных международных журналах.
Рассмотрим вклады отдельных подвидов научной деятельности в расчет ПРНД (см. таблицу).
Оценка значимости отдельных подвидов научной деятельности по методике ИФЗ РАН
Вид научной деятельности Подвид научной деятельности Показатель значимости полученного результата З Единица измерения полученного результата
1. Публикация научных статей 1.1. Публикация в журнале «Физика Земли» 1.2. Публикация в российских рецензируемых журналах по профилю ИФЗ 1.3. Публикация в российских журналах из «списка ВАК» 1.4. Публикация в зарубежных научных журналах 1.5. Публикация в сборниках конференций 30 20 - 9, если ^ < 0,2 ; - 45/Р, если ^ > 0,2 - 6, если /F < 0,2 ; - 30^, если /F > 0,2 4 Одна публикация Одна публикация Одна публикация Одна публикация Одна публикация
2. Публикация монографий 2.1. Публикация монографий, поддержанных грантом РФФИ, Президиумом РАН или Отделением РАН 2.2. Публикация монографий по рекомендации ученых или редакционноиздательских советов институтов РАН или ведомственных вузов, а также учебников с грифов Министерства образования и науки России или УМО 3 2 Авторский лист Авторский лист
3. Разработка новых учебных курсов 3.1. Разработка новых учебных курсов 20 Семестр (т. е. учитывается число семестров, в течение которых читается учебный курс)
Примечание. Обозначения в таблице соответствуют формуле (1); ^ - импакт-фактор журнала, рассчитывается как отношение числа ссылок на статьи, опубликованные в данном журнале, к числу опубликованных статей за определенный период. Для удобства из таблицы исключен способ учета соавторов - предполагается, что результаты получены одним исследователем самостоятельно. В таблицу включены не все виды и подвиды научной деятельности, учитываемые в методике ИФЗ расчета ПРНД.
Анализ данных таблицы показывает следующее:
1. Методика расчета ПРНД подогнана под специфику российских научных учреждений вообще и ИФЗ в частности, так как, во-первых, публикации в профильных для ИФЗ российских журналах (с низким импакт-фактором или без такового вообще; см. п. 1.2) имеют очень высокую значимость, во-вторых, публикации в российских журналах имеют более высокую значимость, чем в зарубежных (ср. пп. 1.3 и 1.4).
2. Публикация большого количества работ недостаточно высокого уровня позволит исследователю получить то же итоговое значение ПРНД, что и публикация малого числа работ высокого уровня. Например, публикация в зарубежном журнале с импакт-фактором 0,5 может быть легко заменена публикациями четырех статей в сборниках конференций. Как известно, публикация в сборниках конференций представляет собой самый простой и быстрый способ публикации, используемый российскими исследователями, - отсев материалов в большинстве случаев отсутствует, и за сравнительно небольшую плату организаторы конференций готовы публиковать все, что угодно, тогда как публикация в зарубежном журнале, входящем в базу БС1, требует от автора значительных усилий по подготовке и доработке статьи.
3. Величины значимости вкладов видов научной деятельности заданы произвольным образом - например, неясен источник столь высокой значимости публикаций в журнале «Физика Земли» (по прилагаемой таблице им-пакт-фактор этого журнала равен 0,092, и, в таком случае, значимость публикаций в нем должна была бы, в соответствии с п. 1.3, быть равной 9, но никак не 30).
Таким образом, третьему требованию ПРНД также не соответствует.
Что касается учета значения ПРНД при расчете дополнительных выплат, то информации на этот счет источник [1] не содержит. Однако по данным высших учебных заведений, дополнительные выплаты назначаются в одинаковом размере всем сотрудникам, у которых величина ПРНД превысила определенное значение, т. е. прослеживается нарушение четвертого требования.
Из сказанного очевидно, что ПРНД, рассчитываемый по описанной выше методике (которая, как уже говорилось, одинакова у всех использующих ее научных и высших учебных заведений), не может служить объективной мерой эффективности научной деятельности 1.
1 Это ни в коем случае не является попыткой указать на непрофессионализм разработчиков методики расчета ПРНД из института физики Земли РАН - речь идет о порочности используемых российскими вузами и НИИ методик расчета ПРНД в принципе.
Разработка показателя продуктивности научной деятельности и методики его использования для расчета выплат профессорско-преподавательскому составу. Выше были перечислены требования, которым должен удовлетворять ППНД. Также было сказано, что приоритетной задачей российской науки, на наш взгляд, является преодоление изоляционистских тенденций и активное включение в мировой научный процесс, в том числе и путем публикаций результатов своих исследований в ведущих международных журналах. Следовательно, ППНД должен рассчитываться таким образом, чтобы поощрять такие публикации (иными словами, размещение статей в иностранных журналах как вид научной деятельности должно иметь максимальную значимость). При этом, однако, следует также поощрять отечественных исследователей публиковать свои статьи в ведущих российских журналах, чтобы содействовать формированию в нашей стране пула признанных на международном уровне высококлассных научных изданий.
Проблема «компенсации» (когда исследователю не важно, публиковать одну хорошую статью или много плохих, и в ряде случаев он предпочитает идти по пути наименьшего сопротивления и размещать статьи низкого качества в непрестижных журналах или сборниках заштатных конференций) может быть решена двумя способами:
1. Определять ППНД как однородный показатель, т. е. при его расчете учитывать только один вид (или даже подвид) научной деятельности.
2. Определять ППНД как неоднородный показатель, т. е. при его расчете учитывать несколько видов научной деятельности. Однако занимаясь «нецелевым» видом деятельности, ученый может набрать строго ограниченное число баллов (т. е. величина вклада этого вида деятельности, независимо от объема полученных результатов, имеет верхний предел), тогда как при «целевом» виде деятельности (в данном случае - при размещении статей в ведущих мировых журналах) верхний порог отсутствует. При этом методика расчета показателя этого типа должна быть рассчитана таким образом, чтобы была возможность достигнуть требуемого для получения выплат минимального значения ППНД, только опубликовав не менее одной статьи в ведущем мировом журнале.
На наш взгляд, наиболее удобен первый путь, в силу своей простоты и однозначной направленности на целевой результат.
ППНД, по нашему мнению, должен формироваться как качественный показатель: валовые показатели ничего не говорят об уровне научной деятельности, тогда как до получения индекса цитирования ученым может пройти слишком много времени с момента публикации. Кроме того, индекс цитирования во мно-
гом субъективен - наибольшая его величина характерна для обзорных и методических работ. Наконец, ученый, направления работы которого не соответствуют текущей научной «моде», также будет характеризоваться низким уровнем индекса цитирования, хотя его работы могут быть высокого класса.
В качестве основы для расчета ППНД следует взять импакт-фактор журнала, в котором опубликована статья.
Методика расчета ППНД будет в этом случае иметь следующий вид:
1. ППНД за истекший период равен сумме импакт-факторов журналов, взятых за последний доступный год (как правило, величина импакт-фактора рассчитывается за год, предшествующий истекшему), в которых исследователь опубликовал свои статьи за истекший год. Для российских журналов берется импакт-фактор, рассчитываемый Научной электронной библиотекой, для иностранных журналов - импакт-фактор ТИотэоп Ре^егэ. Для российских журналов, имеющих англоязычную версию, для которых рассчитываются оба индекса, берется максимальный из них (в зависимости от выбора импакт-фактора, соответствующая публикация засчитывается либо как международная, либо как российская).
2. Если исследователь публиковался
как в российских, так и в иностранных журналах и при этом максимальный импакт-фактор российского или иностранного журнала равен или больше 1, то ППНД удваивается.
3. Если исследователь публиковался
как в российских, так и в иностранных журналах и при этом максимальный импакт-фактор и российского и иностранного журнала равен
или больше 1, то ППНД умножается на 3.
4. Если исследователь публиковался
только в российских журналах, то ППНД умножается на 0,75.
Предлагаемый показатель можно назвать индексом научной продуктивности (ИНП).
Методика расчета выплат профессорско-преподавательскому составу на основе ИНП может иметь следующий вид:
1. Общий фонд выплат за научную деятельность разбивается на три части: стимулирующий фонд СФ, ден. ед. (90 % общего фонда); фонд единовременных выплат ФЕВ, ден. ед. (10 %); фонд компенсации текущей научной деятельности (10 %).
2. Рассчитывается суммарное значение ИНПсум всех научных сотрудников учреждения за истекший год:
ИНПсум =£ИНП ,,
/=1
где п - число научных сотрудников.
3. Размер стимулирующих выплат для /-го сотрудника ВС,, ден. ед., рассчитывается по формуле
ВС, =-ИНП-СФ.
ИНП
(2)
'сум
4. Стимулирующие выплаты могут выплачиваться сотруднику единовременно или равномерно частями в течение года.
5. Фонд единовременных выплат служит для разовых поощрений научных сотрудников за публикацию монографий в ведущих российских и международных издательствах, получение научных премий, регистрацию патентов и т. д. Порядок расчета этих выплат регламентируется самим учреждением.
6. Фонд компенсации текущей научной деятельности распределяется в порядке, установленном ученым советом научного или образовательного учреждения, для стимулирования участников очных конференций.
Предлагаемая методика расчета и использования ИНП позволяет создать однозначное соответствие между оплатой труда исследователя и результатами его научной деятельности, ориентируя его при этом на создание приоритетных с точки зрения развития отечественной науки результатов.
Разумеется, предложенное выше распределение (90 % - 10 % - 10 %) носит условный характер. На практике могут быть использованы другие пропорции, однако, по нашему мнению, стимулирующий фонд должен составлять большую часть общего фонда выплат за научную деятельность.
Заключение
Разработанная и предлагаемая методика не свободна от недостатков. В частности, может вызвать неприятие или отказ от учета всех видов научной деятельности, кроме публикаций в журналах с импакт-фактором. Однако, на наш взгляд, эта методика прозрачна и задает четкие целевые ориентиры для российских ученых, тогда как другие виды научной деятельности могут оплачиваться за счет единовременных выплат из специально для этого предусмотренных фондов.
Список литературы
1. Методика расчета индивидуального ПРНД в ИФЗ им. О. Ю. Шмидта РАН. Доступна онлайн по адресу http://www.ifz.ru/doc/2009/prnd 2009/PRND methodics 2009. pdf (проверено 06.01.2010).
2. Перечень ведущих рецензируемых научных журналов и изданий, в которых должны быть опубликованы основные научные результаты диссертации на соискание ученой степени доктора и кандидата наук (редакция апрель 2008 года). Доступен онлайн по адресу: http://vak.ed.aov.ru/common/ima/uploaded/VAK/files help des k/per-04-2008.doc (проверено 06.01.2009).
3. Положение о порядке присвоения ученых званий. Утверждено постановлением Правительства Российской Федерации №194 от 29.03.2002.
Котляров Иван Дмитриевич,
Северо-Западный институт печати Санкт-Петербургского государственного университета технологии и дизайна, кандидат экономических наук, доцент кафедры менеджмента и маркетинга в печатном деле, e-mail: [email protected]
