CC BY
61
УДК 005.9353+025.2 ББК 65.050.2-73
К ВОПРОСУ ПОСТРОЕНИЯ РЕЙТИНГА РОССИЙСКИХ НАУЧНЫХ ЖУРНАЛОВ
Шахнов И. Ф.1
(Учреждение Российской академии наук Вычислительный центр им. А. А. Дородницына РАН,
Москва)
Рассматриваются некоторые вопросы построения системы коллективной экспертизы. Отдельно выделяется проблематика разработки системы согласованных критериев и вербальночисловых шкал для оценки альтернатив по этим критериям. Указывается на важность тщательной проработки совокупностей качественных и количественных признаков, в соответствии с которыми сравниваемым альтернативам присваивается та или иная градация на используемых вербальночисловых шкалах.
Ключевые слова: критерии, вербально-числовая шкала, рейтинг научных журналов, приоритетность, категории научных исследований, система коллективной экспертизы, альтернатива, градация.
Задача формирования оптимального списка важнейших российских и зарубежных журналов, необходимых для обеспечения подготовки Реферативного журнала и Базы данных ВИНИТИ РАН, безусловно, является и актуальной, и весьма важной.
Знакомство со статьей О. В. Федорца «Коллективная экспертиза научных журналов: методика агрегирования экспертных
1 Игорь Федорович Шахнов, ведущий научный сотрудник,
к. ф.-м. н., доцент (ishahnov@mail.ru)
оценок и построения рейтинга» показало, что автором, несомненно, выполнен большой объем работы, связанной с разработкой и практической апробацией методики агрегирования экспертных оценок. Накоплен опыт организации и проведения коллективной экспертизы научных журналов и других изданий в ВИНИТИ РАН. Однако общий подход и применявшиеся методы нуждаются в более тщательной проработке.
При дальнейшей разработке этой темы, как мне представляется, необходимо обратить внимание на следующие факторы.
1. Публикации в научных изданиях и реферативных журналах ВИНИТИ РАН в первую очередь должны быть посвящены наиболее важным научным направлениям. Приоритетность научных направлений в нашей стране устанавливается специальными постановлениями директивных органов.
2. Работы, проводимые в области науки, принято делить на категории: фундаментальные, поисковые, прикладные научные исследования и опытно-конструкторские разработки (ОКР). Качество выполненных исследований (и целесообразная очередность публикаций о них в реферативных журналах) необходимо определять с помощью специально разработанных критериев. Сказанное относится к каждой из вышеуказанных категорий исследований. Далее приоритетность категорий следует устанавливать в соответствии с проводимой политикой по отношению к категориям исследований.
3. Указанная выше приоритетность различных категорий исследований, естественно, может существенно меняться при переходе от одной отрасли науки к другой.
4. Важную роль будут играть вербально-числовые шкалы. В связи с этим необходима тщательная проработка совокупностей качественных (и, возможно, количественных) признаков, в соответствии с которыми сравниваемым альтернативам присваивается та или иная градация используемой вербальночисловой шкалы.
5. Кроме того, нельзя забывать, что всякая вербальночисловая шкала предназначена для регистрации той степени проявления того или иного свойства, которой обладает рассмат-
риваемая альтернатива1. В связи с этим необходимо отметить принципиальную важность решения проблемы правильного выбора системы используемых критериев, которые должны обладать такими свойствами как содержательная оправданность, понятность для пользователей, непротиворечивость, взаимная независимость по предпочтению и т.д. Здесь, как и в п. 4, представляется крайне важным использовать в полной мере имеющийся отечественный и зарубежный опыт разработки подобных систем оценки альтернатив.
6. В целом система коллективной оценки целесообразности внесения в банк данных и реферирования тех или иных научных изданий неизбежно окажется многокритериальной и будет носить иерархический характер. При разработке такой системы может оказаться полезным накопленный опыт построения и использования иерархически организованных информационных систем (например, типа системы ПАТТЕРН).
7. Для практического воплощения системы коллективной экспертизы в полном объеме, по-видимому, потребуется создание коллектива высококвалифицированных специалистов (с различной специализацией), организационно оформленного в виде исполнителя целевого проекта с отдельным целевым финансированием.
8. Опыт, накопленный в процессе создания рассматриваемой системы коллективной экспертизы, несомненно, будет крайне полезен при разработке аналогичных систем в других областях практических приложений.
1 Наиболее важные свойства при этом принято называть критериями для сравнения альтернатив.
ABOUT CONSTRUCTING THE RATING OF RUSSIAN SCIENTIFIC JOURNALS
Igor F. Shahnov, Computer Center of RAS, Moscow, leading research officer, Cand.Sci, associate professor ( shahnov@mail .ru)
Abstract: Some issues of construction of collective expert examination system are analyzed. Problems of development of concerted criteria system and verbal-number scales for estimation of alternatives by these criteria are described separately. Author underlines the importance of thorough elaboration of manifolds of qualitative and quantitative characters, according to which compared alternatives are assigned to different graduations on used verbal-number scales.
Keywords: rating, criteria, verbal-number scale, priority, category, scientific researches, system of collective examination, alternative, graduation.
