Научная статья на тему 'МОНИТОРИНГ И ОЦЕНКА НАУЧНЫХ И ТЕХНОЛОГИЧЕСКИХ ДОСТИЖЕНИЙ'

МОНИТОРИНГ И ОЦЕНКА НАУЧНЫХ И ТЕХНОЛОГИЧЕСКИХ ДОСТИЖЕНИЙ Текст научной статьи по специальности «Энергетика и рациональное природопользование»

CC BY
208
41
i Надоели баннеры? Вы всегда можете отключить рекламу.
Ключевые слова
НАУКА / ТЕХНОЛОГИИ / ГИПОТЕЗЫ / КОНЦЕПЦИИ / ИННОВАЦИОННЫЕ РАЗРАБОТКИ / ЭКСПЕРТНАЯ ОЦЕНКА / ВЕРБАЛЬНО-ЧИСЛОВАЯ ШКАЛА / science / technology / hypotheses / concepts / innovative developments / expert evaluation / verbal-numerical scale

Аннотация научной статьи по энергетике и рациональному природопользованию, автор научной работы — Корчак В. Ю., Реулов Р. В., Стукалин С. В.

Рассматривается роль мониторинга научных и технологических достижений в инновационном развитии экономики страны. Дается описание этапов развития организационных основ мониторинга и оценки достижений отечественной науки. Предлагается научно-методический подход к военно-технической оценке достижений академического и вузовского сектора науки, а также промышленности

i Надоели баннеры? Вы всегда можете отключить рекламу.
iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

MONITORING AND EVALUATION OF SCIENTIFIC AND TECHNOLOGICAL ACHIEVEMENTS

We have examined the role of monitoring scientific and technological achievements in the innovative development of the country’s economy, and also have described the stages of development of the organizational framework for monitoring and evaluating the achievements of domestic science. In the article we have proposed a scientific and methodological approach to the military-technical assessment of the academic and university sectors of science achievements, as well as industry, providing for the combined use of the expert competence assessment methodology, the T. Saaty hierarchy analysis method and the multicriteria stream ranking method. We believe that this approach makes it possible to select achievements from the set of results of scientific research and technological developments using the proposed set of indicators. Achievements, that have the greatest potential for use in the creation of promising, including non-traditional, types of weapons, military and special equipment, as well as for countering information, psychological, cybernetic and other threats to the security of the Russian Federation. We have tested the proposed approach, which confirmed its efficiency and the adequacy of the indicators used for the assessment.

Текст научной работы на тему «МОНИТОРИНГ И ОЦЕНКА НАУЧНЫХ И ТЕХНОЛОГИЧЕСКИХ ДОСТИЖЕНИЙ»

Мониторинг и оценка научных и технологических достижений

Рассматривается роль мониторинга научных и технологических достижений в инновационном развитии экономики страны. Дается описание этапов развития организационных основ мониторинга и оценки достижений отечественной науки. Предлагается научно-методический подход к военно-технической оценке достижений академического и вузовского сектора науки, а также промышленности

B.Ю. Корчак1

Инновационный технологический центр Комплекса научной политики МГТУ им. Н.Э. Баумана, д-р экон. наук, действительный член Российской академии ракетных и артиллерийских наук, korchak.v@mail.ru,

Р.В. Реулов2

ФГБУ 46 Центральный научно-исследовательский институт (ФГБУ «46 ЦНИИ») Минобороны России, канд. техн. наук, доцент

C.В. Стукалин3

ФГБУ «46 ЦНИИ» Минобороны России, канд. техн. наук, доцент

1 ведущий аналитик, Москва, Россия

2 начальник центра, Москва, Россия

3 начальник отдела, Москва, Россия

Для цитирования: Корчак В.Ю., Реулов Р.В., Стукалин С.В. Мониторинг и оценка научных и технологических достижений // Компетентность / Competency (Russia). — 2021. — № 5. DOI: 10.24412/1993-8780-2021-5-06-15

ключевые слова

наука, технологии, гипотезы, концепции, инновационные разработки, экспертная оценка, вербально-числовая шкала

современном мире роль науки и технологий в создании новых технических систем постоянно растет. В результате использования передовых научных и технологических достижений появились принципиально новые виды техники. Применительно к гражданскому сектору экономики это системы обработки больших объемов данных и искусственного интеллекта, принципиально новые виды транспорта, роботизированные системы, новые источники энергии и др. [1], а в части обороны и обеспечения безопасности государства — лазерное, электромагнитное, информационное и другие перспективные и нетрадиционные виды вооружения, военной и специальной техники (ВВСТ) [2], качественно меняющие облик Вооруженных сил Российской Федерации (ВС РФ), других войск, воинских формирований и органов.

Роль мониторинга научных и технологических достижений в инновационном развитии экономики

Руководители ведущих мировых держав рассматривают уровень развития науки и технологий как условие достойного позиционирования государства в мировом сообществе и гарантию военного превосходства [3]. Россия, обладая огромными природными ресурсами, всегда будет оставаться в зоне повышенного внимания развитых государств мира. Это обусловливает необходимость постоянного внимания к вопросам развития науки, технологий и техники в интересах парирования любых существующих и вновь возникающих вызовов и угроз.

В этих условиях наиболее рациональным из возможных путей раз-

вития ключевых отраслей экономики страны (в том числе ее оборонного сектора) представляется инновационный, одним из действенных механизмов реализации которого является постоянный мониторинг результатов научных исследований и технологических разработок, полученных организациями Российской академии наук (РАН), высшей школы, ведущими предприятиями оборонного промышленного комплекса (ОПК) и других отраслей промышленности; проведение их апробации в образцах (составных частях, узлах, элементах) технических систем, а также внедрение наиболее перспективных решений в технику военного и гражданского назначения. Это позволяет существенно сократить временные и финансовые затраты, требуемые на проведение научно-исследовательских и опытно-конструкторских работ (НИОКР) по созданию технических систем, а также улучшить технические и тактико-технические характеристики (ТТХ) перспективных образцов. При этом могут иметь место два вида мониторинга: широкомасштабный — по широкому спектру научно-технических направлений (НТН) исследований и разработок и мониторинг по отдельному НТН (или их ряду).

В идеальном случае система широкомасштабного мониторинга достижений отечественной фундаментальной и прикладной науки, которые могут быть использованы при создании перспективных технических систем, должна охватывать Программу фундаментальных научных исследований в Российской Федерации на долгосрочный период, государственную программу (ГП) «Научно-технологическое развитие Российской Федерации», соответствующие разделы государствен-

ной программы вооружения (ГПВ) и государственной программы «Развитие оборонно-промышленного комплекса», отраслевые и ведомственные научно-технологические программы, проекты и гранты научных фондов, что возможно лишь при условии эффективного взаимодействия различных министерств и ведомств. Представляют также интерес различные научные гипотезы, принципы, идеи и концепции, разработанные, в том числе, в инициативном порядке. Информацию о них можно почерпнуть не только в ходе мониторинга соответствующих программных мероприятий, проектов и грантов, но и из печатных и электронных средств массовой информации. По результатам проведенного мониторинга должны осуществляться экспериментальная оценка и экспертиза научных достижений, отличающихся новизной и имеющих высокий уровень готовности для использования при создании принципиально новых образцов технических систем.

Результатом подобного мониторинга в идеальном случае должно стать формирование единой информационной базы, использование которой позволит:

► выявить новейшие научно-технические достижения фундаментальной и прикладной науки в интересах выработки предложений по областям их возможного применения в технических системах различного назначения;

► разработать предложения по уточнению перечней, определяющих приоритеты научно-технологического развития на федеральном и ведомственном уровнях (перечня критических технологий РФ, перечня базовых и критических военных технологий, перечня базовых и критических промышленных технологий, перечня приоритетных направлений фундаментальных, прогнозных и поисковых исследований и др.), а также прогнозных документов федерального и ведомственного уровня;

► разработать предложения в проекты ГПВ, ГП «Развитие ОПК», а также других государственных и ведомственных научно-технологических программ;

► обеспечить актуальной информацией о научно-технических достижениях федеральные органы исполнительной власти, научно-исследовательские и проектные организации, генеральных конструкторов по созданию техники различного назначения и руководителей приоритетных технологических направлений.

В дальнейшем изложении вопросы мониторинга и оценки научных и технологических достижений будут рассматриваться применительно к сфере обороны страны и обеспечения безопасности государства, поскольку авторы статьи являются специалистами именно в данной области [4-7].

Развитие организационных основ мониторинга и оценки научных и технологических достижений

Развитие организационных основ и методологии мониторинга и оценки научных и технологических достижений будем рассматривать применительно к обеспечению обороны страны и безопасности государства. В нашей стране имеется многолетний опыт проведения подобных исследований, в том числе при организующей роли Секции прикладных проблем (СПП) при Президиуме РАН, отметившей в этом году 70-летний юбилей [8].

В 1985 году в соответствии с решением Комиссии Президиума Совета Министров СССР по военно-промышленным вопросам на базе 46 ЦНИИ Минобороны при поддержке СПП была создана и успешно эксплуатировалась до 1992 года автоматизированная система обработки результатов фундаментальных и поисковых исследований (ФПИ). В базу данных этой системы в виде так называемых информационных листов вносились сведения о достижениях науки и техники (далее — достижения), полученных научно-исследовательскими организациями академий наук СССР и союзных республик, а также высшей школы, представляющих интерес для обороны страны. Ежегодно ин-

№ п/п Шифр и наименование работы Заказчик и головной исполнитель работы Номер и дата решения Государственной комиссии, утвердившего работу Сроки выполнения работы а) Для завершенных в отчетном году НИР: характеристики полученных основных результатов б) Для ведущихся работ: даты согласования задания, заключения договора и назначения научного руководителя (заполняется один раз в первый год проведения исследований). Краткая информация о состоянии исследований и полученных научных результатах Сведения о реализации результатов НИР, у которых в текущем году истекли плановые сроки реализации, а также работ, результаты которых реализованы досрочно (что реализовано, в какой форме, в какой организации, когда, номер, дата утверждения акта реализации) Предложения о возможности реализации в других отраслях промышленности

1

Рис. 1. Установленная форма отчета головного исполнителя НИР, выполнявшейся по Плану ФППИ [The established form of the R&D general contractor's report, carried out according to the Plan of fundamental and applied prospecting research]

Рис. 2. Схема проведения исследований в обеспечение использования достижений отечественной науки в интересах создания опережающего НТЗ [Scheme of research to ensure the use of the achievements of domestic science in the interests of creating an advanced

ститутом выпускались аннотированные сборники важнейших достижений, которые рассылались генеральным заказчикам Минобороны и в головные научно-исследовательские институты министерств оборонных отраслей промышленности (МООП) с целью определения перспектив использования полученных научных результатов при создании новых и модернизации существующих образцов вооружения и военной техники (ВВТ).

Практически из всех научно-исследовательских организаций (НИО) СССР, выполнявших исследования по Плану фундаментальных и прикладных поисковых исследований (ФППИ), в 46 ЦНИИ поступали как полнотекстовые отчеты о научно-исследовательских работах (НИР), так и установленной формы отчеты головных исполнителей о выполнении Пла-

на и реализации полученных результатов (рис. 1). За основу данной формы отчета был принят уже упомянутый информационный лист. Министерство обороны СССР и МООП силами своих головных институтов систематически проводили анализ результатов исследований и отчетных материалов по их реализации. На основании проведенного анализа ими вырабатывались рекомендации по межотраслевой реализации результатов завершенных работ. Координация данного процесса была возложена на 46 ЦНИИ МО [5, 8].

За прошедшие десятилетия механизм организации исследований по мониторингу достижений науки и реализации результатов ФПИ в достаточной степени проработан. Был выполнен ряд комплексных НИР по данной тематике. Схема проведения исследований для обеспечения использования

достижений отечественной науки в интересах создания опережающего научно-технического задела приведена на рис. 2.

С целью обеспечения нормативного и организационного регулирования выполнения задач, поставленных в НИР, был разработан механизм выявления, сбора, оценки и проведения независимой экспертизы прорывных научных достижений (гипотез, принципов, идей, концепций), представленных РАН, научными и образовательными организациями Минобрнауки России, организациями ОПК, государственными корпорациями, научными центрами и фондами и имеющих потенциальную возможность использования для решения перспективных задач ВС РФ.

Указанный подход направлен на обеспечение решения следующих задач:

► сокращение сроков внедрения перспективных разработок в образцы

ВВСТ за счет исключения длительной процедуры постановки предлагаемых работ в рамках государственного оборонного заказа (ГОЗ);

► снижение времени реакции на возникающие технологические угрозы безопасности Российской Федерации;

► поддержка и продвижение инновационных проектов, выполняемых научно-исследовательскими и производственными коллективами (так называемыми виртуальными лабораториями), совместно создаваемыми Минобороны России и РАН для реализации инновационных проектов в интересах ВС РФ;

► практическая апробация перспективных для Минобороны России научных и технологических достижений, имеющих высокий уровень технологической готовности;

► целенаправленный поиск и содействие внедрению перспективных результатов научных исследований, технологических разработок, прорывных

Рис. 3. Обобщенная схема внедрения научных достижений (гипотез, принципов, идей, концепций) в ВВСТ [Generalized scheme for the implementation of scientific achievements (hypotheses, principles, ideas, concepts) in weapons, military and special equipment]

МОНИТОРИНГ

Концептуальная модель по механизмам взаимодействия РАН, научных и образовательных организаций Минобрнауки России, организаций ОПК на этапах отбора, апробации и реализации прорывных научных достижений

Унифицированные форматы представления данных о прорывных научных достижениях (гипотезах, принципах, идеях, концепциях), имеющих потенциальную возможность использования для решения перспективных задач ВС РФ

Анализ результатов ГП РФ, ФЦП, ^программ инновационных фондов и др. Формирование исходных данных для выявления наиболее значимых научных и технологических достижений

Номенклатура, свойства, ТТХ, стоимостные и временные параметры жизненного цикла образцов ВВСТ

ОЦЕНКА, ОТБОР

Методика оценки научной новизны и актуальности для решения перспективных задач ВС РФ прорывных гипотез, принципов, идей, концепций

Методика проведения военно-технической экспертизы научных достижений (гипотез, принципов, идей, концепций) с точки зрения повышения эффективности решения перспективных задач ВС РФ

Методика оценки реализуемости научных достижений (гипотез, принципов, идей, концепций) на существующей производственной, лабораторно-стендовой и экспериментальной базе

Практическая апробация наиболее значимых научных достижений (гипотез, принципов, идей концепций)

Рис. 4. Форма сбора сведений о научных и технологических достижениях в интересах их внедрения в образцы ВВСТ

[Form for collecting information on scientific and technological achievements in the interests of their introduction into weapons, military and special equipment]

гипотез, принципов, идей и концепций в интересах создания перспективных и модернизации существующих образцов ВВСТ, а также технологическая модернизация и инновационное развитие предприятий ОПК.

В качестве основной формы реализации научных и технологических достижений в предлагаемом подходе рассматривается инновационный проект. Отбор проектов для апробации осуществляется на основании результатов анализа актуальности, новизны, военно-технической эффективности реализации предлагаемых инновационных разработок в образцах (составных частях, элементах, узлах) ВВСТ и экспертизы значимости, реализуемости и экономической эффективности реализации предложений (инновационных проектов) (рис. 3).

Предлагаемый подход предусматривает следующие основные этапы процедуры отбора и реализации проектов:

► определение (уточнение) перспективных направлений реализации инновационных разработок в военной области;

► формирование и сбор заявок на осуществление проектов;

► проведение анализа уровня актуальности, новизны, военно-технической эффективности предлагаемых проектов;

► экспертная оценка уровня экономической эффективности и реализуемо-

ФОРМА СБОРА СВЕДЕНИЙ

1. Наименование достижения

2. Цель исследований

3. Область применения

Образцы ВВСТ и элементы конструкций, в которых может быть внедрено достижение

4. Актуальность предлагаемых исследований

В сравнении с существующими аналогами

5. Ожидаемые результаты

6. Прогнозируемый уровень вклада в повышение боевых возможностей, тактико-технических и экономических характеристик ВВСТ

Краткое описание достижения с указанием качественных и количественных характеристик (функциональных, экономических, эксплуатационных, надежностных, массогабаритных и т.д.) достижения в сравнении с существующими. Допускается использование фотоматериалов, схем и пр.

7. Уровень готовности достижения к апробации Готово, требует времени на доработку

8. Организации, привлекаемые к проведению апробации достижения

9. Место проведения эксперимента

10. Требуемые объемы финансирования на проведение апробации достижения (млн руб.)

11. Краткий замысел проведения апробации достижения

сти, выявление проектов, апробация которых наиболее целесообразна;

► формирование плана апробации предлагаемых проектов;

► реализация и управление проектами по их апробации в составе образцов (составных частей, узлов, элементов) ВВСТ.

Военно-техническая оценка научных и технологических достижений

читывая, что возможности Минобороны России оценить практическую реализуемость заявленных характеристик в образцах (составных частях, узлах, элементах) ВВСТ ограничены по финансовым и временным причинам, особую актуальность приобретает разработка научно-методических подходов к выявлению наиболее значимых (с точки зрения возможности использования в образцах вооружения) научных и технологических достижений. Рассмотрим один из возможных подходов к военно-технической оценке научных и технологических достижений [6], предусматривающий комбинированное применение методики оценки компетентности экспертов [9], метода анализа иерархий Т. Саати [10, 11] и метода многокритериального потокового ранжирования [12].

В качестве исходных данных для определения наиболее значимых инновационных разработок, имеющих перспективу военного применения, использовались сведения, предоставленные организациями РАН, высшей школы и предприятиями промышленности. Для сбора сведений была разработана соответствующая унифицированная форма (рис. 4), обеспечивающая единство представления информации о достижениях и повышение эффективности информационного обеспечения ученых и специалистов НИО Минобороны России и других организаций, осуществляющих экспертизу и оценку целесообразности использования данных разработок в образцах ВВСТ.

Набор показателей для проведения военно-технической оценки научных и технологических достижений (ин-

Таблица 1 Вербально-числовая шкала оценки уровня новизны инновационных разработок [Verbal-numerical scale for assessing innovative developments' novelty level]

Описание уровня новизны [Description of the novelty level] Числовое значение [Numerical value]

Обобщена известная научная информация или описаны отдельные элементарные факты (объекты, свойства, отношения), данные опытов, результаты наблюдений или измерений (научная новизна отсутствует) 0

Проведен анализ связей и взаимозависимостей между фактами. Дана классификация фактов. Выдвинуты предложения частного характера, не дающие преимуществ по сравнению с существующими методами, способами, устройствами, веществами 2

Впервые раскрыта связь между известными фактами или известные положения распространены на новые объекты, в результате чего найдены более эффективные решения. Выдвинуты предложения по частичным прогрессивным изменениям существующих методов, способов, устройств, веществ 4

Проведен глубокий анализ многоаспектных связей и взаимозависимостей с их объяснением и научной систематизацией. Значительно расширена область научного знания, введены новые понятия, по-новому или впервые объяснены известные факты и, на этой основе, получены новые зависимости, раскрыта структура содержания. Произведено коренное усовершенствование существующих методов, способов, устройств, веществ 8

Сделано открытие, получена принципиально новая научная информация, открыты принципиально новые факты, законы и (или) закономерности, разработана новая теория. Созданы принципиально новые методы, способы, устройства, вещества 16

новационных разработок) был сформирован на основе анализа научно-технической литературы, посвященной вопросам создания и реализации технологий и инноваций, в том числе в военной сфере [2, 4, 13]. Сформированный набор показателей включает в свой состав такие частные показатели, как уровень новизны инновационных разработок, уровень их готовности, уровень реализуемости инновационных разработок, их военно-техническая эффективность, а также стоимость. Данная система показателей, по мнению авторов, является непротиворечивой и достаточной для решения поставленной задачи. Вербально-числовые шкалы для проведения оценки по данным показателям представлены в табл. 1-4.

При решении задачи военно-технической оценки научных и технологических достижений учитывается неравнозначность приведенных выше показателей оценки [11]. Информацию об относительной важности частных показателей оценки предоставляют эксперты. Коэффициенты относительной важности рассматриваемых показателей определяются с использованием метода собственных значений Т. Саати [9-11]. При этом выбор и определение компетентности экспертов для решения рассматриваемой задачи осуществляется с использованием методики, основывающейся на комби-

нации эвристического и статистического методов оценки компетентности с учетом информации о научном потенциале экспертов, полученной документальным способом [14].

В основу военно-технической оценки научных и технологических достижений положен метод многокритериального потокового ранжирования, алгоритм которого в обобщенном виде может быть представлен следующими шагами:

Таблица 2

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

Вербально-числовая шкала оценки уровня готовности инновационных разработок [Verbal-numerical scale for assessing innovative developments' readiness level]

Описание уровня готовности [Description of the readiness level] Числовое значение [Numerical value]

Выявлены и изложены основные принципы разработки технологии 1

Сформулированы концепция технологии и область ее применения 2

Определены аналитические и экспериментальные критические функции (свойства) или/и характеристики технологии 3

Проверена работоспособность технологии подсистемы на математической модели или в лабораторных условиях 4

Проверена работоспособность технологии в прототипе подсистемы в лабораторных условиях 5

Проведены испытания технологии в экспериментальном образце подсистемы в лабораторных условиях 6

Проведены испытания технологии в экспериментальном образце подсистемы на испытательной базе ОПК 7

Определен окончательный облик подсистемы, в которой применяется новая технология, проведены полигонные испытания 8

Подтверждение эффективности действующей подсистемы, в которой применяется новая технология, во время решения боевых задач 9

Таблица 3

Вербально-числовая шкала оценки уровня реализуемости инновационных разработок [Verbal-numerical scale for assessing the innovative developments' feasibility level]

Описание уровня реализуемости [Description of the feasibility level] Числовое значение [Numerical value]

Определены теоретические принципы производства технологии 1

Разработана концепция производства технологии 2

Проведены расчеты работоспособности концепции производства технологии 3

Технология производства апробирована в лабораторных условиях 4

Подтверждена возможность создавать отдельные компоненты технологии на экспериментальном производстве 5

Подтверждена возможность создавать технологию на экспериментальном производстве 6

Подтверждена возможность серийного производства технологии на предприятиях промышленности 7

Испытания экспериментальной производственной линии, начало опытного тестового производства с низкой скоростью 8

Экспериментальная линия с низкой скоростью показала возможность перехода к полноценному серийному производству технологии 9

Освоен полный цикл серийного производства технологии 10

Таблица 4

Вербально-числовая шкала оценки военно-технической эффективности инновационных разработок [Verbal-numerical scale for assessing innovative developments' military-technical efficiency]

Описание уровня военно-технической эффективности [Description of the military-technical efficiency level] Числовое значение [Numerical value]

ТТХ образцов ВВСТ повышаются незначительно 1

ТТХ образцов ВВСТ повышаются существенно 2

ТТХ образцов ВВСТ повышаются весьма существенно 3

ТТХ образцов ВВСТ повышаются в несколько раз 4

ТТХ образцов ВВСТ повышаются на порядок 5

► Шаг 1. Выбор типа функций предпочтения и задание их параметров по каждому из критериев.

► Шаг 2. Определение матриц парных сравнений разработок по каждому из критериев.

► Шаг 3. Расчет матрицы индексов многокритериального предпочтения на множестве разработок и построение взвешенного графа предпочтений.

Каждый элемент матрицы индексов многокритериального предпочтения определяется по формуле:

т _

р(а:, а]) = £ тЛ (а:, аз X ь} =1, п (1) к=1

где Р^(а:, а) — элемент матрицы парных сравнений разработок по ¿-му показателю;

— коэффициент относительной важности ¿-го показателя.

Индекс многокритериального предпочтения характеризует интенсивность предпочтения разработки а: по отношению к разработке а. одновременно по всем критериям. Этот индекс представляет собой положительное число в интервале от 0 до 1. При этом чем ближе величина индекса предпочтения к 1, тем разработка ai считается более предпочтительной, чем разработка а.

Используя матрицу индексов многокритериального предпочтения, можно построить граф предпочтений, вершинам которого соответствуют рассматриваемые разработки.

► Шаг 4. Расчет исходящих потоков. Для каждой вершины графа предпочтений рассчитывается величина

п

Ф+ (а,) = £ Р(а^, а.), г = 1, п, (2)

называемая исходящим потоком. Эта величина является мерой превосходства разработки а:1 над всеми остальными. Величина исходящего потока — это сумма всех весов, стоящих на исходящих из вершины ai дугах (рис. 5а).

► Шаг 5. Расчет входящих потоков. Величины входящих потоков определяются также для каждой вершины графа предпочтений (рис. 5б)

п

Ф-(а{) = £ Р(аз, а{), г = 1, п. (3)

3=1,з *:

Эта величина является мерой того, насколько разработка а{ уступает всем остальным оцениваемым разработкам по всей совокупности показателей.

► Шаг 6. Расчет суммарных потоков. Для каждой вершины графа предпочтений, а следовательно, и для каждой оцениваемой разработки рассчитывается величина

Ф(а) = Ф+ (а,)-Ф-(а,), г' = 1П. (4)

► Шаг 7. Формирование результирующего упорядочения разработок.

В методе многокритериального потокового ранжирования для установ-

Рис. 5. Потоки для a: а) исходящие, б) входящие [Streams for a(: a) outgoing, b) incoming]

ления результирующего упорядочения альтернатив по совокупности показателей используется следующее правило:

► apPaj (разработка ai предпочтительнее разработки а), если Ф(а) > Ф(а)

► allaj (разработка а{ неразличима с разработкой а), если Ф(а) = Ф(а).

Это правило является основным для решения задачи выявления наиболее значимых научных и технологических достижений в интересах их использования при создании перспективных образцов ВВСТ, в том числе нетрадиционных.

Однако в ряде случаев для более детального обоснования и интерпре-

тации полученных результатов, а также дополнительных аналитических исследований предлагается разновидность метода многокритериального потокового ранжирования. В этой разновидности метода (обозначим его МПР-И) в исследовательских целях может быть получено частичное упорядочение наиболее значимых научных и технологических достижений с использованием положительных и отрицательных потоков по следующему правилу:

[Ф+а) >Ф+(а) и ф- а) <Ф- а)

ара, если <!

[Ф+а) >Ф+а) и Ф- а)=Ф-(аг)

' а^, если Ф+ (а^ ) = ф+ (а1) и Ф-(а^ ) = ф-(а1) , (5)

а^Яа1 в ином случае

где Р, I и R — отношения предпочтения, неразличимости и несравнимости соответственно.

Апробация предлагаемого подхода и подтверждение его работоспособности проводились на основе исходных данных, полученных по результатам мониторинга достижений организаций РАН, высшей школы и предприятий ОПК. В ходе проведения анкетирования были собраны сведения о более чем 100 разработках, имеющих, по мнению заявителей, потенциальные перспективы для использования в оборонной сфере. К проведению экспертизы привлекались ученые и специалисты НИО Минобороны России, РАН, других государственных и общественных академий наук, высшей школы, представители организаций и предприятий ОПК в соответствии со сферами их деятельности. Квалификация привлекаемых специалистов определялась с помощью методики оценки компетентности экспертов [14]. В соответствии с изложенной выше процедурой, основанной на применении метода анализа иерархий Т. Саати, были определены весовые коэффициенты показателей военно-технической оценки научных и технологических достижений (табл. 5).

Таблица 5

Весовые коэффициенты показателей военно-технической оценки научных и технологических достижений организаций РАН, высшей школы и предприятий ОПК [Weight coefficients of indicators of militarytechnical assessment of scientific and technological achievements of organizations of RAS, higher education and defense industry enterprises]

Наименование показателя [Indicator name] Весовой коэффициент [Weight coefficient]

Уровень новизны инновационных разработок 0,2

Уровень готовности инновационных разработок 0,3

Уровень реализуемости инновационных разработок 0,1

Военно-техническая эффективность инновационных разработок 0,3

Стоимость инновационных разработок 0,1

С использованием полученных значений весовых коэффициентов показателей на основе приведенного алгоритма многокритериального потокового ранжирования была проведена военно-техническая оценка научных и технологических достижений организаций РАН, высшей школы и предприятий ОПК. Отбор наиболее значимых технологических разработок производился в соответствии со следующим правилом (6), где Фнорм(а;) — итоговые оценки инновационных разработок, имеющих перспективу использования в оборонной сфере, Фнорм(а.) е [0,1].

Статья поступила в редакцию 24.03.2021

. (6)

разработка относится к категории перспективных, если Фнорм(а;) > 0,7

для отнесния разработки а1 к определенной категории требуются дополнительные исследования, если 0,3 < Фнорм(а;) < 0,7

разработка не относится к категории перспективных, если Фнорм(а;) < 0,3

Данный подход позволяет из мно-

Список литературы

1. Научное обеспечение реализации приоритетов научно-технологического развития Российской Федерации: научная сессия Общего собрания членов РАН, 13-14.11.2018 / под общ. ред. В.Г. Бондура и А.А. Макоско. — Т. 1. — М.: Российская академия наук, 2019.

2. Буренок В.М. Технологические и технические основы развития вооружения и военной техники. — М.: Граница, 2010.

3. Бочаров Л.Ю., Корчак В.Ю., Тужиков Е.З., Реулов Р.В., Волковский Н.Л. DARPA и наука Третьего рейха: оборонные исследования США и Германии / под общ. ред. А.Е. Суворова. — М.: Техносфера, 2015.

4. Буренок В.М., Ивлев А.А., Корчак В.Ю. Развитие военных технологий XXI века: проблемы, планирование, реализация. — Тверь: Купол, 2009.

5. Корчак В.Ю., Кравченко А.Ю., Смирнов С.С., Реулов Р.В. Программно-целевое планирование развития базовых военных технологий на современном этапе // Вооружение и экономика. — 2017. — № 4(41).

6. Корчак В.Ю., Реулов Р.В., Стукалин С.В., Григорьева С.А. Научно-методические основы военно-технической оценки научных и технологических достижений организаций Российской академии наук, высшей школы и предприятий промышленности // Вестник Академии военных наук. — 2016. — № 2(55).

7. Борисенков И.Л., Корчак В.Ю., Котелюк Л.А., Помазан Ю.В., Тужиков Е.З. Оборонный научный задел: этапы развития, проблемы планирования

и организации исследований / под общ. ред. В.Ю. Корчака. — Тверь: Центрпрограммсистем, 2019.

8. На переднем крае оборонной фундаментальной науки. Организация оборонных фундаментальных исследований: история и элементы методологии / коллектив авторов / под общ. ред. В.Ю. Корчака. — М.: Экслибрис-Пресс, 2014.

9. Дэвид Г. Метод парных сравнений. — М.: Статистика, 1978.

10. Евланов Л.Г. Теория и практика принятия решений. — М.: Экономика, 1984.

11. Литвак Б.Г. Экспертные оценки и принятие решений. — М.: Патент, 1996.

12. Емельянов С.В., Ларичев О.И. Многокритериальные методы принятия решений. — М.: Знание, 1985.

13. Зуев Ю.Ю. Основы создания конкурентоспособной техники и выработки эффективных решений. — М.: Издательский дом МЭИ, 2006.

14. Лясковский В.Л., Смирнов С.С., Пронин А.Ю. Методика оценки компетентности экспертов в процессе формирования предложений в проекты программных документов // Вооружение и экономика. — 2013. — № 3(24).

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

жества результатов научных исследований и технологических разработок выбрать с использованием предложенного набора показателей те достижения, которые обладают наибольшим потенциалом для использования при создании перспективных, в том числе нетрадиционных, образцов ВВСТ, а также для парирования информационных, психологических, кибернетических и других угроз безопасности РФ. Была проведена апробация предложенного подхода, подтвердившая его работоспособность и адекватность используемых для оценки показателей.

Применение разработанного подхода обеспечит, по мнению авторов, возможность значительной экономии финансовых и временных ресурсов на проведение практической апробации (демонстрационных испытаний) достижений, предлагаемых академическим и вузовским сектором науки, а также промышленностью, в перспективных, в том числе нетрадиционных, образцах ВВСТ. Предложенный научно-методический подход является универсальным и может быть использован для оценки научных и технологических достижений в интересах создания перспективных технических систем гражданского назначения. ■

Kompetentnost / Competency (Russia) 5/2021 IMMn\/ATIOM 4 E

ISSN 1993-8780. DOI: 10.24412/1993-8780-2021-5-06-15 INNUVMIIUN 15

Monitoring and Evaluation of Scientific and Technological Achievements

V.Yu. Korchak1, Innovative Technology Center of the Scientific Policy Complex of N.E. Bauman Moscow State Technical University, Prof. Dr., Full Member of Russian Academy of Rocket and Artillery Sciences (RARAS), korchak.v@mail.ru R.V. Reulov2, FSBI 46 Central Research Institute (FSBI 46 CRI) of the RF Defense Ministry, Assoc. Prof. Dr. S.V. Stukalin3, FSBI 46 CRI of the RF Defense Ministry, Assoc. Prof. Dr.

1 Lead Analyst, Moscow, Russia

2 Head of Center, Moscow, Russia

3 Head of Department, Moscow, Russia

Citation: Korchak V.Yu., Reulov R.V., Stukalin S.V. Monitoring and Evaluation of Scientific and Technological Achievements, Kompetentnost'/ Competency (Russia), 2021, no. 5, pp. 6-15. DOI: 10.24412/1993-8780-2021-5-06-15

key words

science, technology, hypotheses, concepts, innovative developments, expert evaluation, verbal-numerical scale

References

1. Nauchnoe obespechenie realizatsii prioritetov nauchno-tekhnologicheskogo razvitiya Rossiyskoy Federatsii: nauchnaya sessiya Obshchego sobraniya chlenov RAN [Scientific support for the implementation of the priorities of scientific and technological development of the Russian Federation: scientific session of the General meeting of the RAS members], 13-14.11.2018, ed. by V.G. Bondura and A.A. Makosko, Moscow, Russian Academy of Sciences, 2019, Vol. 1.

2. Burenok V.M. Tekhnologicheskie i tekhnicheskie osnovy razvitiya vooruzheniya i voennoy tekhniki [Technological and technical foundations for the development of weapons and military equipment], Moscow, Border, 2010.

3. Bocharov L.Yu., Korchak V.Yu., Tuzhikov E.Z., Reulov R.V., Volkovskiy N.L. DARPA i nauka Tret'ego reykha: oboronnye issledovaniya SShA i Germanii [DARPA and Science of the Third Reich: Defense Research of the USA and Germany], ed. by A.E. Suvorov, Moscow, Technosphere, 2015.

4. Burenok V.M., Ivlev A.A., Korchak V.Yu. Razvitie voennykh tekhnologiy XXI veka: problemy, planirovanie, realizatsiya [Development of military technologies of the XXI century: problems, planning, implementation], Tver", Dome, 2009.

5. Korchak V.Yu., Kravchenko A.Yu., Smirnov S.S., Reulov R.V. Programmno-tselevoe planirovanie razvitiya bazovykh voennykh tekhnologiy na sovremennom etape [Program-targeted planning of the development of basic military technologies at the present stage], Armament and Economics, 2017, no. 4(41).

6. Korchak V.Yu., Reulov R.V., Stukalin S.V., Grigor'eva S.A. Nauchno-metodicheskie osnovy voenno-tekhnicheskoy otsenki nauchnykh i tekhnologicheskikh dostizheniy organizatsiy Rossiyskoy akademii nauk, vysshey shkoly i predpriyatiy promyshlennosti [Scientific and methodological foundations of military-technical assessment of scientific and technological achievements of organizations of the Russian Academy of

We have examined the role of monitoring scientific and technological achievements in the innovative development of the country's economy, and also have described the stages of development of the organizational framework for monitoring and evaluating the achievements of domestic science. In the article we have proposed a scientific and methodological approach to the military-technical assessment of the academic and university sectors of science achievements, as well as industry, providing for the combined use of the expert competence assessment methodology, the T. Saaty hierarchy analysis method and the multicriteria stream ranking method. We believe that this approach makes it possible to select achievements from the set of results of scientific research and technological developments using the proposed set of indicators. Achievements, that have the greatest potential for use in the creation of promising, including non-traditional, types of weapons, military and special equipment, as well as for countering information, psychological, cybernetic and other threats to the security of the Russian Federation. We have tested the proposed approach, which confirmed its efficiency and the adequacy of the indicators used for the assessment.

Sciences, higher education and industrial enterprises], Bulletin of the Academy of Military Sciences, 2016, no. 2(55).

7. Borisenkov I.L., Korchak V.Yu., Kotelyuk L.A., Pomazan Yu.V., Tuzhikov E.Z. Oboronnyy nauchnyy zadel: etapy razvitiya, problemy planirovaniya i organizatsii issledovaniy [Defense scientific reserve: stages of development, problems of planning and organization

of research], ed. by V.Yu. Korchak, Tver", Research Institute Centerprogramsystem, 2019.

8. Na perednem krae oboronnoy fundamental'noy nauki. Organizatsiya oboronnykh fundamental'nykh issledovaniy: istoriya i elementy metodologii [At the forefront of the defense of fundamental science. Organization of defense basic research: history and elements of methodology], ed. by V.Yu. Korchak, Moscow, Exlibris-Press, 2014.

9. David G. Metod parnykh sravneniy [Method of paired comparisons], Moscow, Statistics, 1978.

10. Evlanov L.G. Teoriya i praktika prinyatiya resheniy [Theory and practice of decision making], Moscow, Economics, 1984.

11. Litvak B.G. Ekspertnye otsenki i prinyatie resheniy [Expert judgment and decision making], Moscow, Patent, 1996.

12. Emel'yanov S.V., Larichev O.I. Mnogokriterial'nye metody prinyatiya resheniy [Multi-criteria decision-making methods], Moscow, Knowledge, 1985.

13. Zuev Yu.Yu. Osnovy sozdaniya konkurentosposobnoy tekhniki i vyrabotki effektivnykh resheniy [The basics of creating competitive technology and developing effective solutions], Moscow, Publishing House MEI, 2006.

14. Lyaskovskiy V.L., Smirnov S.S., Pronin A.Yu. Metodika otsenki kompetentnosti ekspertov v protsesse formirovaniya predlozheniy v proekty programmnykh dokumentov [Methodology for assessing the competence of experts in the process of forming proposals for projects of program documents], Armament and Economics, 2013, no. 3(24).

i Надоели баннеры? Вы всегда можете отключить рекламу.