УДК 681.142 DOI 10.18522/2311-3103-2022-6-84-94
А.А. Белевцев, А.М. Белевцев, В.А. Балыбердин
МЕТОДИКА АНАЛИЗА И ОЦЕНКИ ПРИОРИТЕТОВ ТЕХНОЛОГИЧЕСКИХ ТРЕНДОВ И ТЕХНОЛОГИЙ
На основании анализа глобальных тенденций научно-технологического развития определены требования к методам стратегического анализа, прогноза развития технологических трендов и технологий. Показано, что эффективное решение этой задачи должно носить комплексный характер и обеспечивать информационную, логическую и методическую взаимосвязь следующих основных этапов: мониторинг, выявление и формирование технологических трендов, их структуризацию и оценку приоритетов технологических трендов и технологий. Основная сложность решения задачи оценки приоритетов обусловлена проблемой получения количественных оценок, взаимозависимостью критериев и наличием обратных связей в анализируемых структурах технологических трендов. Предложен общий подход решения поставленной задачи. Разработана логически взаимосвязанная процедура оценки приоритетов на основе метода анализа иерархий (МАИ) и метода аналитических сетей (МАС). Для ее практической реализации разработана формальная схема перехода от технологического тренда некоторой предметной области к трансформированному динамическому графу технологий, содержащих как действительную, так и виртуальную составляющую. Дано уравнение логического вывода. Рассмотрена методика формирования критериев для решения поставленной задачи. Дано поэтапное описание методики оценки приоритетов технологических трендов. Особое внимание уделено решению проблемы связности критериев и технологий в технологических трендах. Предложено и алгоритмически рассмотрено применение методов анализа иерархий и методов аналитических систем для решения задачи оценки в этих случаях. Практическая реализация предлагаемой методики детально описана на методическом примере, отражающем основные проблемы количественной оценки приоритетов технологических трендов: связность критериев и технологий. Разработанная методика применяется в настоящее время для стратегического анализа и оценки направлений инновационного развития высокотехнологичных предприятий, построения дорожных карт, прогнозов научно-технологического развития в различных предметных областях.
Технология; технологические тренды; приоритеты; функциональное назначение; дорожная карта.
A.A. Belevtsev, A.M. Belevtsev, V.A. Balyberdin
ON TECHNOLOGY TRENDS AND TECHNOLOGY PRIORITIES ENTIMATION METHODS RESEARCH
On the base of global technological tendencies analysis the needs for strategic analysis methods and technological trends are defined. It is pointed out that the effective task decision must be complex and must support information, logical and methodical interconnection for the following stages: the monitoring, the technological trends forming and structuring and the technological and technologies priorities estimation. The main complexity in the priorities estimation is in getting quantity estimates, criterion interaction and opposite connections in technological trends analyses. The general approach to solve the problem is suggested. The logical interconnected procedure for priorities estimation is proposed based on the analytic hierarchy process (AHP) and the analytic nets method (ANM). The formal scheme to transfer from a technological trend of a subject sphere for transformed dynamic technology graph is designed. The technologies join the real as well as the virtual parts. The procedure for criteria forming is discussed. The detailed description for trends priorities estimation is presented. The main attention is made to criteria and technologies interconnection problem. The AHP and ANM using to decide estimation problems is discussed. The suggested procedure practical realization is described be means of an example. The example reflects the main problems of quantity estimation for technological trends priorities
such as criteria and technologies interconnection. The procedure constructed now is used for the strategic analysis and estimation for innovation development of high technologies enterprises, road cards making and technological forecasting in various spheres.
Technology; technology trend; priority; functional purpose; Road map.
Введение. Переход к 6 технологическому укладу и индустриальная революция 4.0, резкое обострение конкурентной борьбы задают чрезвычайно высокую динамику формирования новых направлений и траекторий технологического развития. Все это выдвигает новые требования и стимулирует развитие новых подходов и методов к решению задач мониторинга стратегического анализа, прогноза и оценки приоритетов развития технологических трендов и технологий.
Они должны обеспечить:
♦ мониторинг и выявление формирующихся технологических трендов и технологических фронтов на основе специальных методов, методов с применением искусственного интеллекта и информационно-аналитических комплексов [3-8].
♦ структуризацию технологий технологического тренда и связность трендов, их функциональных назначений и областей применения [9-17].
♦ оценку приоритетов технологических трендов и технологий [18-20].
В этой связи основными требованиями к методике анализа и оценки приоритетов должны стать:
♦ повышение достоверности полученных оценок в условиях нечеткости, неполноты и качественного характера исходной информации;
♦ учет взаимной зависимости критериев и наличие обратных связей в анализируемых структурах технологических трендов;
♦ получение более корректных оценок согласованности рассматриваемых элементарных оценок, что позволит повысить достоверность интегральных оценок прогноза приоритетов технологических трендов.
Для решения задач, связанных с получением количественных оценок в условиях неопределённости исходной информации и многокритериальности задач оценки, в последние годы получили распространение так называемый метод анализа иерархий (МАИ) и метод аналитических систем (МАС), предложенные Т. Саати [3, 4].
Рассмотрим возможные пути и особенности применения указанного метода к решению задач рассматриваемого типа. В работах [1, 2] было дано обоснование расчетных методов и алгоритмов решения задачи многокритериальной оценки приоритетов технологических трендов и технологий, которые могут быть положены в основу предполагаемой методики.
Общий подход. В общем случае возможны два варианта решения этой задачи [4]:
1. Построение иерархической организации системы критериев и альтернатив с использованием расчетной схемы метода анализа иерархий.
2. Рассмотрение общей схемы взаимосвязей между критериями, обратных связей между альтернативами и критериями, а так же взаимосвязей между альтернативами с использованием расчетных схем метода аналитических сетей.
Формализованная схема решения задачи. Рассмотрим основные этапы предлагаемой методики. Пусть задана предметная область Рт. Проведен глобальный мониторинг, сформированы технологические тренды (технологические направления) С„т по функциональному признаку и технологии с", входящие в состав каждого тренда. Здесь индекс n=l,N соответствует номеру технологического тренда, индекс i=l, I - номеру технологии в рамках соответствующего тренда.
Для каждой с? определены функциональные назначения Ф н 51 и области применения О ?. Построен динамический граф технологий технологического тренда Сдт и его трансформация в расширенный граф (С„т) Т на основе соотношений логического вывода [7]:
Сир™ - С?. - Ф н?- ^ R (Оу и Оу) и V ( 0"г и О*.) ^ ( Спр") т (1)
♦ ( С^ ") Т есть трансформированный динамический граф с вершинами Су 6 С^"1 и вершинами с?г - виртуальных технологий, сконструированных на основе Фну
♦ R - действительная составляющая предметной области Рт
♦ V - виртуальная составляющая предметной области Рт
♦ индекс с соответствует виртуальной технологии, индексы j и г определяют номера уровней соответствующего графа;
Тогда общая процедура может быть представлена в виде следующей последовательности действий.
1. Проводится разработка комплексного критерия для оценки технологических трендов С„т по их относительной важности для выбранной предметной области.
2. Осуществляется разработка системы частных критериев для сравнительной оценки приоритетов отдельных технологий для каждого тренда
3. Строятся интегральные оценки рассматриваемых технологий, как элементов "строительного материала" для решения поставленной задачи (в рамках предметной области в целом).
Критерии решения задачи. Для решения задачи необходима разработка двух групп критериев оценки приоритетов [6, 7].
В первую группу К ( С?"1) , где п= 1 , N - номера технологических трендов, входит иерархическая система критериев для построения оценок на уровне технологических трендов.
Во вторую группу К (су), где i= 1 ,1 — совокупность технологий С„т, вход ит
^ п /-»рт
система критериев на уровне отдельных технологий тренда .
Методические рекомендации по оформлению первой группы критериев рассмотрены в работе [1].
Для оценки технологических направлений и технических систем (ТС) нового поколения целесообразно вводить следующие характеристики критериев [8, 17]:
♦ функциональные (тактические);
♦ технические;
♦ технико-экономические.
Тактические характеристики определяют возможности целевого применения и области применения.
Технические характеристики определяют технические (технологические) средства, необходимые для обеспечения тактических параметров.
К технико-экономическим характеристикам следует отнести:
♦ масса-габаритные характеристики;
♦ характеристики энергопотребления;
♦ надежность;
♦ стоимость.
Последовательность этапов решения задачи. Структурная схема разработанной методики оценки приоритетов технологических трендов представлена на рис. 1.
_Формирование предметной области Рт из группы р = { Рт ) , т = 1 , М_
Этап 1_
Проведение глобального мониторинга, кластеризация и динамическое формирование технологических трендов , п = 1 , N_
Структуризация технологических трендов и построение динамического графа технологий т на основе действительной части R._
Этап 2 ^Ц7
Трансформация графа ^ ( Т на основе виртуального конструирования новых технологий и областей применения
к —-
Этап 3
Выбор и обоснование иерархической системы критериев К (Су") для оценки приоритетов технологических трендов Ср т
Этап 4
Оценка приоритетов для каждого элемента иерархической системы критери-
рт>
ев К(0
Этап 5
Оценка связности критериев К ( С?т) на основе МАИ и МАС
5.1 Ой
Интегральная оценка приоритетов технологий с^ для решения поставленной задачи для предметной области Р™_
Рис. 1. Схематическая процедура оценки приоритетов технологий и технологических трендов
Рассмотрим основные этапы предлагаемой методики (рис. 1).
Этап 1 соответствует проведению глобального мониторинга, кластеризации и формированию для предметной области Рт совокупности технологических трендов С£т={с"}, I = 1 , N. Здесь осуществляется структуризация технологических трендов и построение динамического графа технологий .
Этап 2. Проводится трансформация графа ^ (<С?т) Т на основе виртуального конструирования новых технологий и областей применения.
Этап 3. На основе анализа предметной области осуществляется формирование совокупности критериев оценки эффективности решения задачи.
Этап 4. Строится оценка приоритетов для каждого элемента в иерархической системе критериев. Оценка связанности выбранных критериев определяется методом проведения оценок эффективности на основе метода анализа иерархий (МАИ) или метода аналитических сетей (МАС)
Этап 5.
5.1. Оценка приоритетов технологических трендов С?т на основе МАИ (рис. 2).
5.2. Оценка приоритетов технологических трендов С?т на основе МАС (рис. 3).
Рис. 2. Оценка приоритетов на основе МАИ
Рис. 3. Оценка приоритетов на основе МАС
Этап 6. Выбор и обоснование системы критериев для оценки приори-
П V
тетов технологий
1 у
Этап 7. Интегральная оценка приоритетов технологий для решения
поставленной задачи для предметной области
Последовательность построения графа
Начиная от корневой вершины, упорядочиваем по уровням на основе процедуры, рассмотренной выше.
В общем случае граф будет иметь иерархическую сетевую структуру относительно корневой вершины Рт. Отдельные узлы графа могут быть связаны с другими узлами, не принадлежащими графу .
Узлы графа С „ т для которых существуют технологии нижнего уровня иерархии будем называть структурно-функциональными узлами.
Для всех узлов первого уровня определяем степень влияния технологий с?1 для достижения целей технологического тренда С„т.
Для оценки относительной значимости технологий строится обратносим-метричная матрица парных сравнений по критерию:
♦ какая из попарно-сравниваемых технологий оказывает более сильное влияние на достижение целей работ, проводимых по данному направлению тренда
Формируем вектор приоритетов технологий первого уровня 1 (С „т) .
п
£ 1 ( с,-,) = 1 и Ф н " характеризует функциональную полноту уровня N.
Ч ' ... _
Для каждой технологии первого уровня иерархии , где на графе
С^"1 определяем технологии конечных узлов первого уровня, второго и последующих уровней иерархии, непосредственно с ними связанных.
При этом в соответствии с соотношением логического вывода (1) технологии нижних уровней иерархии могут быть связаны как с узлами более высокого уровня, иерархии графа так и с другими технологиями, входящими в другие тренды.
Для каждого узла строится обратносимметричная матрица по критерию:
♦ какая из попарно-сравниваемых технологий 2-го и других уровней оказывает более сильное влияние на достижение целей технологий более высокого уровня иерархии.
Аналогично получаем оценки всех узлов второго и последующего уровней иерархии графа в порядке убывания.
Обработка снизу вверх полученной информации, представленной в виде соответствующих таблиц оценки технологий (векторов приоритетов) позволяет получить интегральную оценку влияния технологий на цели и функциональные возможности технологического тренда .
В случае, если технологии и имеют одинаковое функциональное назначение Ф?+ с1 = Ф"+ ^ (1) и одну и ту же область применения О ?, то такие технологии будем называть прямыми альтернативами.
При этом в общем случае функциональная полнота каждой может быть различной. То есть состав и Фн?+ сг £ и Ф н?+ технологий и их функциональное назначение для технологии и удут отличаться.
В этом случае при оценке влияния технологий на технологию более высокого уровня для технологий, для которых справедливо соотношение (1), проводится оценка приоритетов этих технологий относительно вершины . После чего технологии с большим приоритетом остаются для дальнейшего анализа.
Рассмотрим пример (рис. 4). Оценка приоритетов технологий принадлежащей области .
Рис. 4. Динамический граф технологических трендов С^
Рассмотрим вариант применения предложенной методики.
Пусть задана предметная область Рт - технологии нового поколения для создания РЛК стратосферных БПЛА.
На 1 этапе в результате выполнения проведенного мониторинга сформированы пять технологических трендов , и определены совокупности технологий .
Су т - технологии создания многофункциональных композиционных нанома-териалов.
- технологии управления теплом.
- технологии создания быстродействующей компонентной базы.
Су т - технологии генерации и хранения энергии.
Су т - технологии интеграции СВЧ электронных компонентов.
В соответствии с соотношением логического вывода (1) проводим структуризацию технологических трендов. Динамический граф С„ т для рассматриваемого варианта представлен на рис. 4.
Далее (этап 3) формируем иерархическую систему критериев К (С^"1) для оценки приоритетов трендов.
Функциональные критерии:
(1) Зона обзора РЛС;
(2) Разрешающая способность РЛС;
(3) Точность измерения координат и параметров объектов;
(4) Помехозащищенность РЛС;
(5) Пропускная способность РЛС.
Технико-экономические критерии:
(1) Массо-габаритные характеристики;
(2) Энергопотребление;
(3) Надёжность;
(4) Стоимость.
Если полагать, что критерии независимы, тогда оценка приоритетов может быть проведена на основе МАИ [3]. Однако в рассматриваемом примере среди критериев задачи имеются определённые взаимозависимости. Так, например, мас-согабаритные характеристики и энергопотребление достаточно тесно связаны. Поэтому данную задачу в общем случае следует рассматривать в сетевом варианте.
Для оценки приоритетов технологий может быть выбран критерий
- какая из сравниваемых технологий наиболее значима для реализации тренда.
В соответствии с выбранным критерием для каждого тренда определяются векторы приоритетов входящих в него технологий.
2. Выбираем следующий тренд в состав которого входят два поднаправления с I и с2 (функциональные узлы) и каждый уровень технологий{с \ г , с 2 2 , с| г, с| 2 ,}. Последовательно определяем вектор приоритетов функциональных узлов, а затем вектор технологий.
3. Для трендов и процедура определения векторов приоритетов од-ношаговая, она изложена в п.1.
4. Для тренда С у т процедура двух шаговая аналогичная п.2.
Итоговая оценка значений приоритетов каждой технологии определяется с учетом приоритета каждого тренда .
Для рассматриваемого случая - РЛК стратосферных беспилотных летательных аппаратов (БПЛА) представлены результаты расчетов приоритетов технологических направлений для случаев наличия (табл. 1) и отсутствия (табл. 2) взаимозависимостей между критериями.
Таблица 1
Приоритетность технологических трендов при отсутствии взаимозависимостей критериев
Схемная интеграция Быстро-действ. комп. база Энергообеспечение Управление теплом Функ. композ. материалы
Функциональные критерии. Оценка 0.30 0.29 0.22 0.14 0.05
Технико-экономические. Оценка 0.42 0.21 0.21 0.09 0.07
Таблица 2 Приоритетность технологических трендов при наличии взаимозависимостей между критериями
Схемная интеграция Быстро-действ. комп. база Энергообеспечение Управление теплом Функ. композ. материалы
Функциональные критерии. Оценка 0.26 0.31 0.26 0.12 0.05
Технико-эканомиче-ские критерии. Оценка 0.43 0.16 0.20 0.09 0.11
Из анализа приведенных в табл. 1 и 2 данных можно заключить, что учет взаимозависимости критериев может заметно повлиять на ранжировку оцениваемых альтернатив. Поэтому предлагаемая методика обеспечивает учет возможной связности критериев.
Заключение. Предложена методика анализа и оценки приоритетов технологических трендов и технологий, обеспечивающая комплексную относительную оценку значимости технологических трендов и для каждого тренда - комплексную оценку значимости входящих в него технологий.
При построении системы критериев методика учитывает наличие возможных взаимосвязей и взаимозависимосвязей между ними.
Имеющийся опыт практического применения рассмотренной методики свидетельствует о том, что ее использование позволяет существенно (на 15-20%) повысить уровень обоснованности решений, принимаемых при анализе многовариантных технических задач и разработке дорожных карт развития науки и технологий в заданных предметных областях.
БИБЛИОГРАФИЧЕСКИЙ СПИСОК
1. Балыбердин В.А., Белевцев А.М., Бендерский Г.П. Прикладные методы оценки и выбора решений в стратегических задачах инновационного менеджмента. - М.: ИТК «Дашков и К», 2014, - 4-е изд. - 340 с.
2. Балыбердин В.А., Дружинин М.А., Панов В.В.Степанов О.А. Актуальные вопросы автоматизации управления войсками и оружием. - М.: ФГБУ «3 ЦНИИ» Минобороны России, 2017. - 144 с.
3. Саати Т.Л. Принятие решений. Метод анализа иерархий. - М.: Радио и связь, 1993.
4. Саати Т.Л. Принятие решений при зависимостях и обратных связях. Аналитические сети. - М.: ЛИБРОКОМ, 2009. - 358 с.
5. Белевцев А.М., Балыбердин В.А., Бендерский Г.П., Белевцев А.А. Анализ направлений развития нано- и IT-технологий для построения специализированных сетевых коммуникационных систем нового поколения // Известия ЮФУ. Технические науки. - 2015.
- № 3 (164). - С. 35-45.
6. Белевцев А.М., Балыбердин В.А., Белевцев А.А., Садреев Ф.Г. О разработке интеллектуальных сервисов мониторинга технологических трендов в информационно-аналитических комплексах // Наукоемкие технологии. - 2019. - № 3.
7. Белевцев А.М., Балыбердин В.А., Белевцев А.А. Методика оценки времени и стоимости реализации технологических трендов в условиях неопределенности и не полноты информации // Наукоемкие технологии. - 2019. - № 5.
8. Белевцев А.М., Балыбердин В.А., Белевцев А.А., Маркелов Е.Б. Некоторые тенденции развития информационных технологий для систем сетецентрического управления // Вооружение и экономика. - 2021.
9. Поляков И.В., Соколова Т.В., Чеповский А.А., Чеповский А.М. Проблема классификации текстов и дифференцирующие признаки // Вестник Новосибирского государственного университета. Серия: Информационные технологии. - 2015. - Т. 13. - Вып. 2. - С. 55-63.
10. Santas O. Systemic foresight methodology / In D. Meissner, L. Gokhberg, & A. Sokolov (Eds.) // Foresight and science, technology and innovation policies: Best practices. - Berlin: Springer, 2013. - P. 83-117.
11. Белевцев А.М., Садреев Ф.Г., Пахомов С.Н. Организация параллельного мониторинга направлений развития науки, техники и технологий в открытых источниках информации // Известия ЮФУ. Технические науки. - 2013. - № 5.
12. Kim Y., Tian Y., Jeong Y., Jihee R., & Myaeng S.-H. Automatic discovery of technology trends from patent text // In Proceedings of the 2009 ACM symposium on applied computing. - 2009.
- P. 1480-1487.
13. Santas O. Systemic foresight methodology / In D. Meissner, L. Gokhberg, & A. Sokolov (Eds.) // Foresight and science, technology and innovation policies: Best practices. - Berlin: Springer, 2013. - P. 83-117.
14. Shibata N., Kajikawa Y., & Sakata I. Detecting potential technological fronts by comparing scientific papers and patents // Foresight. - 2011. - Vol. 13 (5). - P. 51-60.
15. Medhat W., Hassan A., Korashy H. Sentiment analysis algorithms and applications: A survey // Ain Shams Engineering Journ. - 2014. - No. 5. - P. 1093-1113.
16. Fuller C.M., Biros D.P. and Delen D. An investigation of data and text mining methods for real world deception detection // Expert Systems with Applications. - 2011. - No. 38. - P. 8392-8398.
17. Белевцев А.М., Балыбердин В.А., Белевцев А.А. Об оценке направлений развития информационных технологий для систем сетецентрического управления // Сб. докладов: Материалы Всероссийской научно-технической конференции с международным участием «Компьютерные и информационные технологии в науке, инженерии и управлении» Таганрог «КомТех 2017». - 2017. -С. 8-12.
18. Cobo M.J., Lopez-Herrera A.G., Herrera-Viedma E., Herrera F. An approach for detecting, quantifying, and visualizing the evolution of a research field: A practical application to the Fuzzy Sets Theory field // Journal of Informetrics. - 2011. - Vol. 5. - P. 146-166.
19. Gokhberg L., Fursov K., Miles I., Perani G. Developing and using indicators of emerging and enabling technologies // Handbook of Innovation Indicators and Measurement / Ed. F. Gault. - Cheltenham: Edward Elgar, 2013. - P. 349-380.
20. PalominoM.A., Vincenti A., Owen R. Optimising web-based information retrieval methods for horizon scanning // Foresight. - 2013. - Vol. 15, No. 3. - Р. 159-176.
REFERENCES
1. Balyberdin V.A., Belevtsev A.M., Benderskiy G.P. Prikladnye metody otsenki i vybora resheniy v strategicheskikh zadachakh innovatsionnogo menedzhmenta [Applied methods of evaluation and choice of solutions in strategic tasks of innovation management]. M.: ITK «Dashkov i K»,
2014. 4th ed., 340 p.
2. Balyberdin V.A., Druzhinin M.A., Panov V.V. Stepanov O.A. Aktual'nye voprosy avtomatizatsii upravleniya voyskami i oruzhiem [Actual issues of automation of control of troops and weapons]. Moscow: FGBU «3 TSNII» Minoborony Rossii, 2017, 144 p.
3. Saati T.L. Prinyatie resheniy. Metod analiza ierarkhiy [Decision-making. Method of hierarchy analysis]. Moscow: Radio i svyaz', 1993.
4. Saati T.L. Prinyatie resheniy pri zavisimostyakh i obratnykh svyazyakh. Analiticheskie seti [Decision-making with dependencies and feedbacks. Analytical networks]. Moscow: LIBROKOM, 2009, 358 p.
5. Belevtsev A.M., Balyberdin V.A., Benderskiy G.P., Belevtsev A.A. Analiz napravleniy razvitiya nano- i IT-tekhnologiy dlya postroeniya spetsializirovannykh setevykh kommunikatsionnykh sistem novogo pokoleniya [Analysis of the directions of development of nano- and IT-technologies for the construction of specialized network communication systems of a new generation], Izvestiya YuFU. Tekhnicheskie nauki [Izvestiya SFedU. Engineering Sciences],
2015, No. 3 (164), pp. 35-45.
6. Belevtsev A.M., Balyberdin V.A., Belevtsev A.A., Sadreev F.G. O razrabotke intellektual'nykh servisov monitoringa tekhnologicheskikh trendov v informatsionno-analiticheskikh kompleksakh [On the development of intelligent services for monitoring technological trends in information and analytical complexes], Naukoemkie tekhnologii [High-tech technologies], 2019, No. 3.
7. Belevtsev A.M., Balyberdin V.A., Belevtsev A.A. Metodika otsenki vremeni i stoimosti realizatsii tekhnologicheskikh trendov v usloviyakh neopredelennosti i ne polnoty informatsii [Methodology for estimating the time and cost of implementing technological trends in conditions of uncertainty and incomplete information], Naukoemkie tekhnologii [High-tech technologies], 2019, No. 5.
8. Belevtsev A.M., Balyberdin V.A., Belevtsev A.A., Markelov E.B. Nekotorye tendentsii razvitiya informatsionnykh tekhnologiy dlya sistem setetsentricheskogo upravleniya [Some trends in the development of information technologies for network-centric management systems], Vooruzhenie i ekonomika [Armament and economy], 2021.
9. Polyakov I.V., Sokolova T.V., Chepovskiy A.A., Chepovskiy A.M. Problema klassifikatsii tekstov i differentsiruyushchie priznaki [The problem of text classification and differentiating features], Vestnik Novosibirskogo gosudarstvennogo universiteta. Seriya: Informatsionnye tekhnologii [Bulletin of Novosibirsk State University. Series: Information Technology], 2015, Vo. 13, Issue 2, pp. 55-63.
10. Saritas O. Systemic foresight methodology / In D. Meissner, L. Gokhberg, & A. Sokolov (Eds.), Foresight and science, technology and innovation policies: Best practices. Berlin: Springer, 2013, pp. 83-117.
11. Belevtsev A.M., Sadreev F.G., Pakhomov S.N. Organizatsiya parallel'nogo monitoringa napravleniy razvitiya nauki, tekhniki i tekhnologiy v otkrytykh istochnikakh informatsii [Organization of parallel monitoring of directions of development of science, technology and technologies in open sources of information], Izvestiya YuFU. Tekhnicheskie nauki [Izvestiya SFedU. Engineering Sciences], 2013, No. 5.
12. Kim Y., Tian Y., Jeong Y., Jihee R., & Myaeng S.-H. Automatic discovery of technology trends from patent text, In Proceedings of the 2009 ACM symposium on applied computing, 2009, pp. 1480-1487.
13. Santas O. Systemic foresight methodology, In D. Meissner, L. Gokhberg, & A. Sokolov (Eds.), Foresight and science, technology and innovation policies: Best practices. Berlin: Springer, 2013, pp. 83-117.
14. Shibata N., Kajikawa Y., & Sakata I. Detecting potential technological fronts by comparing scientific papers and patents, Foresight, 2011, Vol. 13 (5), pp. 51-60.
15. Medhat W., Hassan A., Korashy H. Sentiment analysis algorithms and applications: A survey, Ain Shams Engineering Journ, 2014, No. 5, pp. 1093-1113.
16. Fuller C.M., Biros D.P. and Delen D. An investigation of data and text mining methods for real world deception detection, Expert Systems with Applications, 2011, No. 38, pp. 8392-8398.
17. Belevtsev A.M., Balyberdin V.A., Belevtsev A.A. Ob otsenke napravleniy razvitiya informatsionnykh tekhnologiy dlya sistem setetsentricheskogo upravleniya [On the assessment of the directions of information technology development for network-centric management systems], Sb. dokladov: Materialy Vserossiyskoy nauchno-tekhnicheskoy konferentsii s mezhdunarodnym uchastiem «Komp'yuternye i informatsionnye tekhnologii v nauke, inzhenerii i upravlenii» Taganrog «KomTekh 2017» [Collection of reports: Materials of the All-Russian Scientific and Technical Conference with international participation "Computer and Information technologies in science, engineering and management" Ta-ganrog "Comtech 2017"], 2017, pp. 8-12.
18. Cobo M.J., Lopez-Herrera A.G., Herrera-Viedma E., Herrera F. An approach for detecting, quantifying, and visualizing the evolution of a research field: A practical application to the Fuzzy Sets Theory field, Journal of Informetrics, 2011, Vol. 5, pp. 146-166.
19. Gokhberg L., Fursov K., Miles I., Perani G. Developing and using indicators of emerging and enabling technologies // Handbook of Innovation Indicators and Measurement, Ed. F. Gault. Cheltenham: Edward Elgar, 2013, pp. 349-380.
20. PalominoM.A., Vincenti A., Owen R. Optimising web-based information retrieval methods for horizon scanning, Foresight, 2013, Vol. 15, No. 3, pp. 159-176.
Статью рекомендовал к опубликованию д.т.н., профессор А.В. Боженюк.
Белевцев Андрей Андреевич - ПАО «Сбербанк»; e-mail: [email protected]; г. Москва, Россия; старший вице-президент.
Белевцев Андрей Михайлович - Московский авиационный институт (национальный исследовательский университет); e-mail: [email protected]; г. Москва, Россия; тел.: +79037691788; д.т.н.; профессор.
Балыбердин Валерий Алексеевич - 3 Центральный научно-исследовательский институт МО РФ; e-mail: [email protected]; г. Москва, Россия; д.т.н., профессор; заслуженный деятель науки РФ; в.н.с.
Belevtsev Andrey Andrevich - PJSC "Sberbank"; e-mail: [email protected]; Moscow, Russia; senior vice president.
Belevtsev Andrey Mikhaylovich - Moscow Aviation Institute (National Research University); e-mail: [email protected]; Moscow, Russia; phone: +79037691788; dr. of eng. sc.; professor.
Balyberdin Valeriy Alexeevich - 3 Central Research Institute of the Ministry of Defense of the Russian Federation; e-mail: [email protected]; Moscow, Russia; dr. of eng. sc.; professor; Honored Scientist of the Russian Federation; leading researcher.