CC BY
36со s
с; <
i с
.о
i ^
ш I-О S
0
Ш S
1 <
m О о. S
с; ш CÍ
О ^
ш
О ^
О ш
Ц-
ш
I-<
Системные исследования научно-технической информации при реализации механизмов инновационного развития
Systems Research of Scientific and Technical Information during the Implementation of Innovative Development Mechanisms
Удк 334.7:002
Кошелева Татьяна Николаевна
профессор Санкт-Петербургского университета технологий управления и экономики, доктор экономических наук, доцент, член-корреспондент МАН ВШ
190103, Санкт-Петербург, Лермонтовский пр., д. 44, лит. А Tat'yana N. Kosheleva
St. Petersburg University of Management Technologies and Economics Lermontovskiy Ave 44/A, St. Petersburg, Russian Federation, 190103
Цыпак Алексей Сергеевич
аспирант Санкт-Петербургского университета технологий управления и экономики
190103, Санкт-Петербург, Лермонтовский пр., д. 44, лит. А
Aleksey S. Tsypak
St. Petersburg University of Management Technologies and Economics Lermontovskiy Ave 44/A, St. Petersburg, Russian Federation, 190103
Настоящее исследование направлено на обоснование структурных закономерностей развития малого предпринимательства в процессе преодоления ограничений. Научно-техническая информация является важным ресурсом, позволяющим на современном уровне решать задачи в области надежности, безопасности, совершенствования техники и технологий, применяемых в производственных процессах. Текущий уровень развития науки, техники и информационных технологий характеризуется значительным и непрерывно увеличивающимся объемом научно-технической информации. В связи с этим количественные параметры потоков научно-технической информации рассматриваются в качестве исходных данных для анализа и оценки тенденций развития исследований и разработок. Современные механизмы работы с научно-технической информацией приобретают все большую актуальность в связи с изменением конъюнктуры международных рынков, реализацией государственной политики импор-тозамещения, активизации внешнеэкономической деятельности компаний. Цель. Обосновать необходимость повышения эффективности обработки и анализа научно-технической информации на основе разработки и внедрения стратегических и тактических тенденций развития предметной
области в рамках заданного горизонта планирования в форме форсайта. Задачи. Раскрыть авторский подход к исследованию тенденций развития науки и техники посредством применения специализированных информационных ресурсов. Методология. В настоящей работе с помощью общих методов научного познания в различных аспектах и методов библиометрического анализа рассмотрены тенденции развития науки и техники посредством применения специализированных информационных ресурсов.
Результаты. Без использования в работе автоматизированных механизмов повышения эффективности обработки и анализа большого количества разнородной и неформализованной научно-технической информации на основе применения инструментов форсайта невозможно управление современными массивами информации.
Выводы. Обоснование необходимости повышения эффективности обработки и анализа научно-технической информации позволило сформировать представление о новых инструментах управления современными массивами информации, предусматривающих применение информационных технологий форсайта как перспективных средств автоматизации сопровождения процессов на различных эта-
пах жизненного цикла работы с научно-технической информацией в рамках реализации корпоративных программ инновационного развития.
Ключевые слова: научно-технической информация (НТИ), анализ, исследования, программа инновационного развития, система, тенденции, форсайт
This study substantiates the structural patterns in the development of small enterprises in the process of overcoming regulatory restrictions. Scientific and technical information is a vital resource that makes it possible to tackle sophisticated problems of reliability, security, and technical and technological improvement in the field of production processes. The current level of scientific, technical, and IT development is characterized by a significant and continuously increasing amount of scientific and technical information. Therefore, quantitative characteristics of scientific and technical information flows are regarded as source data for the analysis and assessment of trends in the improvement of research and development. Current mechanisms for handling scientific and technical information are becoming increasingly relevant in the context of the changing international market conditions, implementation of government import substitution policies, and intensification of foreign economic activity of firms. Aim. This study substantiates the necessity of increasing the efficiency of processing and analysis of scientific and technical information by developing and implementing strategic and tactical trends in the development of the subject domain within the framework of the specified planning horizon in the form of foresight. Tasks. This study describes an original approach to examining the trends in scientific and technical development by using specialized information resources.
Methods. This study uses general methods of scientific cognition in various aspects and bib-liometric analysis methods to examine trends in scientific and technical development through the use of specialized information resources. Results. Managing current arrays of information would be impossible without the use of automated mechanisms for improving the efficiency of processing and analysis of large amounts of heterogeneous and non-formalized scientific and technical information based on the use of foresight tools. Conclusion. Substantiation of the need for improving the efficiency of processing and analysis of scientific and technical information makes it possible to conceptualize new tools for managing current arrays of information. These tools involve the use of information foresight technologies as advanced means of process-tracking automation at various stages of the life cycle of handling scientific and technological information in the context of corporate innovative development program implementation. Keywords: scientific and technical information, analysis, research, innovative development program, system, trends, foresight
Фактором, существенно влияющим на эффективность управления научно-техническим и инновационным развитием, является оценка мировых тенденций и направлений развития в области науки, техники и технологий на основе системного анализа научно-технической информации (НТИ). НТИ является значимым ресурсом, позволяющим на современном уровне решать задачи совершенствования техники и технологий, применяемых в производственных процессах. Таким образом, непрерывное инновационное развитие, планирование исследований, опытных разработок и внедрение современных технических решений неразрывно связаны с анализом значительных объемов разнородной и неформализованной НТИ. Это, в свою очередь, приводит к необходимости повышения эффективности обработки и анализа информации, в том числе за счет применения корпоративных автоматизированных механизмов.
Своевременность и эффективность тактических и стратегических решений в области управления исследованиями, разработками и инновациями позволяет обеспечить система мониторинга, анализа и интерпретации данных о перспективных трендах научно-технического развития, реально и потенциально влияющих на соответствующие фундаментальные и прикладные области [1]. Системный анализ НТИ дает возможность выявлять и анализировать новые направления развития, исследования и их результаты, инновационную инфраструктуру, организации и авторские коллективы, представляющие интерес для установления научных и деловых контактов.
В настоящее время все более актуальным становится определение особенностей текущих изменений в области научных исследований и разработок посредством использования качественных и количественных методов обработки данных с применением информационных систем, ориентированных на анализ значительных объемов НТИ по заданным формализованным критериям. При этом основной акцент делается на создание корпоративных информационных систем для количественного исследования НТИ с целью построения прогнозов и сценариев развития соответствующих областей науки и техники на государственном и корпоративном уровнях [Там же].
Анализ показывает, что главными целями внедрения систем управления информацией для таких компаний, как Ford Motor, Hewlett-Packard, Shell, Schlumberger, Tennessee Valley Authority, «Лукойл», «Транснефть», являются сохранение и практическое использование знаний и передового опыта, повышение скорости получения и качества новых данных, используемых в дальнейшем для разработки перспективных решений и внедрения инноваций [2].
о
™ Следует отметить особое внимание, которое уде-
< ляется развитию системы управления знаниями
< на основе сбора и обработки НТИ в корпора-з ции «Росатом» [3], и идеологию конкурентной I разведки компании Chevron, направленную на
Ш Г Л 1
^ «отслеживание внешних технологий» [4]. g В рамках реализации корпоративных про-ш грамм инновационного развития комплексная I работа с НТИ является перспективной и при-g оритетной при дальнейшем совершенствовании
1 системы научно-технического поиска, монито-5 ринга, прогнозирования и развития новых тех-о нологий и инновационных решений. Указанная ш система включает в себя в том числе проведе-
2 ние научных и аналитических исследований 2 перспективных разработок и анализ эффектив-¡Е ности внедрения инноваций в промышленно | развитых странах мира.
н Динамика развития науки и техники харак-2 теризуется значительным и непрерывно увеличивающимся объемом НТИ, в связи с чем в настоящее время количественные параметры информационных потоков являются основными исходными данными для мониторинга профильных источников и анализа полученной информации. В свою очередь, такой мониторинг позволяет решать следующие задачи: выявление актуальных тенденций в сфере науки, техники и технологий с целью определения направлений и условий их развития, а также прогнозирования связанных с ними рисков; выявление новых результатов исследований и технических решений, инноваций, методов и средств исследований в предметной области с целью оценки целесообразности их применения; выявление организаций, инновационных инфраструктур, авторских коллективов и отдельных авторов, являющихся лидерами в области перспективных исследований и разработок, с целью оценки целесообразности установления и развития контактов, в том числе в рамках внешнеэкономической деятельности.
Одним из современных подходов к прогнозированию развития науки, техники и технологий является форсайт [5-13]. Под форсайтом понимается определение на системном уровне стратегических и тактических тенденций развития предметной области в рамках заданного горизонта планирования. Для получения обоснованных результатов применяются методы теории управления, теории вероятностей, математической статистики, метод Дельфи и др. [14; 15]. В широком смысле форсайт представляет собой набор инструментов, обеспечивающих возможность принятия решений, основанных на объективных фактах, и определения механизмов их реализации для различных сценариев развития предметной области. При этом инструментарий разработки форсайта предусматривает анализ и прогноз воздействия на развитие рассматри-
ваемых объектов именно внешних тенденций. Результаты корпоративных научно-технологических форсайтов (например, компаний Shell, IBM, Microsoft-Fujitsu, «Транснефть» и др. [1]) практически не представлены публично, так как содержат важные стратегические и тактические решения в области развития конкурентных преимуществ компаний и формирования их научно-технического потенциала. Реализация методов форсайта требует применения специализированных средств работы с большими массивами информации как в организационно-аналитическом формате (очном и заочном), так и в автоматизированном, используемом с целью оперативного и эффективного сбора и обработки НТИ, обмена экспертными оценками.
Выполнение системных исследований НТИ обеспечивается комплексом средств и механизмов, позволяющим осуществлять полный цикл работы с информацией: от поиска, анализа и выбора источников до обоснования управленческих решений. Так, для формирования специализированной базы информационных ресурсов по исследованиям тенденций развития науки и техники целесообразно применение методов наукометрии в виде цитатного анализа ссылок в публикациях и количественного анализа структуры элементов, входящих в исследуемые потоки НТИ. На следующей стадии — извлечение профильной НТИ из сформированной информационной базы — требуется выполнение процедур идентификации, предоставления доступа, формализации информации (определения ее содержания, актуальности, цитиру-емости, последующая классификация и т. п.) и адресное направление формализованной НТИ для дальнейшего анализа.
Примерами такого подхода являются системы обеспечения первичной функциональной поддержки проведения анализа НТИ на специализированных интернет-ресурсах (eLibrary.ru, Российский индекс цитирования, Web of Science, Scopus, Google Scholar), а также интеллектуальная система ИСТИНА, представляющая собой инструмент поиска, сбора, систематизации и анализа данных [16; 17].
Ключевые этапы организации работы с НТИ в целях определения тенденций развития науки и техники включают в себя поисковое целеуказание, планирование и постановку задачи — определение предметных областей научно-информационного поиска по ключевым словам, по направлениям и тематикам исследований и разработок, по временному охвату публикаций; выбор источников НТИ для проведения поиска, определение ключевых стран и организаций — источников НТИ и исследуемой тематической области; поиск НТИ посредством доступных информационно-поисковых и метапоисковых систем с использованием набора заранее за-
данных ключевых слов и их устойчивых сочетаний; формирование первичного портфеля публикаций; анализ количественных данных по публикационной активности и статистике цитирования тематической НТИ; выявление публикаций в портфеле с наибольшим цитированием; отбор, контент-анализ и формализацию НТИ, оцифровку, построение на основе формализованной НТИ хранилища базы данных информационной системы — видоизменение НТИ в тематические коллекции первичных знаний; установление связей между информацией в базе данных; предоставление выделенного доступа к НТИ конечным потребителям.
Наиболее перспективные источники НТИ для проведения экспертного анализа следующие.
1. Источники первичной НТИ: научные статьи, представляющие собой описание конкретных результатов исследований авторов по заданным темам; диссертационные работы, описывающие новые научные результаты в предметной области; монографии, демонстрирующие результаты системного анализа актуальных проблем в сфере науки; доклады на конференциях, предоставляющие научные сведения о текущих достижениях и ходе выполнения исследований, предлагающие к обсуждению научным сообществом актуальные вопросы по тематикам докладов; рекламные материалы, презентации и информационные буклеты организаций, демонстрирующие лучшие стороны предлагаемых результатов исследований и разработок.
2. Источники вторичной НТИ: аналитические обзоры и дайджесты, демонстрирующие итоги рассмотрения прикладных вопросов по направлениям исследований; реферативные издания, являющиеся аннотированными тематическими каталогами новых публикаций. Для исследования тенденций развития науки
и техники посредством применения специализированных информационных ресурсов целесообразно использование методов библиометриче-ского анализа [18], которые можно разделить на следующие группы: методы цитатного анализа ссылок в публикациях, предоставляющие возможность оценивать взаимоотношения между публикациями и объем авторского анализа предметной области; методы количественного анализа структуры элементов, входящих в исследуемые потоки НТИ, включая распределение публикаций и авторов по тематикам и направлениям исследований, по странам и языкам публикаций. Методы количественного и качественного анализа часто применяют совместно в рамках современных информационных систем, позволяющих оперативно формализовывать и исследовать НТИ, сгруппированную по направлениям (тематикам), ключевым словам, динамике публикаций с высоким индексом цитирования.
Тенденции развития науки и технологий, ™
выявленные по результатам анализа НТИ за <
выделенные периоды времени, принято делить <
на следующие группы, исходя из статистики з
публикаций: возникающие (появление первых I
публикаций), увеличивающиеся (резкий рост ^
количества публикаций и цитирований), не- ^
изменные, уменьшающиеся и исчезающие (от- ш
сутствие публикаций). В практике работы при- ^
<
меняются следующие показатели, характеризу- ^ ющие тренды развития в изучаемых областях ^ исследований и разработок: появление новых 5 авторов и авторских коллективов, увеличение о их количества; рост объема цитирования пуб- ^ ликаций, включая цитирование из смежных 2 областей науки и техники; появление новых 2 ключевых слов, применяемых в публикациях. ^ При этом область поиска НТИ определяется че- | рез перечень ключевых слов и словосочетаний, н которые устанавливают область ограничений 2 на основе оценок экспертов.
Инструменты форсайта, включающие сбор и анализ НТИ, делятся на три категории:
• качественные: обзор источников и литературы; экспертные опросы, интеллектуальная обработка; кластерный анализ — группировка НТИ по общим основаниям (классификационным признакам); метод сценариев — формирование и анализ альтернативных трендов развития, зависящих от конкретных условий и реализующихся при определенных рисках;
• количественные: библиометрический анализ (на основании показателей цитирования) — анализ внутри- и междисциплинарных взаимосвязей публикаций с учетом времени новых и предшествующих научных знаний; сетевой анализ, основанный на теории графов, позволяющий анализировать отношения между узлами сети (источники НТИ, цитирующие и цитируемые публикации, ключевые слова); экстраполяция трендов; сематический анализ;
• комбинированные: метод Дельфи, позволяющий получить формализованные и согласованные экспертные оценки путем независимых и уточняющих зависимых опросов экспертов в очном и заочном форматах; SWOT-анализ сильных и слабых сторон объекта исследования, внешних возможностей и угроз, а также взаимосвязей между ними; разработка дорожных карт и альтернативных сценариев развития.
Применение конкретной совокупности инструментов форсайта определяется индивидуально для каждой исследовательской задачи в зависимости от целей исследования, требований к охвату поиска НТИ и состава экспертного сообщества. Для повышения объективности, эффективности и междисциплинарности форсайта привлекаются авторитетные эксперты из ведущих научных, образовательных и произ-
™ водственных организаций. При этом важны-
< ми критериями выбора являются опыт работы
< этих специалистов в рейтинговых организаци-з ях, а также наличие деловых и научных кон-I тактов, в том числе с зарубежными коллегами ^ (что, в свою очередь, позволяет расширять круг ^ экспертных оценок).
ш Проведение исследований НТИ при выполем нении форсайта принято разделять на этапы: ^ ограничение предметной области, горизонта
1 прогнозирования и ретроспективного анализа 5 публикаций, установление целей и задач иссле-о дования, объектов, аспектов и методов изучения ш объектов исследования; определение состава
2 координаторов и экспертного сообщества с уче-2 том тематических групп для проведения иссле-^ дования с разграничением областей поиска и 5 анализа НТИ согласно профессиональным комн петенциям; определение порядка проведения 2 исследования, поиска и распределения НТИ
и процедуры координации работ между участниками исследования; определение и изучение потенциальных источников НТИ; поиск, консолидация, распределение и экспертная оценка НТИ; определение и коллегиальное обсуждение тенденций развития с различными сценариями; разработка отчетных материалов по итогам проведения исследования; актуализация планов НИОКР и корпоративных программ развития.
Для обеспечения эффективной и полномасштабной работы с информационными массивами необходимо применение современных механизмов автоматизации. Они реализуются в информационных системах (ИС), позволяющих регулярно получать актуальную информацию о состоянии науки и техники в России и за рубежом [19-21]. ИС предназначены для сбора, поиска и анализа НТИ с целью принятия управленческих решений, основанных на объективных тенденциях, прогнозах и научных знаниях. Информационные технологии являются средствами автоматизации процессов поиска, консолидации, анализа и экспертизы открытой НТИ с последующим целевым распространением результатов в формализованном виде. Такая ИС должна состоять из двух специализированных блоков, представляющих организационно-функциональную структуру и программно-аппаратное обеспечение работы с НТИ.
Разработка и внедрение корпоративной ИС позволит обеспечить:
• систематическое изучение и анализ информационных источников и материалов для исследования тенденций, направлений развития, выявления и оценки целесообразности применения передовых научно-технических решений;
• разработку аналитических материалов по результатам исследования информации;
• предоставление разграниченного доступа к научно-техническим, аналитическим и отчетным материалам, создание механизма информирования об актуальных трендах развития техники и технологий для использования полученной информации в практической деятельности; создание единой корпоративной управляемой информационной среды для работы с научно-техническими материалами и информационно-аналитического обеспечения автоматизированной системы сбора, обработки и экспертизы научно-технических заявок на новые тематики НИОКР. Приведенные подходы могут быть использованы при формировании системы научно-технического поиска в рамках программы инновационного развития. Дальнейшее развитие рассмотренного в статье направления деятельности обеспечивается совершенствованием методов работы с НТИ посредством применения системного анализа и интегральной обработки количественных параметров информационных потоков статистическими методами. Кроме ранее описанных методов обработки и анализа информации, целесообразно использование механизмов теории принятия решений по оценке «коллективного выбора» экспертного сообщества, а также элементов теории графов для выявления сведений об авторах и центрах научно-технического прогресса.
Литература
1. Микова Н. С., Соколова А. В. Мониторинг глобальных технологических трендов: теоретические основы и лучшие практики // Форсайт. 2014. Т. 8, № 4. С.64-83.
2. Бочарова М. А. Создание системы управления знаниями в бизнес-организациях: Автореф. дисс. ... канд. экон. наук / Гос. ун-т управления. М., 2011. 22 с.
3. Медовников Д. С., Розмирович С. Д., Молодчик М. А., Оганесян Т. К., Ляпина С. Ю. «Росатом» делится знаниями / Отв. ред.: В. А. Першуков, Д. С. Медовников. М.: Изд. дом «НИУ ВШЭ», 2012. 152 с.
4. Бобылов Ю. А. Корпоративная конкурентная разведка: тенденции развития за рубежом и в России // Менеджмент и бизнес-администрирование. 2009. № 2. С.117-132.
5. Белоусов Д. Р., Сухарева И. О., Фролов А. С. Метод «картирования технологий» в поисковых прогнозах // Форсайт. 2012. Т. 6, № 2. С. 6-16.
6. Бруммер В., Коннола Т., Сало А. Многообразие в форсайт-исследованиях: практика отбора инновационных идей // Форсайт. 2010. Т. 4, № 4. С. 56-68.
7. Бруммер В., Лиесио Ю., Ниссинен Ю., Сало А. Идентификация перспективных коллаборативных сетей в международных научных программах // Форсайт. 2011. Т. 5, № 1. С. 56-66.
8. Зинченко М. А., Махмутова Д. С., Изюмов Д. Б., Кондратюк Е. Л. Обзор методов проведения форсайт-исследований // Инноватика и экспертиза: научные труды. 2012. № 2. С. 155-158.
9. Кинэн М. Технологический форсайт: международный опыт // Форсайт. 2009. № 3 (11). С. 60-67.
10. Коцемир М. Н. Динамика российской и мировой науки сквозь призму международных публикаций // Форсайт. 2012. Т. 6, № 1. С. 38-59.
11. Кукушкина С. Н. Метод Дельфи в форсайт-проектах // Форсайт. 2007. Т. 1, № 1. С. 68-73.
12. Кэлоф Д., Ричардс Г., Смит Д. Форсайт, конкурентная разведка и бизнес-аналитика — инструменты повышения эффективности отраслевых программ // Форсайт. 2015. Т. 9, № 1. С. 68-81.
13. Третьяк В. П. Форсайт как технология предвидения // Экономические стратегии. 2009. Т. 11, № 8. С. 52-63.
14. Дудин М. Н., Лясников Н. В., Сафин Ф. М., Его-рушкин П. А. Инновационный форсайт как инструмент конкурентоспособного развития предпринимательских структур. М.: ИД «Наука», 2013. 216 с.
15. Кошелева Т. Н. Управление формированием инновационной среды малого предпринимательства как основа инновационного развития экономики. СПб.: Изд-во СПбУТУиЭ, 2016. 302 с.
16. Аверченков В. И., Рощин С. М. Мониторинг и системный анализ информации в сети Интернет.
2-е изд., стереотип. М.: Флинта, 2011. 160 с.
17. Васенин В. А., Афонин С. А., Голомазов Д. Д., Козицын А. С. Интеллектуальная система тематического исследования научно-технической информации (ИСТИНА) // Информационное общество.
2013. № 2. С.39-57.
18. Князева С. Ю., Слащева Н. А. Научно-техническое сотрудничество России и ЕС: библиометрический анализ // Форсайт. 2008. Т. 2. № 1. С. 30-41.
19. Гвоздева Т. В., Баллод Б. А. Проектирование информационных систем: Учеб. пособие. Ростов-н/Д: Феникс, 2009. 512 с.
20. Избачков Ю. С., Петров В. Н., Васильев А. А., Те-лина И. С. Информационные системы: Учебник.
3-е изд. СПб.: Питер, 2011. 544 с.
21. Суркова Н. Е., Остроух А. В. Методология структурного проектирования информационных систем. Красноярск: ООО «Научно-инновационный центр»,
2014. 190 с.
References
1. Mikova N. S., Sokolova A. V. Monitoring global'nykh tekhnologicheskikh trendov: teoreticheskie osnovy i luchshie praktiki [Monitoring of global technological trends: Theoretical foundations and best practices]. Forsayt, 2014, vol. 8, no. 4, pp. 64-83.
2. Bocharova M. A. Creation of a knowledge management system in business organizations. Cand. econ. sci. diss. Synopsis. Moscow: State Univ. of Management Publ., 2011. 22 p. (in Russ.).
3. Medovnikov D. S., Rozmirovich S. D., Molodchik M. A., Oganesyan T. K., Lyapina S. Yu. "Rosatom" delitsya znaniyami ["Rosatom" shares its knowledge]. Moscow: HSE Publ., 2012. 152 p.
4. Bobylov Yu. A. Korporativnaya konkurentnaya raz-vedka: tendentsii razvitiya za rubezhom i v Rossii [Corporate competitive intelligence: Development trends abroad and in Russia]. Menedzhment i biznes-administrirovanie, 2009, no. 2, pp. 117-132.
5. Belousov D. R., Sukhareva I. O., Frolov A. S. Metod «kartirovaniya tekhnologiy» v poiskovykh progno-zakh [The method of "mapping technology" in search forecasts]. Forsayt, 2012, vol. 6, no. 2, pp. 6-16.
6. Brummer V., Konnola T., Salo A. Mnogoobrazie v forsayt-issledovaniyakh: praktika otbora innovat-sionnykh idey [Diversity in foresight research: The practice of selecting innovative ideas]. Forsayt, 2010, vol. 4, no. 4, pp. 56-68.
7. Brummer V., Liesio Yu., Nissinen Yu., Salo A. Iden- ™ tifikatsiya perspektivnykh kollaborativnykh setey v ^ mezhdunarodnykh nauchnykh programmakh [Iden- ^ tification of promising collaborative networks in >x international scientific programs]. Forsayt, 2011, ^ vol. 5, no. 1, pp. 56-66. s
8. Zinchenko M. A., Makhmutova D. S., Izyumov D. B., h Kondratyuk E. L. Obzor metodov provedeniya for- x sayt-issledovaniy [Review of foresight research me- ° thods]. Innovatika i ekspertiza: nauchnye trudy, x 2012, no.2, pp.155-158. <
9. Kinen M. Tekhnologicheskiy forsayt: mezhdunarod- § nyy opyt [Technological foresight: International ^ experience]. Forsayt, 2009, no. 3 (11), pp. 60-67. ^
10. Kotsemir M. N. Dinamika rossiyskoy i mirovoy nau- g ki skvoz' prizmu mezhdunarodnykh publikatsii [Dy- 5 namics of Russian and world science through the g prism of international publications]. Forsayt, 2012, v vol. 6, no. 1, pp. 38-59. uj
11. Kukushkina S. N. Metod Delphi v forsayt-proektakh s [The Delphi method in foresight projects]. Forsayt, < 2007, vol. 1, no. 1, pp. 68-73. lu
12. Kelof D., Richards G., Smit D. Forsayt, konkurent- | naya razvedka i biznes-analitika — instrumenty po-vysheniya effektivnosti otraslevykh programm [Foresight, competitive intelligence and business intelligence - tools to improve the efficiency of industry programs]. Forsayt, 2015, vol. 9, no. 1, pp. 68-81.
13. Tret'yak V. P. Forsayt kak tekhnologiya predvideni-ya [Foresight as a technology of foreknowledge]. Ekonomicheskie strategii, 2009, vol. 11, no. 8, pp. 5263.
14. Dudin M. N., Lyasnikov N. V., Safin F. M., Egorush-kin P. A. Innovatsionnyy forsayt kak instrument konkurentosposobnogo razvitiya predprinimatel'-skikh struktur [Innovative foresight as a tool for competitive development of entrepreneurial structures]. Moscow: Nauka Publ., 2013. 216 p.
15. Kosheleva T. N. Upravlenie formirovaniem innovat-sionnoy sredy malogo predprinimatel'stva kak os-nova innovatsionnogo razvitiya ekonomiki [Management of formation of innovative environment of small business as a basis of innovative development of economy]. St. Petersburg: SPb. Univ. of Management Technologies and Economics Publ., 2016. 302 p.
16. Averchenkov V. I., Roshchin S. M. Monitoring i sis-temnyy analiz informatsii v seti Internet [Monitoring and system analysis of information in the Internet]. Moscow: FLINTA Publ., 2011. 160 p.
17. Vasenin V. A., Afonin S. A., Golomazov D. D., Ko-zitsyn A. S. Intellektual'naya sistema tematichesko-go issledovaniya nauchno-tekhnicheskoy informatsii (ISTINA) [Intelligent system for management of scientific and technical information (ISTINA)]. In-formatsionnoe obshchestvo, 2013, no. 2, pp. 39-57.
18. Knyazeva S. Yu., Slashcheva N. A. Nauchno-tekhni-cheskoe sotrudnichestvo Rossii i ES: bibliometrich-eskiy analiz [Scientific and technical cooperation between Russia and the EU: Bibliometric analysis]. Forsayt, 2008, vol. 2, no. 1, pp. 30-41.
19. Gvozdeva T. V., Ballod B. A. Proektirovanie infor-matsionnykh sistem [Designing of information systems]. Rostov-na-Donu: Feniks Publ., 2009. 512 p.
20. Izbachkov Yu. S., Petrov V. N., Vasil'ev A. A., Telina I. S. Informatsionnye sistemy [Information systems]. St. Petersburg: Piter Publ., 2011. 544 p.
21. Surkova N. E., Ostroukh A. V. Metodologiya struk-turnogo proektirovaniya informatsionnykh sistem [Methodology of structural designing of information systems]. Krasnoyarsk: Scientific and Innovation Center Publ., 2014. 190 p.
