CC BY
14
^У / МОДЕРНИЗАЦИЯ ИНФОРМАЦИОННО-АНАЛИТИЧЕСКИХ МЕТОДИК АНАЛИЗА РЕЗУЛЬТАТИВНОСТИ НАУЧНОЙ ДЕЯТЕЛЬНОСТИ ОРГАНИЗАЦИИ
УДК 001.89
Б01: 10.24412/1997-0803-2020-10314
Н. В. Лопатина, Г. И. Булдина
Московский государственный институт культуры
Статья посвящена совершенствованию подходов к анализу результативности научной деятельности организаций (высших учебных заведений, научно-исследовательских институтов, учреждений науки). Конкретизированы задачи научного поиска критериев, позволяющих раскрыть характер участия отдельных организаций, коллективов или учёных в национальной или мировой научной деятельности. Авторы предлагают включить в систему оценок результативности научной деятельности организации анализ документных потоков диссертаций, её инновационной активности. Представлен опыт апробации наукометрической методики, разработанной авторами, при исследовании вклада Московского государственного института культуры в изучение и разработку информационной инфраструктуры общества, которое осуществлено на основе анализа массива диссертаций, подготовленных в институте в 1980-2000-е годы. Предложенная методика ориентирована на отраслевую специфику документопотока и характеризует его посредством специфических содержательных декомпозиций.
Ключевые слова: наукометрия, результативность научной деятельности организации, диссертация, библиотечно-информационные науки, информационная инфраструктура, Московский государственный институт культуры, инновационная активность, инновационный индекс организации.
ЛОПАТИНА НАТАЛЬЯ ВИКТОРОВНА - доктор педагогических наук, профессор, заведующая кафедрой библиотечно-информационных наук факультета государственной культурной политики Московского государственного института культуры LOPATINA NATALYA VIKTOROVNA - D.Sc. in Pedagogic Sciences, Full Professor, Head of the Department of Library and Information Sciences, the Faculty of State Cultural Policy, the Moscow State Institute of Culture
БУЛДИНА ГАЛИНА ИВАНОВНА - кандидат педагогических наук, доцент кафедры библиотечно-информационных наук факультета государственной культурной политики Московского государственного института культуры BULDINA GALINA IVANOVNA - PhD in Pedagogic Sciences, Associate Professor at the Department of Library and Information Sciences, the Faculty of State Cultural Policy, the Moscow State Institute of Culture
e-mail: lis.mgik@yandex.ru © Лопатина Н. В., Булдина Г. И., 2020
Nataliya V. Lopatina, Galina I. Buldina
Moscow State Institute of Culture, the Ministry of Culture of the Russian Federation (Minkultury), Bibliotechnaya Str., 7, 141406, Khimki City, Moscow Region, Russian Federation
MODERNIZATION OF INFORMATION AND ANALYTICAL METHODS FOR ANALYZING THE EFFECTIVENESS OF SCIENTIFIC ACTIVITY OF THE ORGANIZATION
The article is devoted to improving approaches to analyzing the effectiveness of scientific activity of organizations (higher educational institutions, research institutes, scientific institutions). The tasks of scientific search for criteria allowing to reveal the nature of participation of individual organizations, collectives or scientists in national or world scientific activities are specified. The authors propose to include the analysis of dissertations' document flows and the analysis of innovation activity in the system of evaluation of the organization's scientific performance. The article presents the experience of testing the scientometric methodology developed by the authors in the study of the contribution of the Moscow State Institute of Culture to the study and development of the information infrastructure of society, which is based on the analysis of the array of dissertations prepared at the Institute in 19802000. The proposed method focuses on the industry specifics of the document flow and characterizes it by means of specific content decompositions.
Keywords: scientometrics, effectiveness of scientific activity of the organization, dissertation, library and information science, information infrastructure, Moscow state Institute of culture, innovation activity, innovation index of the organization.
Для цитирования: Лопатина Н. В., Булдина Г. И. Модернизация информационно-аналитических методик анализа результативности научной деятельности организации // Вестник Московского государственного университета культуры и искусств. 2020. № 3 (95). С. 146-156. DOI: 10.24412/1997-0803-2020-10314
Одной из наиболее обсуждаемых в научных кругах проблем является применение количественных методов оценки результативности научной деятельности организации и отдельных учёных. Наукометрическая методология вошла в предметное поле науки в 1960-х годах [3; 10], её инструментарий активно и эффективно разрабатывался в 1970-1990-е годы (создав базу для особого сектора мирового информационного рынка), но история организации науки показывает локализацию данного дискурса в биб-лиотечно-информационных науках вплоть до 2010-х. Между тем масштабное использование наукометрии на современном этапе не выходит за рамки нескольких клишированных инструментов.
Применение ограниченного круга наукометрических инструментов и моделей не позволяет эффективно (то есть с получением нового аналитического знания) раскрыть характер участия отдельных организаций, коллективов или учёных в национальной или мировой научной деятельности. Необходим системный мониторинг документо-потоков [5], позволяющий выявлять закономерности и тенденции развития науки и трансфера научного знания; модернизация информационно-аналитического инструментария в русле интеллектуализации [7; 8] и учёта новых ориентиров оценки научно-исследовательской деятельности - вклада научного знания и результатов интеллектуальной деятельности конкретной ор-
ганизации в социально-экономическое развитие и увеличение рейтинговых позиций государства в Глобальном инновационном индексе [9]. Неотложность задач совершенствования информационно-аналитического арсенала обусловлена «новыми форматами научно-информационной деятельности, функционирования научно-технической информации, повседневных практик научной коммуникации, информационного обслуживания науки и техники, формирования экспертных сообществ» [4]. В связи с этим актуальна разработка методов и моделей с многоаспектным набором параметров, учитывающих механизмы отраслевой адаптации инструментов, и применение дифференцированного подхода в информационной аналитике [2].
Для решения данной научной задачи начато исследование на основе выделенных экспериментальным путём параметров количественного анализа отраслевого научного документопотока, сформированного в ходе научной деятельности конкретной организации - Московского государственного института культуры. Для проверки информативности предлагаемых нами параметров оценки научной деятельности организации эвристичность показали методы исторического анализа, которые в данном исследовательском контексте заключались не только в ретроспективном анализе документопотоков на основе библиографии как универсального научного метода [6]. Основной акцент был сделан на анализе результатов научных исследований, выполненных в МГИК, с точки зрения их дальнейшего применения в отраслевой науке и практике и с точки зрения их инновационного значения для развития экономики и социокультурной сферы на долгосрочный период. Апробация таких эксперимен-
тальных параметров оценки невозможна на уровне ситуативного анализа, а требует рассмотрения наукометрических объектов в динамике, выявления и сопоставления уровней развития отраслевой науки и практики.
Апробируя данную информационно-аналитическую методику, мы сконцентрировали внимание на методологических, теоретических и практико-ориентированных разработках библиотечно-информацион-ных наук, представленных в кандидатских диссертациях, которые были защищены в МГИК в 1980-2000-х годах [1]. Выбор для этой цели диссертационных исследований обусловлен их комплексным характером и информативностью для многоаспектного анализа трансфера знаний и отраслевых инновационных процессов. Предметное и тематическое разнообразие диссертационных работ по библиотековедению, библиографо-ведению и книговедению в данном исследовании приведено к «единому знаменателю» с помощью концепта информационной инфраструктуры общества, которая понимается как система социальных институтов, субъектов, структур, процессов, удовлетворяющих информационные потребности личности и общества и обеспечивающих функционирование социальных коммуникаций. Именно с точки зрения инновационного вклада в развитие информационной инфраструктуры общества, которая в заявленный временной период вступала в первые этапы грандиозных трансформаций, на основе авторской методики было проанализировано содержание 376 диссертационных работ.
Исследование позволило проследить и оценить динамику количества работ, направленных на изучение и проектирование основных подсистем информационной ин-
Таблица 1
Распределение диссертационных работ на основании предметной и целевой направленности исследования на одну из подсистем информационной инфраструктуры изучаемого временного периода (абсолютные величины)
Подсистема информационной инфраструктуры 19801984 19851989 1990-1994 1995-2000
Библиотека 43 34 22 21
ГСНТИ 8 6 3 5
Издательское дело, книгораспространение 6 22 8 12
Библиография (вне основных организационных форм информационного взаимодействия) 21 14 14 9
Производство информационных продуктов и услуг (в комплексе основных организационных форм или вне основных организационных форм) 1 12 8 1
ИТ-решения и иные новые способы информационного взаимодействия 3 7 9 3
Организация информационного взаимодействия в культуре, образовании 4 11 2 2
Подготовка специалистов в области библиотечно-информационной деятельности / библиотечная профессиология 2 6 11 11
Массовый актор инфосферы 1 6 1 6
Управленческая и оценочная подсистемы 1 8 4 8
фраструктуры изучаемого временного периода (см. таблицу 1). Выявлено, во-первых, влияние конкретных подсистем экономических и политических трансформаций на количество исследований, во-вторых, опережающий характер разработок, которые в дальнейшем стали основой для проектирования новых систем организации документных коммуникаций.
В ходе исследования было проведено распределение диссертаций (см. таблицу 2) по характеру изучения информационной инфраструктуры общества по следующим группам: исследования фундаментального характера, исторические исследования, исследования педагогического характера, исследования социологического характера, исследования в области экономики и управ-
Таблица 2
Распределение диссертационных работ по характеру научных исследований информационной инфраструктуры общества (абсолютные величины)
Характер научных исследований информационной инфраструктуры общества 19801984 19851989 1990-1994 1995-2000
Исследования фундаментального характера 6 16 10 6
Исторические исследования 15 28 16 18
Исследования социологического характера 3 4 1 0
Исследования педагогического характера 17 21 10 20
Исследования в области экономики и управления подсистемами информационной инфраструктуры 8 11 9 10
Практико-ориентированные исследования 20 14 10 7
R&D 16 22 18 11
Разное 5 10 8 6
ления подсистемами информационной инфраструктуры, практико-ориентированные исследования, R&D (исследования и разработки, направленные на создание новых практических решений или технологий).
Учитывая специфику научных задач библиотековедения, библиографоведения и книговедения, проанализировано распределение выбранного массива диссертационных работ по трём группам в зависимости от временной направленности проведённых исследований: «Исследование прошлого», «Изучение и анализ настоящего», «Проектирование будущего» (см. таблицу 3). Проведённый дополнительно анализ тематических направлений в рамках групп «Проектирование будущего» и «Изучение и анализ настоящего» позволил реконструировать
процесс социальной диффузии тех идей, которые через 20 лет станут мейнстримами развития информационной инфраструктуры, но в рассматриваемый нами период только возникают «как предчувствие» и двигаются по «лестнице инноваций» к про-тотипированию или экспериментальному внедрению.
Анализ участия вуза в отраслевых инновационных процессах в конкретный исторический период обусловил выделение в качестве исследовательской декомпозиции распределение тематики и результатов исследований в альтернативе «традиционные элементы информационной инфраструктуры - инновационные элементы информационной инфраструктуры» (см. таблицу 4).
Таблица 3
Распределение диссертационных работ по характеру временной направленности исследования (абсолютные величины)
По характеру временной направленности исследования 19801984 19851989 1990-1994 1995-2000
«Исследования прошлого» 17 31 18 18
«Изучение и анализ настоящего» 56 72 47 51
«Проектирование будущего» 17 23 17 9
Таблица 4
Распределение тематики и результатов исследований в альтернативе
«традиционные элементы информационной инфраструктуры - инновационные элементы информационной инфраструктуры» (%)
19801984 19851989 1990-1994 1995-2000
Исследования традиционных элементов информационной инфраструктуры 84,5% 88,1% 76,8 % 84,7 %
Разработка инновационных элементов информационной инфраструктуры 15,5% 11,9 % 23,2 % 15,3%
Полученные в ходе анализа данные позволяют фиксировать показатели высокого уровня инновационной активности МГИК в библиотечно-информационной деятельности изучаемого периода.
Отраслевая специфика анализируемых диссертационных работ определила интерес к сфере применения полученных в них результатов интеллектуальной деятельности (см. таблицу 5).
Группа «для отдельных подсистем информационной инфраструктуры» включает диссертации, направленные на исследова-
ние и развитие институций информационной инфраструктуры в соответствии с изучаемым временным периодом: библиотеки, органы научно-технической информации, книгоиздание, средства массовой информации (периодическая печать), ресурсы, информационные структуры в организациях, профильное образование, кадры. Исследования этой группы рассматривают данные институции по вопросам методик, технологий, управления на следующих уровнях: международном, национальном (в том числе на республиканском уровне и на уровне
Таблица 5
Распределение диссертационных работ по направленности научных результатов (абсолютные величины)
Уровень направленности исследований 19801984 19851989 1990-1994 1995-2000
для отдельных подсистем информационной инфраструктуры 39 64 49 37
для обслуживаемых отраслей / целевых и потребительских аудиторий 29 22 28 10
для общества в целом 22 40 21 31
СССР), региональном, корпоративном уровнях, на уровне отдельных социальных институтов (наука, образование и т.д.).
Группа «для обслуживаемых отраслей / целевых и потребительских аудиторий» включает диссертации, результаты которых направлены на развитие информационной поддержки конкретных отраслей, а также на решение народно-хозяйственных задач «обслуживаемых» отраслей.
Группа «для общества в целом» включает диссертации, направленные на создание результатов общекультурного характера, имеющих значение для социального, информационного и культурного развития общества в целом, отдельных социальных групп (например, отдельных возрастных категорий). Данная группа исследований далеко не всегда напрямую связана с библиотечным или библиографическим предметным полем (например, диссертации по общей теории чтения, по формированию читательской активности «не библиотечными» средствами) [10].
Заключительная задача описанного исследования связана с характеристикой ин-
новационных ориентиров тех диссертаций, которые отнесены к группе «Проектирование будущего» (см. таблицу 3, таблицу 6). Отмечено, что наибольшая доля в данном фрагменте документного потока принадлежит диссертационным работам, в которых содержатся разработки новых информационных продуктов (продуктов с оригинальными качественными характеристикам) и новых технологий (информационных, педагогических, библиотечных). Вместе с тем дополнительно проведённые исследования показали, что, обладая в значительно части случаев патентоспособностью, разработки не были оформлены как интеллектуальная собственность и не имели перспектив для рационального использования в те периоды, когда они были максимально востребованы практикой.
Таким образом, диссертационные исследования информативны для комплексной оценки научной деятельности, однако требуют многоаспектной методики анализа. Наукометрический анализ массивов и потоков диссертационных работ не должен ограничиваться только приравнивани-
^ Научно-исследовательская деятельность вИШг 1
Таблица 6
Распределение диссертационных работ, отнесённых в таблице 3 к группе «Проектирование будущего», по характеру инновационных ориентиров (%)
По характеру инновационных ориентиров 19801984 19851989 19901994 19952000
Ориентированные на производство и использование новых информационных продуктов (в том числе информационных ресурсов новых качественных характеристик) 29,4% 47,8% 29,4% 22,2%
Нацеленные на создание и применение новой технологии (в том числе новой методики, новой педагогической технологии, новой библиотечной технологии) 58,8% 30,4% 41,2% 22,2%
Ориентированные на построение и функционирование новых структур, инновационных механизмов моделей взаимодействия в информационном секторе 11,8 % 21,8% 29,4% 55,6%
ем к публикациям и количественными данными об их цитировании. Принципиальное значение имеет результативность социальной диффузии новых идей и разработок, действенные механизмы внедрения нового знания в практику, «инновационная отдача» результатов научных исследований.
Предложенная методика, ориентированная на отраслевую специфику доку-ментопотока и характеризующая его посредством специфических содержательных декомпозиций, позволяет глубже анализировать результативность научной деятельности организации.
Данная методика даёт возможность оценивать инновационную активность организации не с позиций соответствия моде и конъюнктурным клише, а исходя из до-
полнительной ценности, которую дают результаты данных исследований для экономики, культуры, дальнейшего роста эффективности и качества отраслевых продуктов и услуг.
Анализ результативности научной деятельности организации не может считаться полным, если объектом изучения выступает только документный поток. Принципиальное значение имеет анализ документных массивов и банков знаний, в основе которых - результаты научных исследований и разработки организации, а также их оформление в качестве объектов интеллектуальной собственности.
Проведённое исследование позволило наметить и новые направления и задачи научной работы:
• формирование инновационного индекса вуза/НИИ как комплексной характеристики оценки научной деятельности, в том числе его структуры, системы субиндексов, параметров и методик их оценивания, системы целесообразных критериев и показателей;
• разработка методов оценки внедрения результатов диссертаций в отраслевую практику. В качестве параметров анализа выделены и ожидают апробации: (1) доля внедрённых результатов от общего количества защищённых работ; (2) длительность жизненного цикла внедрённых результатов;
(3) соотношение внедрённых фундаментальных и практико-ориентированных работ;
(4) динамика этих показателей во времени;
• анализ величины временного лага между выполнением/публикацией первых результатов/защитой диссертации и внедрением их в информационные практики; сопоставление периодов жизненного цикла результатов диссертационных исследований с экономическими циклами;
• разработка инструментов повышения результативности научной деятельности современного вуза. В их числе - научная политика вуза, которая включает систему принципов финансового инвестирования в науку, развитие кадрового капитала и воспроизводство научных кадров, модернизацию отношения к результатам научного труда (охрана результатов научной дея-
тельности, их продвижение, коммерциализация, создание условий для широкого внедрения в практику);
• проведение прикладных исследований массивов и потоков научной информации как показателя научной деятельности организации для получения информативных, свободных от спекуляции данных об уровне её результативности;
• создание типовых, стратегически ориентированных решений в области организации и управления наукой.
P.S. Проводя это исследование, мы рассматривали МГИК только в качестве одного из кейсов, того, который нам знаком более всего, и не стремились определить причины динамики показателей, выявить факторы, события, персоны, которые повлияли на историю развития отрасли. Но эти задачи интересны для изучения, ибо история любого вуза всегда неразрывно связана с историей его научной деятельности, и она невольно обрастает мифами, которые оказываются более устойчивыми для социального образа, нежели факты и цифры. И именно точные наукометрические инструменты доказывают, насколько высоким является вклад МГИК в развитие информационной инфраструктуры общества, информатизацию культуры, другие аспекты современной жизни, у истоков которой стоял наш институт.
Примечания
1. Библиографический указатель работ, защищённых в Диссертационном совете К 092.07.02
по присуждению учёной степени кандидата наук за 20 лет (в период с 1980 по 2000 г.) при Московском ордена Трудового Красного Знамени государственном институте культуры (МГИК) / составитель Г. И. Булдина. Москва : МГУКИ, 2011. 99 с.
2. Лопатина Н. В., Зубов Ю. С., Неретин О. П. Информационно-аналитическое обеспечение
приоритетных направлений науки и техники: отраслевой и дифференцированный подходы // Научно-техническая информация. Серия 1: Организация и методика информационной работы. 2017. № 5. С. 15-21.
^ Научно-исследовательская деятельность вИШг 1
3. Налимов В. В., Мульченко З. М. Наукометрия. Изучение науки как информационного процесса.
Москва : Наука, 1969. 192 с.
4. Неретин О. П., Суконкин А. В., Рыбакова Ю. В. Теоретические основания изучения и модернизации
научных коммуникаций в информационной инфраструктуре цифровой экономики // Культура: теория и практика : электронный научный журнал. 2019. № 3 (30). URL: http://theoryofculture.ru/ issues/106/1241/
5. Сладкова О. Б. Информационный мониторинг : учебник для студентов высших учебных заведений,
обучающихся по направлению 080800 - «Прикладная информатика (по областям)» и другим экономическим специальностям. Москва : МГИК, 2002. 124 с.
6. Сляднева Н. А. Библиография в системе Универсума человеческой деятельности: Опыт системно-
деятельностного анализа : монография. Москва : МГИК, 1993. 226 с.
7. Сляднева Н. А. Информационно-аналитическая деятельность: проблемы и перспективы
// Информационные ресурсы России. 2001. № 2 (57).
8. Сляднева Н. А. Социально-информационные технологии в современном культурогенезе
// Культура: теория и практика : научный электронный журнал. 2015. № 3 URL: http:// theoryofculture.ru/issues/48/767/
9. Россия в зеркале международных рейтингов. Информационно-справочное издание / отв. ред.
В. И. Суслов ; ИЭОПП СО РАН. Новосибирск : Автограф, 2015. 115 с.
10. Pritchard A. (1969) Statistical Bibliography or Bibliometrics. Journal of Documentation. No. 25 (4):
348-349.
References
1. Buldina G. I., comp. Bibliographicheskiy ukazatel rabot, zashchishchennikh v Dissertatsionnom Sovete
K 092.07.02 po prisuzdeniyu uchenoy stepeni kandidata nauk za 20 let (v period s 1980 po 2000 g.) pri Moskovskom Trudovogo Krasnogo Znameni gosudarstvennom institute kultury (MGIK) [Bibliographic Index of Works Protected in the Dissertation Council K 092.07.02for the Award of the Degree of Candidate of Science for 20 Years (in the Period from 1980 to 2000) at the Moscow Order of the Red Banner of Labor State Institute of Culture (MSIC)]. Moscow, Publishing House of the Moscow State University of Culture and Arts, 2011. 99 p. (In Russian)
2. Lopatina N. V., Zubov Yu. S., Neretin O. P. Informatsionno-analiticheskoe obespechenie prioritetnikh
napravleniy nauki i tekhniki: otraslevoi i differetsirovannyy podkhody [Information and Analytical Support of Priority Areas of Science and Technology: Sectoral and Differentiated Approaches]. Scientific and Technical Information. Series 1. Organization and Technique of Information Work. 2017. № 5. Pp. 15-21. (In Russian)
3. Nalimov V. V., Mulchenko Z. M. Naukumetria. Izuchenie nauki kak infomatsionnogo protsessa
[Scientometrics. The Study of Science as an Information Process]. Moscow, Akademizdatcenter "Nauka" RAS, 1969. 192 p. (In Russian)
4. Neretin O. P., Sukonkin A. V., Rybakova Yu. V. Theoreticheskie osnovania izuchenia ш modernizatsii
nauchnikh kommunikatsiy v informatsionnoi infrastructure tsifrovoy ekonomike [Theoretical Foundations for the Study and Modernization of Scientific Communications in the Information Infrastructure of the Digital Economy]. Culture: theory and practice. 2019, no. 3 (30). Available at: http://theoryofculture.ru/issues/106/1241/ (In Russian)
5. Sladkova O. B. Informatsionniy monitoring: theoretiko-methodologicheskie osnovy [Information Monitoring:
Theoretical and Methodological Bases]. Moscow, Publishing House of the Moscow State University of Culture and Arts, 2002. 124 p. (In Russian)
6. Slyadneva N. A. Bibliographya v systeme Universuma chelovecheskoy deyatelnosti: Opyt systemno-
deyatel'nostnogo analysisa [Bibliography in the System of the Universum of Human Activity: Experience of System-Activity Analysis]. Moscow, Publishing House of the Moscow State Institute of Culture, 1993. 226 p. (In Russian)
7. Slyadneva N. A. Informatsionno-analyticheskaya deyatel'nost': problemy i perspektivy [Information and
Analytical Activity: Problems and Prospects]. Informatsionnye resoursy Russii [Information Resources of Russia]. 2001, no. 2 (57). (In Russian)
8. Slyadneva N. A. Sotsial'no-informatsionnye tekhnologii v sovremennom cul'turogenese [Social and
information Technologies in Modern Cultural Genesis]. Culture: Theory and Practice. 2015, no. 3. Available at: http://theoryofculture.ru/issues/48/767/ (In Russian)
9. Suslov V. I., ed. Rossiya v zerkale mezdunarodnykh reytingov. Informatsionno-spravochnoe izdanie [Russia
in the Mirror of international Ratings. Information and Reference Edition]. Novosibirsk, Publishing House "Autograph", 2015. 115 p. (In Russian)
10. Pritchard A. (1969) Statistical Bibliography or Bibliometrics. Journal of Documentation. No. 25 (4):
348-349. (In English)
*
