CC BY
39Захарова А.А., Колегова О.А.
разработка структуры и функций типового модуля «работа с экспертами» для системы поддержки принятия решений стратегического управления организацией
введение
Всё большее количество предприятий и организаций различного вида приходят к пониманию необходимости введения системы стратегического управления для обеспечения устойчивого развития. В связи с этим актуальной задачей является разработка математического и программного инструментария для обоснования решений в ходе стратегического анализа, выбора, контроля реализации стратегии организации. Одной из проблем принятия стратегических решений является неопределенность среды, неполнота информации, и, в связи с этим - высокая роль человеческого фактора в принятия решений, необходимость привлечения экспертов и работы с экспертными знаниями, информацией. Это обуславливает актуальность разработки моделей поддержки принятия решений, основывающихся на экспертных знаниях и обеспечивающих решение задач стратегического управления [1]. Также отметим, что в процессе стратегического управления можно выделить типовые задачи принятия решений, которые возникают в организациях любого вида и уровня. Для решения таких задач целесообразно создание универсальных моделей, возможных к применению в процессе стратегического управления любой социально-экономической системой (СЭС) [2].
В [3] обоснована концепция, структура и состав типовых модулей системы поддержки принятия решений (СППР) для стратегического управления СЭС на основе экспертных знаний (СППР СУ ЭЗ). Предложенное математическое и программное обеспечение представляет собой «конструктор», с помощью которого любая организация может создать систему поддержки принятия стратегических решений (СППСР) в своей предметной области для решения конкретных задач стратегического управления, используя готовый набор настраиваемых типовых модулей.
В данной статье приводятся структура, состав функций и технология взаимодействия одного из типовых модулей данной СППР СУ ЭЗ - модуля «Работа с экспертами», являющегося обязательным и имеющим связь со всеми остальными модулями.
1. Процесс организации экспертиз в системе поддержки принятия решений для стратегического управления сЭс на основе экспертных знаний
Привлечение экспертов требует от лиц, принимающих решение (ЛПР), организации процесса экспертиз, который включает в себя ряд основных этапов: отбор экспертной группы, оценка компетентности экспертов, формирование заданий экспертам, сбор экспертных мнений и оценок, обработка оценок, оценка их согласованности, агрегирование индивидуальных оценок в групповую, оценка достоверности экспертиз [4].
Рассмотрим основные этапы процесса организации экспертиз, которые должны поддерживаться в СППР СУ ЭЗ.
1. Отбор экспертной группы.
Для того чтобы иметь возможность осуществлять отбор экспертов, в организации должен быть создан пул потенциальных экспертов. Каждый из них должен заполнить анкету сведениями, позволяющими определить уровень его образования, практического опыта работы, опыта экспертиз, достижений и т.д. с привязкой к конкретным предметным областям экспертиз. В целях эффективного поиска экспертов по заданным лПР критериям, информация должны быть соотнесена с некоторыми общеизвестными классификаторами. В качестве основных следует принять:
- общероссийский классификатор специальностей по образованию (ОК 009-2016) - для описания сведений об основном и дополнительном образовании эксперта, профессиональных сертификатов;
- общероссийский классификатор видов экономической деятельности (ОК 029-2014 (КДЕС РЕД. 2) с изменениями 2017 года - для описания сведений об опыте профессиональной деятельности эксперта, заказчиков проведенных им экспертиз;
- государственный рубрикатор научно-технической информации (ГРНТИ 2017) - для описания области научных интересов, опыте экспертиз, а также профессиональной деятельности (если эксперт работает в организациях научной сферы);
- классификаторы ученых степеней и званий и другие при необходимости.
Экспертная группа и/или индивидуальный эксперт подбирается под определенный проект экспертизы. Для этого ЛПР осуществляет предварительный отбор необходимого количества экспертов (требования к составу представлены в [4]), руководствуясь, в том числе, количеством функциональных сфер экспертизы (далее назовем их функциональными блоками). любая организация характеризуется набором объектов, процессов и явлений, отражающих отдельные функциональные сферы её деятельности (производственную, маркетинговую, кадровую, инновационную и т.д.), поэтому важно, чтобы в составе экспертной группы были эксперты, обладающие компетентностью в заданных лПР функциональных сферах. Таким образом, ЛПР должен сопоставить требуемым сферам экспертизы коды ОКСО, ГРНТИ и ОКВЭД и среди выявленных в базе экспертов отобрать предварительный состав экспертов конкретного проекта экспертизы. Для этих
экспертов необходимо заполнить оценочные листы, позволяющие в дальнейшем сформировать представления об их компетентности. Возможны варианты заполнения: заполняет ДПР на основе сведений анкеты эксперта; заполняет эксперт о себе (самооценка); заполняет эксперт о других экспертах (взаимооценка). Обработка этих листов позволяет выявить заданное ДПР количество экспертов с лучшими оценками компетентности.
2. Оценка компетентности эксперта.
Компетентность эксперта рассчитывается на основе данных оценочного листа, в котором по шкале [0-10] выставляются оценки эксперта по пяти критериям: уровень образования, соответствие образования профилю функционального блока экспертизы, опыт работы в этой области, опыт экспертиз в этой области, административная и экономическая независимость эксперта.
Далее оценки по критериям сворачиваются по формуле (1) и рассчитывается обобщенная оценка уровня компетентности по функциональному блоку.
гле Окь — обобщенная опенка ко^етентностн эксперта I по функциональному Оу^у - оценка ^-того эксперта по /-тому критерию в г-том функциональном
И^од- вес критерия] в ¿-том функциональном олоке, 2 И7^ = 1 ■
Полученные опенки Ок ^ являются элементами таблицы компетентности
Таблица 1.
таблица компетентности экспертов
Функциональные блоки Эксперты max Ok ts
1 2 d
Блок 1 Ok ,, Ok ,2 Ok, d max Ok,s
Блок 2 Ok 2, Ok 22 Ok, d max Ok2 s
Блок п Ok n, k П 2 Ok n d max Ok n s
данная таблица позволяет для случая индивидуальных экспертных оценок выявить наиболее компетентного эксперта по заданному функциональному блоку, а для случая групповой оценки - найти веса экспертов. Для этого осуществляется нормирование весов в каждом функциональном блоке, в результате сумма весов экспертов по каждому блоку будет равняться единице.
Все вышеперечисленные функции обеспечиваются модулем «Работа с экспертами». Разделение ролей эксперта, аналитик и ЛПР осуществляется путем создания индивидуальных интерфейсов и прав пользователей для соответствующих ролей.
3. Формирование заданий экспертам.
Формирование заданий экспертами осуществляется ЛПР (аналитиком) в модулях, обеспечивающих поддержку принятия решений на этапах стратегического анализа, выбора и контроля: «Редактор переменных», «SWOT-анализ», «Оценка проектов развития предприятия», «Оценка выполнения стратегии».
ЛПР и/или аналитик формулируют задачу для экспертной оценки, настраивают выбранную модель поддержки принятия решений и направляют сформированное задание группе экспертов. Далее работа происходит в модуле «Работа с экспертами». Эксперты заполняют листы экспертизы для полученного задания (для разных моделей поддержки принятия решений они имеют разное содержание) и направляют их аналитику. После поступления всех листов экспертизы аналитику предоставляются инструменты для оценки согласованности мнений эксперта. В случае достижения необходимого уровня согласованности мнений экспертов, аналитик принимает данную экспертную оценку, и она записывается в соответствующую базу данных модулей «Редактор переменных», «SWOT-ана-лиз», «Оценка проектов развития предприятия», «Оценка выполнения стратегии».
В противном случае, листы экспертизы направляются для корректировки экспертам, мнение которых более всего расходится с мнением группы, а если расхождения примерно одинаковы - наименее компетентным экспертам в заданном функциональном блоке.
4. Оценка согласованности.
В случае если результатом экспертизы являются точные значения, привязанные к количественным шкалам, для оценки согласованности мнений экспертов может применяться коэффициент вариации. В качестве допустимых принимаются значения от 0 до 33%, чем ближе значение к нулю, тем степень согласованности выше.
Если результатом экспертизы являются матрицы парных сравнений, то помимо оценки согласованности каждой из матриц попарных сравнений, необходимо рассчитать согласованность агрегированной матрицы, отражающей групповое мнение. Для этого предлагается оценивать соответствующие значения векторов приоритетов индивидуальных и групповой матриц, используя тот же коэффициент вариации.
5. Агрегирование индивидуальных оценок в групповую.
В случае использования матриц попарных сравнений (модель оценки стратегических факторов СЭС, иерархическая модель оценки проектов стратегического развития СЭС) элементы агрегированной матрицы рассчитываются по формуле (2)
где (- агрегированная оценка элемента матрицы;
(Чр.) 1 - элементы индивидуальных матриц,
к - количество индивидуальных матриц парных сравнений (количества
В случае, если оценки являются точные значения, привязанные к количественным абсолютным шкалам, то грмтов^л оценка рассчитывается по
где х- оценка полученная от к-того эксперта.
6. Оценка достоверности экспертиз.
Накопление в базе данных сведений об экспертизах позволяет осуществлять достоверность экспертиз в разрезе экспертов и экспертной группы в целом. Для этого можно использовать показатели вариации, позволяющие оценить отклонения мнения эксперта от групповой оценки, согласованность данной экспертной группы и др. В дальнейшем эти сведения должны использоваться для пересмотра оценок компетентности эксперта и группы.
2. основные функции модуля «работа с экспертами»
В общем случае с модулем «Работа с экспертами» могут работать четыре типа пользователей:
- ЛПР - руководитель организации, подразделения и др. лицо, наделенное полномочиями по принятию стратегических решений, формированию и реализации стратегии организации;
- аналитик - лицо, оказывающее методологическую поддержку процесса принятия решений, участвующее в процессе анализа среды организации, разработки альтернатив и др.;
- эксперт - лицо, обладающее знаниями и опытом в определенной предметной области и готовое участвовать в процессе экспертизы, высказывать свои мнения и суждения, давать экспертные оценки объектов, процессов, явлений;
- администратор - лицо, имеющее доступ к настройкам системы, контролирующее правильность её работы и т.д.
В таблице 2 перечислены укрупненно функции, обеспечиваемые модулем «Работа с экспертами», отмечены виды пользователей, задействованных в выполнении данных функций. Роль администратора не рассматривается.
Таблица 2.
Функции модуля «Работа с экспертами»
Функции Пользователи
ДПР Аналитик Эксперт
Формирование базы экспертов организации (хранение и актуализация анкет потенциальных экспертов) *
Создание личных кабинетов экспертов *
Предварительный отбор экспертов проекта по анкетным сведениям * *
Формирование системы критериев оценки компетентности эксперта и функциональных блоков экспертизы *
Формирование и заполнение оценочных листов по потенциальным экспертам проекта * * *
Расчет обобщенных оценок компетентности экспертов по функциональным блокам (автоматически)
Окончательное формирование состава экспертной группы *
Расчет таблиц компетентности экспертов проекта (автоматически)
Хранение, рассылка в личные кабинеты экспертов, контроль выполнения заданий на экспертизу, полученных из модулей «Редактор переменных», «SWOT-анализ», «Оценка проектов развития предприятия», «Оценка выполнения стратегии» (автоматически).
Заполнение листов экспертизы и отправка аналитику *
Агрегирование индивидуальных оценок в групповую (автоматически)
Оценка согласованности мнений экспертной группы *
Направление листов экспертизы на корректировку *
Экспорт результатов экспертной оценки в базы данных модулей, сформировавших задания на экспертизу *
Расчет показателей достоверности экспертиз по экспертам и экспертной группе * *
3. структура модуля «редактор переменных»
В результате исследования разработана структура модуля и технология его взаимодействия с другими типовыми модулями СППР СУ ЭЗ. На рис.1 представлены внешние блоки: «Авторизация пользователей» и «Управление проектами» (являются структурными элементами служебных модулей СППР); а также «Формирование заданий на экспертизу» и «База данных модулей поддержки принятия решений» (являются структурными элементами типовых модулей поддержки принятия решений). Внутренний состав модуля «Работа с экспертами» определен функционалом, представленным в разделе 2 настоящей статьи.
Заключение
Предложенные структура и поддерживаемые функции типового модуля
«Работа с экспертами» являются универсальными и могут применяться для организации процесса экспертиз в социально-экономических системах любого вида. Предложенная технология взаимодействия данного модуля с другими в СППР СУ ЭЗ позволяет избежать дублирования данных функций в типовых модулях, реализующих отдельные модели поддержки принятия решений на этапах стратегического анализа, выбора и контроля (модули «Редактор переменных», «SWOT-анализ», «Оценка проектов развития предприятия», «Оценка выполнения стратегии»). В то же время, накопление информации о проведенных экспертизах в одной базе данных позволяет оценивать достоверность экспертиз по отдельным экспертам и группам, что может использоваться в дальнейшем в качестве дополнительного критерия при отборе экспертов в проект.
Исследование выполнено при финансовой поддержке РФФИ в рамках научного проекта № 16-07-00299а.
Рисунок 1 - Структура типового модуля «Работа с экспертами» в СППР СУ ЭЗ
1 - данные пользователя; 2 - данные проекта экспертизы; 3 - информация о задании на экспертизу;
4 - список экспертов по заданным ЛПР критериям; 5, 14 - структурированные анкетные данные экспертов; 6 - текущие сведения об эксперте; 7 -таблица компетентности экспертов проекта;
8 - информация об экспертах проекта; 9 - информация о прогрессе выпол-
нения экспертизы;
10 - индивидуальные экспертные оценки; 11 - информация о необходимости корректировки экспертных оценок; 12 - агрегированные оценки, принятые аналитиком для экспорта в базу данных модулей поддержки принятия решений (БД модулей ППР); 13 - информация о вариации и согласованности экспертных оценок в ходе всех проведенных экспертиз; 15 - информация о достоверности оценок по экспертам.
ЛИТЕРАТУРА
1. Андрейчиков, А.В. Системный анализ стратегических решений в инно-ватике. Математические, эвристические и интеллектуальные методы системного анализа и синтеза инноваций / А.В.Андрейчиков, О.Н.Андрейчикова. -М. Книжный дом «ЛИБРОКОМ», 2012. 304 с.
2. Новиков, д.А. Механизмы управления - конструктор для управленцев / Д.А.Новиков // Управленческое консультирование. - 2011. № 3(43). — С.5-16.
3. Zakharova, A.A. Developing the structure and structural patterns for a system to support strategic decision making using expert knowledge / A.A.Zakharova, E.V.Telipenko, V.V.Ostanin // 11th International Forum on Strategic Technology (IFOST - 2016): Proceedings: in 2 vol., Novosibirsk, June 1-3, 2016. - Novosibirsk: NSTU, 2016. - V.2 - PP. 497-501
4. Zakharova, A.A. Models used to select strategic planning experts for high technology productions / A.A.Zakharova, A.A.Grigorjeva, A.P.Tseplit, E.V. Ozhogov // IOP Conference Series: Materials Science and Engineering. - 2016. - V.127. - №. 1, Article number 012029.
