Механизмы экспертной оценки военно-технологических программ Текст научной статьи по специальности «Математика»

УДК 004.021 DOI: 10.18698/1812-3368-2017-2-105-117

МЕХАНИЗМЫ ЭКСПЕРТНОЙ ОЦЕНКИ ВОЕННО-ТЕХНОЛОГИЧЕСКИХ ПРОГРАММ

В.Н. Бурков1 [email protected]

Б.Н. Коробец2 [email protected]

В.А. Минаев2 [email protected]

А.В. Щепкин1 [email protected]

1 ИПУ им. В.А. Трапезникова РАН, Москва, Российская Федерация

2 МГТУ им. Н.Э. Баумана, Москва, Российская Федерация

Аннотация

Показано, что успешная реализация военно-технологической программы во многом зависит от механизмов ее оценки, действующих как на этапе разработки программы, так и на этапе ее реализации. Кратко описаны основные механизмы, применяемые при оценке военно-технологической программы. Детально рассмотрены экспертные механизмы формирования программы и разработаны их варианты, характеризующиеся требованием неманипулируемости, отражающем заинтересованность управляющих органов в предоставлении достоверной и объективной информации. Задачи корректной организации экспертных процедур военно-технологической программы можно эффективно решить в рамках теории активных систем, когда руководство Центра организует экспертизу программы в целях получения наиболее точной и объективной оценки, при этом эксперты как активные элементы процесса экспертизы могут выбирать такую стратегию поведения, чтобы полученная на основе процедуры свертки итоговая экспертная оценка максимально соответствовала их интересам. Формализованы основные функции и цели экспертов, а также условия, при выполнении которых в ситуации равновесия по Нэшу на основе достоверных оценок экспертов определяется результирующая оценка, отражающая их согласованные мнения. Доказано утверждение о том, что в ситуации равновесия результирующая экспертная оценка любого эксперта совпадает с его истинной оценкой проекта военно-технологической программы. При этом собственное мнение эксперта о проекте программы не играет никакой роли в определении его рейтинга. Показано, что руководству Центра разумно формировать свою стратегию так, чтобы в процессе проведения экспертизы военно-технологической программы были учтены две крайние ситуации поведения эксперта: 1) стремление отстоять свое мнение; 2) не понизить свой рейтинг

Ключевые слова

Военно-технологическая программа, механизмы экспертного оценивания, активные системы, равновесие по Нэшу, рейтинг эксперта, согласованное мнение

Поступила в редакцию 19.01.2017 © МГТУ им. Н.Э. Баумана, 2017

Во многом успешное выполнение военно-технологической программы (ВТП) зависит от комплекса механизмов ее оценки, действующих как на этапе разработки, программы, так и на этапе реализации. В связи с этим кратко опишем основные механизмы, применяемые при разработке и реализации ВТП [1-7, 11, 12].

Механизмы, обеспечивающие получений достоверной информации. Среди механизмов формирования оценки ВТП можно выделить два базовых механизма.

1. Экспертные механизмы, предполагающие, чтобы оценки требуемых параметров ВТП определялись группой экспертов — специалистов в соответствующих областях. Основное требование к экспертным механизмам — неманипулируемость, отражающая заинтересованность экспертов в предоставлении достоверной и объективной информации. Экспертные механизмы в основном целесообразно применять при оценке военно-технического уровня (ВТУ) военной техники, научно-технического уровня (НТУ) военных разработок, научного уровня научно-исследовательских работ (НИР), а также при определении граничных уровней имеющегося и перспективного вооружения (ниже мирового уровня, на мировом уровне, выше мирового уровня). Кроме того, экспертные механизмы применяют при оценке рисков создания изделий военного назначения.

2. Механизмы встречного планирования, связанные с получением информации о проектах ВТП (затраты, время реализации, уровень изделий, риски исполнения) от самих исполнителей. При этом главное требование к механизмам встречного планирования заключается в обеспечении требуемой надежности сообщаемых оценок (понимается вероятность непревышения планируемых сроков и планируемых затрат).

Механизмы опережающего самоконтроля. Основная задача таких механизмов — обеспечение заинтересованности исполнителей работ в своевременности информирования о возможных отклонениях фактических продолжи-тельностей и затрат от планируемых с тем, чтобы вовремя разработать и осуществить корректирующие воздействия на ВТП.

Механизмы комплексного оценивания. Указанные механизмы должны обеспечивать комплексную оценку состояния ВТП и применяются при формировании состава проектов, включаемых в нее.

Механизмы финансирования. Предполагается три типа их реализации:

1) механизмы прямого (бюджетного) финансирования, с помощью которых определяют требуемые бюджетные средства на основе затрат на проекты, включенные в ВТП;

2) механизмы совместного финансирования, состоящего из бюджетных средств и собственных средств организаций и предприятий, включенных в ВТП;

3) механизмы согласия, применяемые при распределении средств между финансированием роста ВТУ изделий, финансированием роста научно-технического потенциала (опытно-конструкторских работ (ОКР)) и финансированием роста научного потенциала (НИР).

Экспертные механизмы при формировании военно-технологических программ. Отметим следующее: ВТУ вооружений может задаваться формальным образом с использованием некоторой математической модели. Однако с учетом определенных сложностей вследствие многофакторности их описания часто применяют проверенный временем и практикой метод экспертной оценки (экспертизы). Кратко этот метод характеризуется следующими положениями:

— в решении участвует группа высококвалифицированных экспертов;

— решение базируется на опыте и интуиции экспертов;

— решение формируется в виде коллективного экспертного суждения, получаемого на основе агрегирования индивидуальных суждений экспертов.

Существует достаточно много надежных методов получения экспертных оценок ВТП [8, 9]. В одних методах предполагают, что с каждым экспертом работают отдельно, и он высказывает свое мнение независимо от авторитетов. Другие — ориентированы на совместную подготовку материалов для лиц, принимающих решения (ЛПР). При этом эксперты обсуждают проблему друг с другом, учатся друг у друга, и неверные мнения отбрасываются в ходе совместных дискуссий. Еще одни статистические методы проверки согласованности и усреднения мнений позволяют принимать обоснованные решения о ВТП.

При организации экспертизы для получения качественных и обоснованных оценок экспертов, необходимо учитывать тот факт, что даже, если эксперт абсолютно независим, он заинтересован в повышении своего рейтинга, который зависит от того, насколько часто при проведении экспертиз его оценка совпадает с результирующей оценкой всех экспертов относительно тех или иных аспектов ВТП.

Смоделируем функционирование организационной системы, в которой эксперты заинтересованы в «лоббировании» своих или чужих интересов. Система состоит из Центра — организатора экспертизы — и игроков-экспертов.

Задача Центра — организовать экспертизу некоторого проекта в ВТП в целях получения его наиболее точной и объективной оценки.

Задача экспертов — выбрать такую стратегию поведения, сообщая оценки об исследуемом объекте, чтобы полученная на основе процедуры свертки итоговая экспертная оценка максимально соответствовала интересам эксперта.

Формальная модель. Введем следующие обозначения: N = {1, 2, ..., п} — множество экспертов; г — истинная оценка проекта для г-го эксперта; si — оценка, которую дает г-й эксперт при проведении экспертизы, Si е [й; В], й, В — нижняя и верхняя границы оценки; х — результирующая экспертная оценка.

Предположим, что результирующую оценку определяют на основе некоторой функции свертки л:^), т. е. х = л^).

Целевая функция г-го эксперта записывается в виде

/ =[п-л($)]2е N. (1)

Цель эксперта — выбор такой стратегии поведения, которая позволит минимизировать целевую функцию.

Примем, что функция свертки л(5) представляет собой усреднение всех экспертных оценок. Общий вид усреднения оценок представим в виде [10]

Г JL5JT ^1/Ь

, ..., Sn ) = | I

^q=1 n )

Для b = 1 получаем среднее арифметическое всех оценок

^(s) =1 tsi. (2)

n,=i

Для b = -1 среднее гармоническое всех оценок составляет

( ) n

Е(1/Si)

i=1

При b ^ 0 получаем среднее геометрическое всех оценок [10]

«(* ) =

П Si

j=1

1/n

Рассмотрим формирование результирующей оценки экспертов как средней арифметической всех оценок, т. е. в соответствии с процедурой (2).

Анализ формальной модели. Прежде всего, необходимо выяснить условия существования ситуации равновесия. Для определенности, в качестве решения поставленной задачи рассмотрим ситуацию равновесия по Нэшу, т. е. такую ситуацию 5*, что

[г, * )]2 = гтт ] [п 5}*,, г)]2 , » е N.

Утверждение 1. Если истинные значения экспертов удовлетворяют условию

Г1 > Г2 >...> Гп, (3)

а экспертную оценку определяют в соответствии с (2), то ситуация равновесия по Нэшу существует и она имеет вид

51 = 52 = ... = 5}-1 = В, 5} = ПГ, -( ]-1) В-(П - ]) й, 5*+1 = 5 }+2 = ...= $п = й. (4)

◄ Из определения средней величины [10] следует справедливость неравен-

ства

1 n

r >~Z Г > rn

nt=1

Очевидно, что эксперт номер 1 для минимизации целевой функции будет стремиться увеличить экспертную оценку до тех пор, пока не будет выполняться равенство

Г1 =

S1 + Z r

i=2

n

и значение его целевой функции достигнет минимума, равного нулю.

Если указанного равенства достичь не удастся, эксперт номер 1 выбирает максимальную возможную оценку: 51 = В.

Легко заметить, что при увеличении экспертной оценки эксперта номер 1 целевая функция эксперта п будет увеличиваться, и можно предположить, что для минимизации целевой функции он будет стремиться уменьшать свою экспертную оценку до тех пор, пока не выполнится равенство

п-1

51 + Z Г + 5п

1=2

Гп =

n

Если равенства достичь не удастся, п-й эксперт выбирает минимальную возможную оценку: 5п = й.

Аналогичные рассуждения можно провести для экспертов номер 2 и п-1 и т. д. Нетрудно заметить, что найдется такой номер *, для которого возможны три варианта:

1) 51 = 52 = ... = 5*-1 = В и 5= 5*+1 = ... = 5п = й;

2) 5* = 52 = ... = 5** = В и 5*+1 = 5*1+2 = ... = 5*п = й;

3) 5* = 52 = ... = 5*-1 = В и 5* = 5**+1 = ... = 5*п = й.

Для первого варианта выражение (2) можно записать в виде

=

j-1 п

Z d + s j + Z <

i=1_j=j+1

n

(5)

для второго

)=

для третьего

j n

Z D + Z <

i=1 i=j+1

n

j-1 n

Z D + Z<

i=1 i=j

n

В общем виде выражение (5) можно переписать как

= . (б)

п

Используя (6), целевую функцию каждого эксперта можно представить в виде

f =

r -

(j - 1)D + 5 * + (n - j )d

п

Из (6) также следует справедливость неравенств

(\ -1) Б + 5 * + (п - \) й

п >^--1—^-при х < _/;

п

(\ -1) Б + 5 * + (п - ]) й

п < ^--1—^-при х > ).

п

При х < ) уменьшить значение целевой функции х-й эксперт не может, так как оценка, которую он дает, уже находится на верхней границе. Соответственно, при X > ) уменьшить значение целевой функции х'-й эксперт также не может, поскольку его оценка уже расположена на нижней границе.

При ситуации равновесия оценка )-го эксперта определяется из условия

( -1) Б + +(п - ) )й

отсюда следует 5** = пт^ -(] -1) Б -(п - ])й. Таким образом, доказано утверждение о том, что в ситуации равновесия результирующая экспертная оценка _/-го эксперта совпадает с его истинной оценкой проекта ВТП. ►

Следствие 1. Если истинные значения экспертов удовлетворяют условию

Т1 > Т2 >...> тк > Тк+1 = ... = Тк+1 > тк + I + 1 > ... > Тп, (7)

то возможно существование нескольких ситуаций равновесия по Нэшу.

Действительно, в силу (6) для условия (7) в ситуации равновесия по Нэшу результирующая экспертная оценка имеет вид

к +1

кБ + X 5* +(п - к -1 )й ) =-^-,

при этом справедливо выражение

k +1

kD + X 5* +(n-k-l)d

rk+1 = Гк+2 = ... = Г =--. (8)

n

n

Из (8) следует, что

I

X з* = птк+1 - кБ-(и - к - 1)й, (9)

г=к+1

это означает, что эксперты к + 1, к + 2, ..., к+ I дают результирующую экспертную оценку, равную их истинной оценке проекта, в случае, когда сумма их оценок удовлетворяет условию (9). Таким образом, существует несколько ситуаций равновесия по Нэшу, причем их число определяется числом способов форми-

к +1

рования суммы X 5*, для которой выполняется условие (9).

г=к+1

С учетом изложенного, если рейтинг эксперта тем выше, чем ближе сообщенная им оценка к результирующей оценке, то целевую функцию — рейтинг г-го эксперта — можно рассчитать как

„ А-Г $г-п($ )]2 , ч

£ =-1 „ ' * , г е N (10)

В

где А и В — некоторые коэффициенты, с помощью которых устанавливаются максимальный и минимальный рейтинги.

Если принять, что минимальный рейтинг эксперта равен т, а максимальный — М, то коэффициенты А и В определяют из условий:

м=А;

л -

m =-

D D + (n - 1)d

B

Откуда легко получить

(n -1)2 (D - d)2 , ч

B = V ,'tK-^ ; (11)

n2

(M - m)

(и -1)2 (Б - й)2 , ч

А = МУ—(-). (12)

и2 (М - т)

Таким образом, целевую функцию г-го эксперта можно представить как

и2(М-т) г , чп2

/{ = М--Ц-[-л^)]2, г е N.

(и -1)2 (Б - й)

В частности, при 10-балльной шкале рейтингования (т. е. М = 10, а т = 1), из (11) и (12) получаем

А = 10 (и-1)2 (Б - й)2 ; В = (и-1)2 (Б - й)2 .

9n2 9n2

л -10 "(mW f-(s )—

В этом случае f max = 10, а fi min = 1.

Согласно (10), собственное мнение эксперта о проекте ВТП не играет никакой роли в определении рейтинга самого эксперта.

В настоящей работе были рассмотрены две крайние ситуации поведения эксперта: получение результирующей оценки, максимально приближенной к собственной, либо дать такую же оценку, как и все. Как правило, указанные ситуации не всегда способствуют поступательному развитию перспективных вооружений.

Практика проведения экспертиз ВТП свидетельствует о том, что истина посередине. В связи с этим руководству Центра необходимо формировать свою стратегию так, чтобы эксперты учитывали обе крайние ситуации, т. е. стремились отстоять свое мнение и не понизить свой рейтинг. В этом случае целевую функцию i-го игрока можно записать в виде

f-Ф-n(s)]2 + Р( " "))2 f* ~*(s)]2, i - N, (13)

(п-1) (D-d)

где а — коэффициент, характеризующий заинтересованность эксперта в том, чтобы результирующая оценка была как можно ближе к его истинной оценке проекта; Р — коэффициент, отражающий заинтересованность эксперта в повышении своего рейтинга (в том, чтобы сообщенная им оценка максимально совпала бы с результирующим мнением всех экспертов, участвующих в оценке проектов).

Следовательно, целью i-го эксперта является выбор такой стратегии поведения, которая позволила бы минимизировать целевую функцию (13), т. е.

f

найти ситуацию равновесия, решив систему уравнений —- - 0, i е N:

dsi

г / s) „ n2(M-m) r , Ч1

-2а fr-n(s)]——-2Р-Ц-'—Ist-nis)]

h WJ d* P(n-1)2 (D-d) WJ

dsi

-0, i е N. (14)

Для функции щ (5), определяемой по выражению (2), решение системы (14) имеет вид

s* а(п-1 )(D-d)2 r +1 i Рп2 (M -m) i n

1 а(п -1 )(D - d )2 Рп2 (M -m)

X r}, i е N. (15)

j-1

Лемма. Чтобы для равновесных оценок выполнялось условие si е [d; D], достаточно выбрать такие коэффициенты а и р, применительно к которым выполняется условие

а

Р< min{Y2}, (16)

где

Yi = min

(M - m)

d — X rj

П j=i

(n-i))D-d)2 , -i£

n j=i

i n

при ri —X rj < 0;

n j=i

Y2 = min

: (M - m)

D --X rj

П j=i

(n-i)D-d)2 ri -iX

"X rj J

i n

при ri--X rj > 0.

n j=l

◄ Для того чтобы Si*e [d; D] должны выполняться неравенства

а

(n-i)D-d)2 r + i

ßn2 (M - m) ' n

а

(n-i)D-d)2 r + i

ßn2 (M -m) ' n

a(n - i))D - d )2 ßn2 (M -m)

a(n - i)(D - d )2 ßn2 (M-m)

Перепишем эти неравенства в виде

(

i

Л

ri—X rj

v nj=i у

n2 (M - m)

(

(

i

\

ri—X rj

v nj=i

(n - i)(D - d )2 n2 (M - m)

i

X rj d;

j=i

X rj D.

j=i

Л

d—X rj

v nj=i у

(

(n - i)(D - d )2

i

Л

D — X rj

v nj=i у

(i7)

(i8)

i n i n

Поскольку d — X rj < 0, то (i7) при ri —X rj > 0 выполняется всегда. Если

;j=i

• j=i

i

ri —Xrj < 0, то для выполнения (i7) необходимо, чтобы соблюдалось следую-n j=i

щее неравенство:

d — X rj

а < n2 (M - m) n j=i

ß (n -i)(D -d)2 ^ -i XX

(i9)

X r,

n j=i

1 п 1 п

Аналогично, так как Б — X Г - 0, то (18) при г —X Г - 0 выполняется все-

П )=1 п ¿=1

1 п

гда. Если г — X Г > 0, то для выполнения (18) необходимо, чтобы соблюдалось П)=1

неравенство

1 п

а< п2 (М - т) п;=1

Р"(п - 1)(Б - й )2 п -1XX Т; '

п ;=1

Очевидно, что неравенства (19) и (20) выполняются одновременно, если справедливо (16). Следовательно, лемма доказана. ►

Утверждение 2. Если выполнены условия леммы, то значение результирую-

* 1 п

щей экспертной оценки в ситуации равновесия по Нэшу равно я(5 ) = — X Т.

п ;=1

◄ Для доказательства утверждения достаточно сложить все равновесные

п п

значения (15). Действительно, X 5* = X Т) >что и доказывает утверждение. ►

)=1 ;=1

Выводы. Для успешного формирования военно-технологических программ в целом и их частных направлений важно создать и применить адекватные механизмы их оценки — экспертные механизмы, характеризующиеся требованием неманипулируемости, отражающем заинтересованность управляющих органов в предоставлении достоверной и объективной информации.

При построении результирующей экспертной оценки ВТП и включенных в нее проектов, результаты во многом зависят от заинтересованности экспертов. При организации экспертизы для получения качественных и обоснованных оценок необходимо учитывать тот факт, что даже абсолютно независимый эксперт заинтересован в повышении своего рейтинга, который зависит от того, насколько часто при проведении экспертиз его оценка совпадает с результирующей оценкой всех экспертов относительно тех или иных аспектов ВТП.

Задачи корректной организации экспертных процедур эффективно решаются в рамках теории активных систем. При этом задача руководства Центра — организовать экспертизу ВТП или некоторого проекта в ВТП в целях получения наиболее точной и объективной оценки, а задача экспертов как активных элементов процесса экспертизы — выбрать такую стратегию своего поведения, сообщая оценки об исследуемом объекте, чтобы полученная на основе процедуры свертки итоговая экспертная оценка максимально соответствовала интересам эксперта.

При анализе механизма экспертизы необходимо выделить и формализовать основные функции и цели экспертов, а также условия, при выполнении которых в ситуации равновесия по Нэшу на основе достоверных оценок экспертов определяется результирующая оценка, отражающая их согласованные мнения. При реализации рассмотренной модели экспертизы доказано утверждение, свидетельствующее о том, что в ситуации равновесия результирующая экспертная оценка любого эксперта совпадает с его истинной оценкой проекта ВТП. При этом собственное мнение эксперта о проекте ВТП не играет никакой роли в определении рейтинга самого эксперта.

В процессе проведения экспертизы ВТП необходимо учитывать две крайние ситуации поведения эксперта, которые не способствуют поступательному

развитию перспективных вооружений, в связи с чем руководству Центра следует формировать свою стратегию так, чтобы эксперты учитывали обе ситуации, т. е. стремились отстоять свое мнение и не понизить рейтинг.

ЛИТЕРАТУРА

1. Бурков В.Н., Заложнев А.Ю., Леонтьев С.В., Новиков Д.А. Механизмы финансирования программ регионального развития. М.: ИПУ РАН, 2002. 54 с.

2. Бурков В.Н., Кондратьев В.В. Механизмы функционирования организационных систем. М.: Наука, 1981. 384 с.

3. Новиков Д.А., Иващенко А.А. Модели и методы организационного управления инновационным развитием фирмы. М.: ЛЕНАНД, 2006. 332 с.

4. Новиков Д.А. Теория управления организационными системами. М.: Физматлит, 2007. 584 с.

5. Новиков Д.А., Цветков А.В. Механизмы функционирования организационных систем с распределенным контролем. М.: ИПУ РАН, 2001. 118 с.

6. Половинкина А.И. Механизмы совместного финансирования региональной безопасности // Вестник Воронежского государственного технического университета. 2010. Т. 6. № 8. С. 160-164.

7. Bolton P., Dewatripont M. Contract theory. Massachusetts: MIT Press, 2005. 688 p.

8. Гохман О.Г. Экспертное оценивание. Воронеж: Изд-во ВГУ, 1991. 152 с.

9. Литвак Б.Г. Экспертные оценки и принятие решений. М.: Инфра-М, 1996. 271 с.

10. Джини К. Средние величины / пер. с итал.; под ред. Г.Г. Пирогова, С.Д. Горшенина. Новейшие зарубежные статистические исследования. М.: Статистика, 1970. 447 с.

11. Пуликовский К.Б., Щепкин А.В. Комплексная оценка соответствия опасных производственных объектов требованиям безопасности // Безопасность труда в промышленности. 2007. № 2. С. 5-8.

12. Буркова И.В., Киреева Е.А. Механизмы встречного планирования для стимулирования уменьшения ожидаемого ущерба // Научный вестник Воронежского государственного архитектурно-строительного университета. Сер. Управление строительством. 2014. № 1 (6). С. 228-235.

Бурков Владимир Николаевич — д-р техн. наук, профессор, заведующий Лабораторией активных систем Института проблем управления им. В.А. Трапезникова РАН (Российская Федерация, 117997, Москва, ул. Профсоюзная, д. 65).

Коробец Борис Николаевич — канд. юридич. наук, доцент, заведующий кафедрой «Юриспруденция, интеллектуальная собственность и судебная экспертиза» МГТУ им. Н.Э. Баумана, директор Центра защиты интеллектуальной собственности (Российская Федерация, 105005, Москва, 2-я Бауманская ул., д. 5).

Минаев Владимир Александрович — д-р техн. наук, профессор кафедры «Защита информации» МГТУ им. Н.Э. Баумана (Российская Федерация, 105005, Москва, 2-я Бауманская ул., д. 5).

Щепкин Александр Васильевич — д-р техн. наук, профессор, главный научный сотрудник Института проблем управления им. В.А. Трапезникова РАН (Российская Федерация, 117997, Москва, ул. Профсоюзная, д. 65).

Просьба ссылаться на эту статью следующим образом:

Бурков В.Н., Коробец Б.Н., Минаев В.А., Щепкин А.В. Механизмы экспертной оценки военно-технологических программ // Вестник МГТУ им. Н.Э. Баумана. Сер. Естественные науки. 2017. № 2. C. 105-117. DOI: 10.18698/1812-3368-2017-2-105-117

MECHANISMS OF MILITARY AND TECHNOLOGICAL PROGRAMS EXPERT ASSESSMENT

V.N. Burkov1 [email protected]

B.N. Korobets2 [email protected]

V.A. Minaev2 [email protected]

A.V. Shchepkin1 [email protected]

1 V.A. Trapeznikov Institute of Control Sciences, Russian Academy of Sciences, Moscow, Russian Federation

2 Bauman Moscow State Technical University, Moscow, Russian Federation

Abstract

The paper shows that the success of the military-technological program (MTP) is largely dependent on its assessment mechanisms operating both at the program development stage, and at the program implementation stage. The study briefly describes basic mechanisms used in assessment of the MTP development and gives a detailed analysis of the MTP expert mechanisms. In our research we developed the MTP variants characterized by the requirement of non-manipulability, reflecting the interest of the governing bodies in having reliable and objective information. Findings of the research show that the problem of correct organization of the MTP examination is effectively solved within the framework of the active systems theory. In this case, the Centre organizes the MTP examination in order to obtain the most accurate and objective assessment, and experts being active elements of the examination process may choose a strategy of their own behavior so that the final expert assessment would be the most appropriate to their interests. We formalized the experts' basic functions and objectives, as well as the conditions which if fulfilled lead to determining the resulting assessment, reflecting the experts' shared opinion. This could be done in the case of Nash equilibrium and according to reliable evaluation of experts findings. The study proved that the resultant expert assessment of any expert coincides with their true MTP assessment. The expert's own opinion on the program project does not play any role in determining their rating. The study shows that it is reasonable for the Centre to choose the strategy, so that MPT examination takes into consideration two extreme situations in the expert's behavior — the desire to defend their views and not to lower their rating

Keywords

Military-technology program, mechanisms of expert assessment, active systems, Nash equilibrium, expert rating, shared opinion

REFERENCES

[1] Burkov V.N., Zalozhnev A.Yu., Leont'yev S.V., Novikov D.A. Mekhanizmy finansirovaniya programm regional'nogo razvitiya [Funding vehicle of regional development program]. Moscow, ICS RAS Publ., 2002. 54 p.

[2] Burkov V.N., Kondrat'yev V.V. Mekhanizmy funktsionirovaniya organizatsionnykh system [Funding vehicle of organizational systems]. Moscow, Nauka Publ., 1981. 384 p.

[3] Novikov D.A., Ivashchenko A.A. Modeli i metody organizatsionnogo upravleniya inno-vatsionnym razvitiem firmy [Models and methods of administrative control on firm innovative development]. Moscow, LENAND Publ., 2006. 332 p.

[4] Novikov D.A. Teoriya upravleniya organizatsionnymi sistemami [Organizational systems management theory]. Moscow, Fizmatlit Publ., 2007. 584 p.

[5] Novikov D.A., Tsvetkov A.V. Mekhanizmy funktsionirovaniya organizatsionnykh sistem s raspredelennym kontrolem [Functioning mechanism of organizational systems of distributed control]. Moscow, ICS RAS Publ., 2001. 118 p.

[6] Polovinkina A.I. Mechanisms of joint financing regional safety. Vestnik Voronezhskogo gosudarstvennogo tekhnicheskogo universiteta [The Bulletin of Voronezh State Technical University], 2010, vol. 6, no. 8, pp. 160-164 (in Russ.).

[7] Bolton P., Dewatripont M. Contract theory. Massachusetts, MIT Press, 2005. 688 p.

[8] Gokhman O.G. Ekspertnoe otsenivanie [Expert estimation]. Voronezh, VSU Publ., 1991. 152 p.

[9] Litvak B.G. Ekspertnye otsenki i prinyatie resheniy [Expert estimate and decision making]. Moscow, Infra-M Publ., 1996. 271 p.

[10] Corrado Gini. Le medie. Matematice e scienze. UTET, 1958. 512 p.

[11] Pulikovskiy K.B., Shchepkin A.V. Full compliance assessment of hazardous facilities to safety specification. Bezopasnost' truda v promyshlennosti [Occupational Safety in Industry], 2007, no. 2, pp. 5-8 (in Russ.).

[12] Burkova I.V., Kireeva E.A. Counter planning mechanism for stimulation expected damage decreasing. Nauchnyy vestnik Voronezhskogo gosudarstvennogo arkhitekturno-stroitel'nogo universiteta. Ser. Upravlenie stroitel'stvom, 2014, vol. 6, no. 1, pp. 228-235 (in Russ.).

Burkov V.N. — Dr. Sc. (Eng.), Professor, Head of the Laboratory of Active Systems, V.A. Trapez-nikov Institute of Control Sciences, Russian Academy of Sciences (Profsoyuznaya ul. 65, Moscow, 117997 Russian Federation).

Korobets B.N. — Cand. Sc. (Juri.), Assoc. Professor, Head of Legal Studies, Intellectual Property and Forensics Department, Bauman Moscow State Technical University, Director of Intellectual Property Protection Center (2-ya Baumanskaya ul. 5, Moscow, 105005 Russian Federation).

Minaev V.A. — Dr. Sc. (Eng.), Professor of Information Security Department, Bauman Moscow State Technical University (2-ya Baumanskaya ul. 5, Moscow, 105005 Russian Federation).

Shchepkin A.V. — Dr. Sc. (Eng.), Professor, Chief Research Scientist of V.A. Trapeznikov Institute of Control Sciences, Russian Academy of Sciences (Profsoyuznaya ul. 65, Moscow, 117997 Russian Federation).

Please cite this article in English as:

Burkov V.N., Korobets B.N., Minaev V.A., Shchepkin A.V. Mechanisms of Military and Technological Programs Expert Assessment. Vestn. Mosk. Gos. Tekh. Univ. im. N.E. Baumana, Estestv. Nauki [Herald of the Bauman Moscow State Tech. Univ., Nat. Sci.], 2017, no. 2, pp. 105-117. DOI: 10.18698/1812-3368-2017-2-105-117