УДК 519.2
Стенин А. А.1, Губский А. Н.2, Польшакова О. М.3
Д-р техн. наук, профессор, Национальный технический университет Украины «КПИ», Украина 2Аспирант кафедры технической кибернетики, Национальный технический университет Украины «КПИ», Украина,
E-mail: andrew.gubskiy@gmail.com 3Старший преподаватель, Национальный технический университет Украины «КПИ», Украина
ЭКСПЕРТНАЯ ОЦЕНКА ДЕЯТЕЛЬНОСТИ ОПЕРАТОРОВ ___________________ЭРГАТИЧЕСКИХ СИСТЕМ__________________________________
В настоящее время поиск путей совершенствования эргатических систем ведется по целому ряду направлений. В данной статье выделяется направление, связанное с переоценкой роли человеческого фактора. Настоятельная необходимость развития именно этого направления связана с тем, что для современных эргатических систем существенно изменились функциональное назначение и роль в них человека-оператора. При экспериментальном исследовании операторской деятельности используется, в большинстве случаев, метод экспериментальных оценок. При этом формирование согласованной группы экспертов является одним из решающих факторов получения достоверных данных. Для формирования такой группы экспертов в настоящей статье предложен алгоритм целенаправленного просмотра и фильтрации экспертной группы. Кроме того, в статье определены этапы экспертной оценки деятельности операторов эргатических систем и задачи, решаемые на каждом из этих этапов.
Ключевые слова: эргатическая система, оператор, экспертная оценка, коэффициент конкордации.
В настоящее время проблема совершенствования операторской деятельности приобрела особую остроту в современных системах управления технологическими процессами и сложными подвижными объектами, или, иными словами, в эргатических системах (ЭС). От ее решения зависит дальнейшее повышение эффективности как уже эксплуатируемых систем «человек-техника», так и вновь разрабатываемых производственно-технологических комплексов и подвижных объектов. Оператор таких систем принимает, как правило, наиболее ответственные решения, причем от правильности его действий, умения своевременно найти и реализовать верное в сложной ситуации решение, зависит не только эффективность поставленных перед ним задач, но, в ряде случаев, целостность объекта управления и безопасность людей.
При количественном или качественном описании комплекса внешних взаимосвязей человека-оператора и его внутренних процессов можно выделить следующие группы характеристик операторской деятельности в ЭС [1]:
- аппаратурные;
- функциональные;
- индивидуальные;
- внешней среды;
- организационные.
Основными особенностями деятельности человека-оператора в сложных эргатических системах являются:
- человек-оператор управление объетом осуществляет с помощью органов управления, используя информационную модель;
- в процессе управления человеку-оператору приходиться решать такие задачи, возникновении которых нельзя предвидеть заранее.
© Стенин А. А., Губский А. Н., Польшакова О. М., 2013
Так как ЭС должна обеспечивать благоприятный исход при любых воздействиях, то отсюда следует необходимость обеспечения высокой надежности оператора, характеризующейся в первую очередь, его высоким профессиональным уровнем подготовки. Под этим уровнем согласно [2] понимается способность человека-опе-ратора выполнять определенную деятельность с определенным качеством, определенных совокупностью специальных знаний, умений и навыков.
При экспериментальном исследовании операторской деятельности ис-пользуют, как правило, метод экспертных оценок [3].
В самом общем виде деятельность оператора эргати-ческой системы можно представить циклически повторяющейся последовательностью этапов:
- восприятие информации, необходимой для выполнения профессиональных функций в эргатической системе;
- обработка полученной информации и принятие решений по реализации управляющих воздействий;
- контроль и анализ полученных результатов.
Очевидно, что конкретное содержание этих этапов,
значимость решаемых оператором задач, особенности взаимодействия с другими элементами системы и внешней средой, наконец, учет индивидуальных характеристик самого оператора, в большинстве случаев, можно получить только экспериментальным путем. В частности, диапазон возможных отклонений параметров объекта управления в разных режимах работы от нормальных (эталонных) для существующей ЭС можно получить из опыта эксплуатации, а для проектируемой ЭС - имитационным моделированием с учетом опытных квалифицированных операторов, т.е. экспертных оценок.
В общем случае, использование метода экспертных оценок при экспериментальном исследовании операторской деятельности позволяет:
- осуществить научно-обоснованный выбор из всего множества функциональных характеристик челове-ка-оператора некоторого подмножества, элементы которого в наибольшей степени информативны с точки зрения достижения целей управления;
- учесть множество факторов, для которых, по каким-либо причинам, не могут быть получены количественные оценки;
- в условиях недостаточного объема априорной информации о процессах функционирования ЭС получить статистически достоверный материал для последующего анализа и оценки состояния компонентов ЭС и, в том числе, эргатического звена;
- решить существующую проблему многозначности, многомерности и качественного различия показателей, используемых при получении обобщенных оценок эффективности операторской деятельности в ЭС.
Принимая во внимание рекомендации, содержащиеся в [4], можно определить следующие этапы проведения исследования операторской деятельности с помощью метода экспертных оценок.
I этап. Постановка задачи и определение целей исследований, формирование совокупности вопросов, которые должны быть решены в ходе исследования.
II этап. Формирование группы подготовки проведения экспертизы для подготовки опросных таблиц, методов опроса и так далее. Организаторами экспертизы решается вопрос выбора уровня детализации при заданном подмножестве оцениваемых экспертами показателей.
III этап. Формирование экспертной группы для проведения опроса. Проведение опроса по специальным анкетам одним из выбранных методов опроса [3].
Формирование группы экспертов с высоким коэффициентом конкордации является одной из наиболее сложных и ответственных задач, стоящих перед организаторами экспертизы и требующих особо тщательного рассмотрения. Это связано с опасностью потери оригинальных суждений эксперта с одной стороны, и с другой - наличием маскирующего эффекта слабых экспертов, что естественно значительно снижает качество экспертизы. Ниже предлагается алгоритм выявления слабых экспертов, основанный на использовании коэффициента кон-кордации. Он заключается в следующем:
Шаг 1. Формируется опорное множество экспертов М о.
Шаг 2. Рассчитывается коэффициент конкордации Ж (М о) для опорного множества экспертов.
Шаг 3. Строится множество экспертов Мо (і), получающееся из опорного удалением г-го эксперта.
Шаг 4. Рассчитывается коэффициент конкордации
Ж[Мо (г)] для множества Мо (г).
Шаг 5. При выполнении неравенства
\Ж [М о(г)]-Ж (М о) >5| г-й эксперт исключается из опорного множества М о(г).
Шаг 6. Число М о оставшихся в опорном множестве экспертов сравнивают с критическим Мк и, при М0 < Мк, множество М0 становится опорным, а г принимает новое значение. После этого переход к шагу 3. В противном случае работа алгоритма закончена. Величина М к не может быть выбрана формальными методами, ее значение выбирается эвристически в каждом конкретном случае.
Для расчета коэффициента конкордации и оценки его значимости используем алгоритм, предложенный в [4]: Шаг 1. Производится ранжирование оценок данных экспертами и формируется матрица X, где х ц - ранг присвоенный }-м экспертом г-й характеристике.
Шаг 2. Определяется сумма рангов по каждой характеристике, полученная от всех т экспертов
/ -ч
5г = Е Х1 ( = 1 п ) 1=1
(1)
Шаг 3. Вычисляется сумма разностей между членами суммарной ранжировки и членами ряда, составленного из средних значений а = о,5т (п +1)
£ = Е|Е Х1-------о,5т(п + 0|
(2)
Шаг 4. Если в ранжировках присутствуют совпадающие ранги, коэффициент конкордации вычисляется по формуле
Ж = £ /
1 2 I 3
—т ~ 12
і=112 ;-=1
(3)
где ґ г - число повторений і-го ранга в|-м ряду В противном случае коэффициент конкордации вычисляется по формуле
Ж = 12£ / т-
' (п3 - п).
(4)
Шаг 5. Определяется число степеней свободы V = п-1.
Шаг 6. Если в ранжировках присутствуют совпадаю-
2
щие ранги, значение Храсч. вычисляется по формуле
X
расч.
= £ /
і і т 1/ч
1 тп(п +1)-— Е — Е(П-и )
2 '' ’ п -11=1\2^г '
а в противном случае
,2
Храсч. тЖ (п 1).
(5)
(6)
2
Шаг 7. Для данного числа степеней свободы и уровня доверительной вероятности р = 1 -5 находим табличное
2 2
значение Хтабл. Если Храсч. > Хтабл, найденное значение Ж считаем значимым.
IV этап. Анализ и обработка информации, полученной от экспертов с целью принятия решения по поставленной задаче.
Таким образом, учитывая вышеизложенное, становятся ясными проблемы научно обоснованного построения эргатических систем. И эти проблемы, в первую очередь, требуют системного анализа деятельности в них человека-оператора, без которого сам процесс создания эргатических систем становится неуправляемым и, как правило, консервативным, т. е. придерживающимся апробированных ранее решений. В этом смысле экспертная оценка деятельности оператора эргатических сис-
тем является хорошим инструментарием согласования вопросов взаимодействия человека с техникой в эргати-ческих системах.
СПИСОК ЛИТЕРАТУРЫ
1. Губинский, А. И. Надежность и качество функционирования эргатических систем / А. И. Губинский. - Л. : Наука, 1982. - 27о с.
2. Автоматизированные обучающие системы профессиональной подготовки опереторов ЛА / Под ред. Шукшу-нова В. Е. - М. : Машиностроение, 1986. - 24о с.
3. Бешелев, С. Л. Математические методы экспертных оценок / С. Л. Бешелев, Ф. Г. Гурвич. - М. : Статистика, 198о. - 263 с.
4. Зайцев, В. С. Системный анализ операторской деятельности / В. С. Зайцев. - М. : Радио и связь, 199о. - 12о с.
Стаття надійшла до редакції 24.о1.2о13.
Стенін О. А.1, Губський А. М.2, Польшакова О. М.3
1 Д-р техн. наук, професор, Національний технічний університет України «КПІ», Україна 2Аспірант кафедри технічної кібернетики, Національний технічний університет України «КПІ», Україна 3Старший викладач кафедри технічної кібернетики, Національний технічний університет України «КПІ», Україна ЕКСПЕРТНА ОЦІНКА ДІЯЛЬНОСТІ ОПЕРАТОРІВ ЕРГАТИЧНИХ СИСТЕМ
В даний час пошук шляхів вдосконалення ергатичних систем ведеться по цілій низці напрямків. У даній статті виділяється напрямок, пов’язаний з переоцінкою ролі людського фактора. Нагальна необхідність розвитку саме цього напрямку пов’язана
з тим, що для сучасних ергатичних систем істотно змінилися функціональне призначення та роль в них людини-оператора. При експериментальному дослідженні операторської діяльності використовується, в більшості випадків, метод експериментальних оцінок. При цьому формування узгодженої групи експертів є одним з вирішальних чинників отримання достовірних даних. Для формування такої групи експертів у цій статті запропоновано алгоритм цілеспрямованого перегляду та фільтрації експертної групи. Крім того, у статті визначено етапи експертної оцінки діяльності операторів ергатичних систем і завдання, які вирішуються на кожному з цих етапів.
Ключові слова: ерготична система, оператор, експертна оцінка, коефіцієнт конкордації.
Stenin A. A.1, Gubskiy A. N.2, Polshakova O. N.3
1Dr. Sc. Science, Professor, National Technical University of Ukraine «KPI», Ukraine 2Graduate student, National Technical University of Ukraine «KPI», Ukraine 3Senior Lecturer, National Technical University of Ukraine «KPI», Ukraine EXPERT EVALUATION OF THE ERGATIC SYSTEMS OPERATORS ACTIVITY
At present time, search for ways of improving ergatic systems is going on several fronts. The article highlights the direction related to the reevaluation of the role of the human factor. The urgent need for the development of this trend is due to the fact that for modern ergatic systems the function and role of human operator in them have changed. In the experimental study of the operators, in most cases, the method of experimental evaluations works. The formation of a coherent group of experts is one of the crucial factors to obtain reliable data. In this paper order to form such a group of experts an algorithm of focused view and filtration of the expert group was proposed. Furthermore, the article defines the stages of the peer review for ergatic system operators and tasks at each of these stages.
Keywords: ergatic system operator, expert evaluation, coefficient of concordance.
REFERENCES
1. Gubinskij A. I. Nadezhnost’ i kachestvo funkcionirovanija ergaticheskih sistem. Leningrad, Nauka, 1982, 270 p.
2. Shukshunova V. E. : pod red. Avtomatizirovannye obuchajushhie sistemy professional’noj podgotovki operetorov LA. Moscow, Mashinostroenie, 1986, 240 p.
3. Beshelev S. L., Gurvich F. G. Matematicheskie metody jekspertnyh ocenok. Moscow, Statistika, 1980, 263 p.
4. Zajcev V. S. Sistemnyj analiz operatorskoj dejatel’nosti. Moscow, Radio i svjaz’, 1990, 120 p.