CC BY
43
УДК 681.03.06:37.004
В.В. Марков, Е.С. Рура ПОДСИСТЕМА КОНТРОЛЯ ЗНАНИЙ НА ОСНОВЕ ИСПОЛЬЗОВАНИЯ ТЕХНИКИ НЕЧЕТКОГО ПРОГРАММИРОВАНИЯ*
Работа посвящена проектированию подсистемы тестового контроля знаний на основе использования техники нечеткого программирования. Показана методика формирования стратегии контроля на основе нечетких оценок ответа и предложен аппарат вычисления текущих интегральных оценок для её построения. Рассмотрен алгоритм функционирования подсистемы на основе нечеткой модели экзаменатора с динамическим формированием стратегии контроля. Использование предложенной подсистемы тестирования позволит повысить объективность и адекватность оценки знаний обучаемых.
Нечеткая модель экзаменатора; качество ответа; нечеткая интегральная оценка ответов; динамическая стратегия управления контролем.
V.V. Markov, E.S. Ruhra TESTING KNOWLEDGE SUBSYSTEM BASED ON TECHNIQUE OF FUZZY PROGRAMMING
The work deals with the design of the test control subsystem of knowledge through the use of techniques of fuzzy programming. The method of forming a control strategy based on fuzzy evaluation is shown and the technique of calculation of the current integrated estimates for its construction is offered. The algorithm of the operation of subsystem based on fuzzy model of examiner with the dynamic formation control strategy is described. Using the proposed testing subsystem will improve the objectivity and value assessment of trainee's knowledge.
Fuzzy model of the examiner; quality of response; fuzzy integral evaluation of the responses; dynamic strategy of control.
Введение. В настоящее время в современном обществе широко развивается и внедряется дистанционное и автономное обучение на базе компьютерных технологий. Отличительной особенностью таких методов образования является максимальная самодостаточность и независимость от внешних ресурсов что позволяет реализовывать образовательный процесс в любом месте и в любое времени и является неоспоримым преимуществом автономного и дистанционного обучения.
Одним из ключевых моментов реализации таких методов обучения являются методика и инструментарий контроля знаний, по результатам которых строится траектория процесса обучения. К сожалению, современные средства контроля знаний (тестовые системы) далеко не всегда могут дать объективную оценку уровня знаний обучаемого [1]. Причина этого, в первую очередь, кроется в используемых методиках оценки знаний с помощью компьютерных технологий
Для решения данной проблемы предлагается использование тестовой системы, основанной на нечеткой модели экзаменатора. Благодаря такому подходу тестовая система позволяет оценивать не просто правильность ответа, а совокупное общее качество ответов обучаемого. Эта функция реализуется на основе нечетких оценок качества ответов и оперирования значениями функции принадлежности [2, 3].
1. Архитектура процесса контроля. Процесс контроля можно представить как аналог процесса в некоторой системе управления, где управляющие воздействия отображаются контрольными вопросами, а отклики на них - ответами [7, 9]. В этом случае архитектура процесса контроля может выглядеть следующим образом (рис. 1):
*
Работа выполнена при частичной поддержке РФФИ (проект № 13-07-00537).
Рис. 1. Архитектура процесса контроля
Целью контроля является слежение за объектом контроля и оценка его состояния текущего и итогового после заданной совокупности контролирующих воздействий. Под контролирующими воздействиями будем понимать базовые (тип 1), дополнительные (тип 2) и уточняющие (тип 3) вопросы и задания. Модель объекта контроля А тогда можно представить следующим образом:
A={aij}; i=1,n; j=[1,3], (1)
где i - количество сегментов области контроля; j - вид контролирующего воздействия (тип контрольного вопроса); aij - реакция объекта контроля на контролирующее воздействие (ответ обучаемого). Очевидно, что для любого ответа можно определить его качество R, т.е. соответствие эталонному ответу, через значение функции принадлежности:
V a1jeA^3R(A/a1j£A); R(A/a1j)^^(a1j); ^(aij)eM = [0,1], (2)
где ^(aiJ) - значение функции принадлежности (показатель качества ответа). Показатель качества ответа может быть определен с применением алгоритмов, описанных в [4].
Далее, достигнутое для текущего контролирующего воздействия Т качество ответа, в свою очередь, определяет тип последующего воздействия С:
VMa!j) — g 1,Р; aPPFig"* ^jmin < ^(aij)< ^jmax , (3)
то есть, для любого сегмента контроля могут быть назначены предельные значения качества реакции объекта, определяющие тип и характер последующего воздействия на объект. Фактически, выделение предельных значений подразумевает создание системы правил и, как следствие, формулирование стратегии контроля. Указанные правила могут быть зафиксированы следующим образом:
0,85<u(aijKl, jT=1—-jc=1;
0,7<^(a!^<0,85,jT=1^jc=2;
0,55<^(al])<0,7, j t=1 —c=3;
0,45<u(aj)<0,55, jT=1—jc=3;
0,45<^(ai+ij)<0,55, jT=3—jc=3;
0<^(atj)<0,45, jT=1—jc=1;
0<^(ai+1j)<0,45, jT=1— jc=0 (4)
Приведенные правила, которые, по сути, и определяют стратегию контроля, можно проиллюстрировать шкалой качества ответов (рис. 2):
Диапазон Диапазон Диапазон
Диапазон неудовлетворительного Диапазон 2 доп. дополнительного Уточняющего принятого
ответа аолросов вопроса вопроса ответа
_______________Л.
f 1 ' 1
п 0,05 ОД 0.15 0,2 0,25 03 0,35 0,4 0,45 , _ 0,55 0,6 0.65 0,7 0.75 0,8 0,85 0,9 0,95
0 0,50 1
Рис. 2. Шкала влияния качества ответов /и(а^) на выбор стратегии контроля
Как уже указывалось выше, формирование стратегии контроля осуществляется динамически, поэтому возникает необходимость определения текущих интегральных оценок функции принадлежности цш1, С другой стороны, собственно результаты по отдельным сегментам контроля не позволяют построить саму функцию принадлежности. Разрешение ситуации возможно с помощью эмпирических правил:
Мпі = Мі,1 - Масі , если Иі,1> Иу (5)
(6)
Mint = М,1 + Масі > если Иг,1< Mij ІМ,і -М*'
Мact
к
(7)
М,,
где ^ас1 - вклад в текущую оценку функции принадлежности качества ответа на дополнительный или уточняющий вопрос; к - весовой коэффициент для дополнительного ( =2) или уточняющего 0=3) вопроса.
Суммарная оценка качества знаний по всем фрагментам контроля может быть определена, в соответствии с [5], следующим образом:
и =___________N__________. (8)
И 1 1 1
-----1------ъ.......
АпЙ ИтИ Итги
Завершающим этапом контроля является дефаззификация дефаззификация полученной суммарной оценки качества ответов по всем сегментам контроля, вычисленная в соответствии с (8). Формально операция дефаззификации может быть сведена к определению соответствия полученного значения итоговой функции принадлежности заранее выбранной четкой шкале (например, системе ESTC).
2. Структура системы. Структура системы контроля, реализующая приведенную выше методику организации контроля, показана на рис. 3.
Рис. 3. Структура системы контроля знаний
В основу построения системы положена нечеткая модель экзаменатора [2, 6, 8]. Функциональное назначение блоков, реализующих эту модель, заключается в следующем:
♦ блок лингвистической оценки на основе специальных алгоритмов [4] обрабатывает ответ обучаемого и сравнивает его с эталонным, т.е. определяет качество ответа на текущий вопрос;
♦ блок генерации количественного значения функции принадлежности (ФП) на основании установленного качества ответа определяет текущую интегральную оценку значения ФП;
♦ блок оценки текущей цели контроля определяет, достигнута ли локальная или глобальная цель контроля. Если достигнута локальная цель, то, на основе рассчитанных результатов, формируется дальнейшая стратегия контроля. По достижении глобальной цели осуществляется дефаззификация итогового результата контроля;
♦ блок стратегии контроля определяет следующее контролирующее действие для реализации дальнейшего контроля;
♦ блок реализации контролирующего воздействия выбирает из БД соответствующее контрольное задание и предъявляет его обучаемому.
Заключение. Предложенный подход к решению задачи контроля знаний, базирующийся на нечеткой модели экзаменатора и технике нечеткого программирования позволяет с высокой степенью полноты и достоверности оценить уровень знаний обучаемого, позволяет, в отличие от большинства существующих тестовых систем, использовать расширенную базу вопросов, ориентированных на развернутые ответы обучаемого. Экспериментальные исследования программной реализации предложенной структуры показали справедливость описанной методики контроля и предложенных структурных и алгоритмических решений. особенности функционирования подсистемы тестового контроля знаний на основе использования техники нечеткого программирования.
БИБЛИОГРАФИЧЕСКИЙ СПИСОК
1. Горовая Т.Ю. Современные системы компьютерного тестирования: аналитический обзор // Историческая и социально-образовательная мысль. - 2013. - № 1 (17). - С. 79-80.
2. Марков В.В. Методика извлечения и оценки знаний на основе нечеткой модели экзаменатора // Известия ЮФУ. Технические науки. - 2011. - № 7 (120). - С. 137-141.
3. Курейчик В.М. Особенности построения систем поддержки принятия решений // Известия ЮФУ. Технические науки. - 2012. - № 7 (132). - С. 92-98.
4. Марков В.В., Луцан М.В. Организация тестового контроля знаний на основе нечеткой модели экзаменатора // Известия ЮФУ. Технические науки. - 2010. - № 7 (108).
- С. 242-248.
5. Конышева Л. К. Основы теории нечетких множеств. - Изд-во Питер, 2011. - 192 с.
6. Бова В.В., Курейчик В.В., Нужнов Е.В. Проблемы представления знаний в интегрированных системах поддержки управленческих решений // Известия ЮФУ. Технические науки. - 2010. - № 7 (108). - С. 107-113.
7. Кравченко Ю.А. Метод создания математических моделей принятия решений в многоагентных подсистемах // Известия ЮФУ. Технические науки. - 2011. - № 7 (120).
- С. 141-145.
8. Родзин С.И. Вычислительный интеллект: немонотонные логики и графическое представление знаний // Программные продукты и системы. - 2002. - № 1. - С. 20-22.
9. Кравченко Ю.А. Применение метода анализа иерархий в алгоритме принятия решений с учетом ряда параметров адаптации // Известия ЮФУ. Технические науки. - 2012. - № 7 (132). - С. 247-253.
Статью рекомендовал к опубликованию д.т.н., профессор М.М. Ошхунов.
Марков Владимир Васильевич - Федеральное государственное автономное образовательное учреждение высшего профессионального образования «Южный федеральный университет»; e-mail: vlavas-m@yandex.ru; 347928, г. Таганрог, Некрасовский, 44; тел.: 88634371651; кафедра систем автоматизированного проектирования; доцент.
Рура Егор Сергеевич - e-mail: tranc0327@yandex.ru; кафедра систем автоматизированного проектирования; студент.
Markov Vladimir Vasilievich - Federal State-Owned Autonomy Educational Establishment of Higher Vocational Education “Southern Federal University”; e-mail: vlavas-m@yandex.ru; 44, Ne-krasovskiy, Taganrog, 347928, Russia; phone: +78634371651; the department of computer aided design; associated professor.
Ruhra Egor Sergeevich - e-mail: tranc0327@yandex.ru; the department of computer aided design; student.
