CC BY
5
УДК 373.1
Арыкбай А.М. студент 4 курс
факультет «Испытания летательных аппаратов»
Филиал «Восход» МАИ Иванова А.С. студент 3 курс
факультет «Испытания летательных аппаратов»
Филиал «Восход» МАИ Научный руководитель: Шестопалова О.Л., к.т.н., доцент декан факультета «Испытания летательных аппаратов»
ИО зав. кафедрой «Информационные технологии испытаний и управления» Филиал «Восход» МАИ Казахстан, г. Байконур Arykbay A.M. a student of the 4th course Faculty "Testing of aircraft" Filial branch "Voshod" MAI Ivanova A.S. the student of the 3-rd course Faculty "Testing of aircraft" Filial branch "Voshod" MAI Scientific director: Shestopalova O.L., Ph.D., Associate Professor
dean of the Faculty "Tests of aircraft" Head Department of Information Technologies of Testing and
Management Filial branch "Voshod" MAI
Baikonur
МЕТОД АДАПТИВНОГО ТЕСТИРОВАНИЯ ПО ТЕХНИКЕ БЕЗОПАСНОСТИ УЧАЩИХСЯ ОБЩЕОБРАЗОВАТЕЛЬНОГО УЧРЕЖДЕНИЯ METHOD OF ADAPTIVE TESTING OF STUDENTS SAFETY OF THE GENERAL EDUCATION INSTITUTION Аннотация: Данная статья посвящена актуальному на сегодняшний день вопросу - обучению технике безопасности. В статье рассматриваются способы проверки знаний обучаемого. Значительное внимание уделяется использованию адаптивного метода тестирования. Проанализированы преимущества этого метода по сравнению с традиционными формами тестирования.
Ключевые слова: техника безопасности, тестирование, адаптивный метод, вопросы, баллы, тестируемый, эффективная оценка.
Abstract:This article is devoted to the actual issue to date - training in safety engineering. The article examines ways of testing the learner's knowledge.
Considerable attention is paid to the use of the adaptive testing method. The advantages of this method are compared with traditional forms of testing.
Key words: safety engineering, testing, adaptive method, questions, scores, tested, effective evaluation.
С каждым годом обучение технике безопасности становится все актуальней. Но как проверить знания после обучения, в безопасных для обучаемого условиях. Одним из способов проверки знаний тестируемого после обучения является тестирование.
Для более глубокого анализа знаний обучающихся, предлагается использовать адаптивный метод тестирования.
Преимуществами компьютерного адаптивного тестирования (КАТ) по сравнению с традиционными формами тестирования являются:
- бланковое тестирование требует гораздо большей подготовки к проведению, следовательно, является более затратным;
- моментальный вывод результата тестирования, что обеспечивает обратную связь с клиентом;
- обеспечение большей степени секретности (отсутствие бумаг, которые можно скопировать) более того, в компьютере содержатся не сами тесты, а банки заданий, из которых формируются варианты;
- возможность включения большего разнообразия заданий включено в тест (например, возможность использования различных графических заданий, использовать различные цвета, анимацию, видео, звук);
- возможность автоматической фиксации времени выполнения каждого задания;
- возможность реализации адаптивного тестирования.
Отличительные особенности компьютерного адаптивного
тестирования по сравнению с не адаптивными формами тестирования:
- каждый тестируемый получает свой собственный набор заданий, поэтому и содержание, и длина теста могут отличаться для разных испытуемых;
- каждый тестируемый оценивается индивидуально (на своем уровне) с минимальной ошибкой измерения.
Основными преимуществами КАТ по сравнению с традиционными формами тестирования являются:
- эффективность: требуется существенно меньше заданий для оценивания уровня подготовленности тестируемого;
- точность: возможность оценить уровень подготовленности каждого испытуемого на его уровне с минимальной ошибкой измерения;
- тестируемые не тратят время и силы на задания, не соответствующие их уровню подготовки (слишком легкие для них или слишком трудные), поэтому уменьшается влияние на результаты дополнительных факторов (утомление, беспокойство, неаккуратность);
- участники тестирования более мотивированы и спокойны (т.к. им не предлагается заданий, слишком для них трудных).
Адаптивное тестирование учитывает относительную трудность каждого вопроса и процент соотношения правильных ответов. В основе последовательности вопросов в обучающем тесте лежит алгоритм «идеального» теста. Основу идеального теста составляет линейно-иерархический (последовательный) тест из 30 вопросов возрастающего уровня сложности. При правильных ответах на 30 вопросов тестируемый набирает 100 баллов. Максимальное количество баллов 100 выбрано для удобства формирования оценки. При выборе другого значения максимального балла для формирования оценки необходимо было бы создать шкалу перевода, что является избыточным. Тест, содержащий минимум 30 заданий, позволяет достоверно судить о знаниях клиента.
Адаптация к тестируемому, в данном случае базируется на следующей модели одного вопроса теста. Представленный на рисунке 1.1 граф описывает диалог при ответе тестируемого на любой вопрос последовательности «идеального» теста.
Вершинами графа являются предлагаемые тестируемому вопросы, а ребра отражают связь между ними при правильных (Пр), неправильных (Нп) и неточных (Нт) ответах тестируемого.
В общем случае диалог построен на 4-х вопросах:
#¿1- базовый вопрос текущего уровня сложности;
В12- вопрос аналогичный вопросу В¿1;
В^3- наводящий вопрос;
#¿4- вопрос минимальной трудности;
В1+1>]- другой базовый вопрос из текущего/следующего уровня сложности;
К^и К^2- комментарии, выдаваемые в случаях неточного или неправильного ответа на наводящий вопрос или вопрос минимальной трудности соответственно.
Правильно
Рисунок 1.1 - Процедура формирования перечня вопросов текущего уровня
сложности
При построении теста формируется эффективная оценка знаний
тестируемого. Правильный ответ на вопрос оценивается пропорционально
его уровню сложности.
Максимальное количество баллов, которое тестируемый может
набрать на г-м уровне сложности, вычисляется по выражению (1.1): г. 100 . -т—^
Я1 = = 1 , Ы,
(1.1)
где ^ - количество баллов; i - номер уровня сложности; N - количество уровней сложности.
При этом на каждом уровне сложности предполагается к^ базовых вопросов текущего уровня сложности, которые формируют «идеальный» тест (1.2):
30 -
к1 = (Ы-1 + 1)х-^Л = 1 , N.
(1.2)
В тестирование тестируемого учитывается 5 уровней сложности. Тогда для каждого из пяти уровней сложности количество вопросов, рассчитанное по формуле (1.2) равно
I г 30 „ _
к! = 5 X — = 10;
1 15 30
к2 = 4 X — = 8;
2 15 30
к3 = 3 X — = 6;
3 15 30
к4 = 2 X — = 4;
1
I -1 30 „ _
к5 = 1 х — = 10.
5 15
При прохождении тестируемым теста учитываются не только базовые вопросы, являющиеся основой «идеального» теста, но и - вопрос аналогичный вопросу В^1; В^3 - наводящий вопрос; В^4 - вопрос минимальной трудности, поэтому число баллов на г-м уровне сложности обычно меньше чем ^. Этим достигается адаптация к уровню знаний тестируемого. Если тестируемый отвечает только правильно, то он пройдет «идеальный» тест и наберет 100 баллов. Таким образом, каждый уровень сложности предполагает выдачу тестируемому такого количества вопросов. При этом тестируемый теряет баллы в случаях неправильного или неточного ответа, таким образом, итоговый балл по тесту может отличаться от 100. Тестирование включает в себя вопросы с единственным и множественным выбором ответа.
Вес вопроса (количество баллов, получаемое тестируемым при
правильном ответе на любой вопрос) для г-го уровня сложности (1.3): 1
^ = . (1.3)
Изначально количество баллов тестируемого Я=0. Первым шагом является вывод на экран базового вопроса текущего уровня сложности. Далее анализируется тип вопроса. Существует два типа вопросов: вопрос с одиночным выбором ответа и с множественным выбором.
Переход на следующий уровень сложности N теста осуществляется обязательно, как только тестируемый выполнит к^, / = 1 , N, заданий для текущего уровня сложности, где к^, / = 1 , N, включают в себя все (^¿1... ^¿4) вопросы теста. Если все уровни сложности пройдены, осуществляется вывод на экран конечного балла тестируемого.
Алгоритм процесса прохождения вопроса с одиночным выбором ответа.
Первым шагом является обработка ответа тестируемого. Далее анализируется правильность ответа. При правильном вариантом ответа тестируемому начисляется максимальное количество балов. При неправильном ответе на базовый вопрос, тестируемый не получает балов, выводится наводящий вопрос.
При правильном ответе на наводящий вопрос на экран выводится вопрос минимальной трудности. Тогда количество набранных тестируемым
балов в первом случае равно (1.4):
Чвц
г1'=-?, (1.4)
где - вес текущего базового вопроса.
В случае неправильного ответа на наводящий вопрос или вопрос минимальной трудности выводится комментарий, разъясняющий поставленный вопрос. В случае правильного ответа на вопрос минимальной трудности, бал, присвоенный тестируемому, рассчитывается по формуле
(1.4).
Алгоритм процесса прохождения вопроса с множественным выбором ответа.
Обрабатывается ответ тестируемого. Далее анализируется правильность ответа. При правильном ответе тестируемому, начисляется количество балов, рассчитанное по формуле (1.2). Для вопроса множественного выбора вводится понятие неточного ответа, когда тестируемый выбирает не все правильные ответы. При неточном ответе на вопрос с множественным выбором тестируемый набирает количество балов,
которое рассчитывается по формуле (1.5):
= (15)
где Nf - число ответов, выбранных неправильно;
NT - число ответов, выбранных правильно;
Nr - число невыбранных правильных ответов
Далее тестируемому предлагается вопрос, аналогичный текущему. При правильном ответе на аналогичный вопрос с множественным выбором тестируемый набирает балл, равный (1.6):
гЦ = ав.. - ав.. X (1--). (1.6)
i у Nf+NrJ v '
При неправильном ответе на базовый или аналогичный базовому вопрос, тестируемый не получает баллов и на экран выводится наводящий вопрос. При неточном ответе на аналогичный вопрос количество баллов рассчитывается следующим образом (1.7):
r!" = qB..- qB.. x(l-^-]-ЧЛЛ = Г{-г''. (1.7)
i у Nf+NrJ 2 1 1 v '
При правильном ответе на наводящий вопрос или неточном ответе на аналогичный вопрос на экран выводится вопрос минимальной трудности. В случае неправильного или неточного ответа на наводящий вопрос или вопрос минимальной трудности выводится комментарий, разъясняющий поставленный вопрос. В случае правильного ответа на вопрос минимальной трудности, балл, присвоенный тестируемому, рассчитывается по формуле (1.4).
Использованные источники:
1.Борисов А.Н., Крумберг О.А., Федоров И.П. Принятие решений на основе нечетких моделей. Примеры использования. - Рига: Зинатне, 1990. - 184 с.
2.Гришина Н. В. Организация комплексной защиты информации. - М.: Гелиос АРВ, 2010. - 624 с.
