CC BY
70
> jiijjijjijgjjijjijjiijijjijjiS ИНТЕГРАЦИЯ ОБРАЗОВАНИЯ
и рельеф», по математике (http://attend.to/ doom) — «Оригами». В число этапов олимпиады входят: конкурс приветствий; обучающие семинары для учащихся и учителей, конкурсные туры, где обязательно должно присутствовать практическое задание, интересное для участников; подведение итогов и выпуск электронного методического сборника проекта.
Внушительную коллекцию ссылок на образовательные сайты, сгруппированную по школьным предметам, предлагает сайт Федерации интернет-образования (http://www.fio.ru) в разделе «Рейтинг образовательных электронных ресурсов». Автор данной статьи на своем сай-
те, расположенном в Интернете по адресу http://www.sura.ru/dikov, одну из страниц посвятил структурированному и постоянно пополняемому списку ссылок на образовательные ресурсы Интернета.
ПРИМЕЧАНИЯ
1 См.: www.iis.ru/library/riss/riss.ru.html
2 См.: Ястребцева Е.Н., Быховский Я.С. Моя провинция — центр Вселенной: Развитие телекоммуникационной образовательной деятельности в регионах. М., 1999.
3 См.: Хуторской А.В. Современная дидактика. СПб., 2001.
4 См.: Хуторской А.В. Интернет в школе: Практикум по дистанционному обучению. М., 2000.
Поступила 28.G1.G4.
ПРИМЕНЕНИЕ ГЕНЕРАТОРОВ В КОМПЬЮТЕРНЫХ ТЕХНОЛОГИЯХ ОБУЧЕНИЯ
С.И. Борисов, ведущий программист лаборатории инструментальных систем моделирования и обучения Томского университета систем управления и радиоэлектроники,
В.В. Кручинин, зав. лабораторией инструментальных систем моделирования и обучения Томского университета систем управления и радиоэлектроники, зам. директора по научной работе Томского межвузовского центра дистанционного образования
В статье рассматривается класс программ учебного назначения, предназначенных для генерации вопросов. Описываются обобщенная структура и алгоритм работы. Приводятся основные свойства генераторов и конкретные примеры генераторов для организации тестового контроля. Показана технология использования генераторов в компьютерных тренажерах и учебниках на основе опыта Томского межвузовского центра дистанционного образования.
A class of education programs, designed to use for test questions generation is considered. Generalized structure and operation algorithm are described. Basic properties of the generator program(s) are listed. Examples of generator programs are provided, ready to apply for educational knowledge testing process organization. A tested technology of generator programs as applied in computer training programs and textbooks is considered. Experience of generator(s) application in a real educational institution in Tomsk interuniversity center of distance education is given for consideration.
Одним из важнейших элементов тех- няющие рефераты. Имеются сайты, ко-
нологии обучения является действенный торые предоставляют услуги по реше-
контроль знаний. Организация контроля нию задач, курсовых проектов и пр., что
знаний (входного, промежуточного и ито- также приводит к созданию соответству-
гового) не обходится без выдачи неко- ющего банка ответов и решений.
торого тестового задания. Если количе- Проблема плагиата в Интернете — ство этих заданий сравнительно невели- одна из сложнейших1. Некоторые фирмы
ко, то за короткое время может быть предлагают программные системы, ко-
создан компьютерный банк ответов, ре- торые могут анализировать текст на
шений и т.п. Подтверждением тому слу- предмет заимствования2. Можно также
жат многочисленные сайты, распростра- использовать поисковые сервера, вста-
© С.И. Борисов, В.В. Кручинин, 2004
ІІІІІІІІІІІІИ № 4,
вив в поля окна поиска требуемый фрагмент. Однако это требует существенных затрат на организацию соответствующей проверки.
Опыт, накопленный в Томском университете систем управления и радиоэлектроники (ТУСУР) при организации дистанционного обучения, показывает, что наиболее действенной является выдача уникального, индивидуального задания каждому студенту. Это достигается за счет применения программных генераторов тестовых заданий.
Обобщенная структура генератора
Генератор — это программная система, которая синтезирует тестовое задание. Обобщенная структура такой системы показана на рис. 1.
Р и с. 1
База знаний содержит полную информацию для генерации задания. Если задание — задача, то база знаний содержит банк шаблонов формулировок задач, области изменения параметров задач, алгоритм нахождения решения или проверки наличия решения, алгоритм изменения значений параметров. Если задание — последовательность вопросов, то
могут использоваться разнообразные модели и алгоритмы генерации вопросов3.
Параметры генерации задания задают начальные значения параметров генерации и ограничения на тип генерируемых заданий. Начальные значения параметров генерации могут быть получены на основании: 1) датчика случайных чисел; 2) индивидуальных параметров студента: фамилия, имя, отчество, место и дата рождения, семестр и пр.; 3) некоторого унифицированного кода, присваиваемого студенту при поступлении в вуз.
Уникальное тестовое задание является конечной целью работы генератора и представляется на некотором декларативном языке для последующего этапа визуализации. Например, генераторы в системе «Фея» формируют тестовое задание на языке представления теста этой системы4. Можно также представлять тестовые задания на языке Tex5 или XML6.
База параметров выданных заданий предназначается для двух основных целей:
1) идентификации задания, выполненного студентом. Опыт, накопленный в Томском межвузовском центре дистанционного образования (ТМЦДО), показывает, что некоторые студенты присылают ответы или решения не на те задания, которые им были выданы;
2) оперативного анализа и исправления ошибок. Генераторы — сложные программы, отладка которых является достаточно сложным делом. Проверить его работоспособность во всех случаях практически невозможно.
Алгоритм работы генератора (рис. 2) зависит от типа задания и моделей представления знаний.
Рассмотрим основные шаги работы алгоритма.
1. Выбор параметров и элементов задания — это, собственно говоря, шаг, на котором производится синтез задания. Выбор осуществляется, как правило, на основе использования датчика случайных чисел, что в некоторых случаях существенно снижает параметры
ИНТЕГРАЦИЯ ОБРАЗОВАНИЯ
Р и с. 2
генерирующего алгоритма. Если параметры генерировать от входных параметров студента, то необходимо подбирать хеш-функции, которые вычисляли бы значения ключей. Хорошие результаты дает использование алгоритмов нумерации, которые перечисляют все варианты заданий данного алгоритма генерации7.
2. Проверка семантики задания — важный шаг, поскольку не всякая комбинация параметров может привести к решению задачи. В простейшем случае следует проверить некоторую формулу, например: подкоренное выражение не должно быть меньше нуля. В более сложных случаях — разработать специальный алгоритм семантического контроля.
3. Формулировка задания — шаг, на котором производится преобразование внутреннего представления тестового задания на некоторый декларативный язык. Поскольку текст задания может содержать формулы, рисунки, таблицы и пр., то нужно использовать язык описания документа для какого-либо конкретного пакета.
Отметим, что если задание можно разбить на части, то приведенный обобщенный алгоритм (см. рис. 2) применим к каждой отдельной части, поэтому весь генератор может представлять собой многократную итерационную схему.
Перечислим основные свойства генератора:
1) мощность;
2) управление последовательностью генерации;
3) управление сложностью тестового задания.
Мощность генератора — это количество возможных вариантов заданий, которые он может получить. При разработке генератора нужно оценить его мощность, в некоторых случаях это трудно сделать, поскольку связь между отдельными генерируемыми элементами задания может оказаться довольно сложной.
При проведении тестирования в компьютерных классах тестовые задания на двух соседних компьютерах должны быть, по крайней мере, не похожими друг на друга. В результате встает задача установки семантического расстояния между двумя сгенерированными заданиями и управления генерацией с учетом этого расстояния.
Еще одним важным свойством генератора является возможность управления сложностью задания. В простейших случаях генератор выдает задания одной и той же сложности. В некоторых технологиях требуется генерировать задания с разной сложностью, начиная, как правило, с простых и заканчивая самыми сложными8.
Генераторы для тестового контроля знаний
Задача построения генераторов тестовых заданий и вопросов возникла при организации тестового контроля знаний в дистанционной технологии обучения. Опыт создания и использования компьютерных контрольных работ и экзаменаторов, накопленный в Томском межвузовском центре дистанционного образова-ния9, показал, что:
№ 4, 2004
1) студенты быстро приспосабливаются к небольшому (100—300 вопросов) компьютерному экзамену, заготавливают шпаргалки;
2) происходит простое механическое запоминание ответов на данный вопрос, поскольку в ответ нужно ввести конкретное число или выбрать конкретный вариант;
3) при одновременной сдаче экзамена в компьютерном классе вопросы для разных студентов могут быть одни и те же.
Таким образом, уменьшается эффективность проведения экзаменационных сессий и контрольных точек. Для устранения указанных недостатков было предложено использовать генераторы тестовых заданий и вопросов.
Рассмотрим пример, в котором нужно вычислить определитель 5-го порядка10.
В общем случае для формулировки данной задачи необходимо сгенерировать соответствующую матрицу, дискриминант которой должен быть не равен нулю. Далее, применяя алгоритм вычисления определителя, найти его значение. Использовать эту задачу для тестирования студентов автор нашел нецелесообразным и предложил вариант матрицы специального вида:
0 b c a1 a2
1 x y z u
0 b c +1 a3 a4
0 b c + 2 a5 a6
0 b c + 3 a7 a8
Для такого вида матрицы определитель считается по формуле
О = -Ь((а5 + а\ - 2аз)(а8 + а<\ - 2а6) -
- (а7 + аз - 2а5)(аб + а2 - 2а4)), (1)
где генерируются параметры Ь, с, х, у, г, и, {а}, причем параметры с, х, у, г, и могут быть любыми, Ь не равно нулю. Множество параметров генерируется из условия неравенства нулю определителя. Зная свойства разложения матрицы при вычислении определителя, сравни-
тельно легко найти решение поставленной задачи. Тогда алгоритм генератора будет следующий.
Шаг 1. Генерируем любые значения для параметров c, x, y, z, и.
Шаг 2. Генерируем значения для b и множества параметров {а}.
Шаг 3. Вычисляем значение D по формуле (1).
Шаг 4. Если D равно нулю, то повторяем шаг 2.
Шаг 5. Формулируем задание с полученными параметрами и записываем правильное решение.
Данный пример показывает, что алгоритм решения задачи может быть существенно упрощен. Но количество вариантов заданий является огромным числом, даже при таком упрощении. Например, если каждый значимый параметр будет иметь по 10 значений, то общее число вариантов может быть порядка 109.
Другой пример взят из генератора компьютерных экзаменов по информатике11.
Дан целочисленный массив длиной 8. Массив необходимо отсортировать по возрастанию. Массив дан после n шагов пузырьковой сортировки. Введите через пробел элементы массива после n + 1 шага.
n изменяется от 1 до 5, первые n элементов уже отсортированы. Элементы массива случайным образом задаются в диапазоне от 1 до 99.
Ниже приведен алгоритм сортировки на языке Паскаль.
{сортировка пузырьковым методом}
procedure Bubble;
var
ij: index; x: item; begin
for i := 2 to n do begin
for j := n downto i do
if a j-1].key> a[j].key then begin
x := a j-1]; a j-1] := a j]; aj] := x; end;
end;
end; {конец сортировки пузырьковым методом}
ИНТЕГРАЦИЯ ОБРАЗОВАНИЯ
Генерируя случайно значения для элементов массива и значения для п, получим конкретное тестовое задание. Количество конкретных тестовых заданий будет вычисляться по формуле V = 998 • 5.
Это позволяет практически каждому студенту дать индивидуальное задание.
Важным дополнительным требованием к генераторам для тестовых заданий является необходимость получения правильного решения или ответа. Это накладывает новые ограничения на генераторы такого вида, а с другой стороны, позволяет автоматизировать контроль. Например, студент присылает по электронной почте протокол контрольной работы в форме компьютерного тестирования, который получает генератор. Этот протокол содержит параметры студента, контрольной работы и ответы на сгенерированные тестовые задания, введенные студентом. В центре протокол может быть открыт и просмотрен программой — почтовым роботом.
Генераторы заданий в тренажерах
Компьютерные тренажеры являются необходимым инструментом, позволяющим студентам закреплять знания по различным дисциплинам.
Генераторы в тренажерах также играют существенную роль, однако цели их применения другие. Они позволяют:
1) каждый раз получать текст задачи с новыми числовыми данными. Благодаря этому студент не привыкает к конкретному числу, а учит алгоритм решения;
2) управляя классами задач и их сложностью, определить слабые места студента и тем самым способствовать более полному изучению предмета;
3) существенно переработать методическое обеспечение курса, что приводит к более глубокому пониманию сути предмета и методам написания и представления методического обеспечения.
Рассмотрим генерацию задания для тренажера «Найти предел функции» в компьютерном учебнике по математике12.
В общем виде функция может выглядеть, например, следующим образом:
lim
sin(ax" + b)
х® е-0 схт + й В данном случае присутствуют 7 переменных, для которых генерируются значения в различных диапазонах, например:
Ь,ее [-9,9]; а,се[1,9]; п,те[1,3] .
Отличие от генерации аналогичных тестовых заданий заключается в том, что пользователь (студент) может сам задать начальные значения (например, если ему встретилась аналогичная задача в его контрольной работе) либо сгенерировать их автоматически. На рис. 3 показана форма для запроса у студента начальных данных.
ПпспоЛк ппрмкпми зшркавг
a- 1 : Jt- L : *- 0 i
— 1 i 1- i -- • i
О У
Р и с. 3
Разумеется, студент может задать различные данные, в том числе такие, для которых решение задачи не имеет смысла или невозможно. Чтобы избежать этого, предусмотрены специальные способы контроля.
Для указанного примера введем функции P(x) = sin(ax" + b) и Q( x) = cxm + d. Для контроля введем правило: если
P(g) • Q(q) * 0.
Пусть, например, были введены следующие начальные данные: а = 3, n = 1, b = 0, c = 1, m = 1, d = 0, g = 0. Тогда функция принимает вид:
lim
x®1+0
sin(3x) x3 -1 .
№ 4, 2004
Заключение
В настоящее время в ТМЦДО внедрены и эксплуатируются свыше 20 генераторов тестовых зданий общим объемом более 2 000 шаблонов и алгоритмов, для различных дисциплин, таких как математика, физика, иностранный язык, микроэлектроника, цифровая схемотехника, информатика. Опыт показывает, что различные базы правильных ответов и решений, в том числе и шпаргалок, становятся ненужными. В результате студенты не ищут готовых решений, а основательно готовятся к указанным предметам.
Разработаны и внедрены 2 компьютерных учебника по высшей математике, охватывающие соответственно 2 семестра изучения этой дисциплины в техническом вузе. В этих компьютерных учебниках реализованы около 180 тренажеров. Во всех тренажерах присутствует генерация начальных данных по указанной технологии.
Генераторы становятся одним из важных классов компьютерных учебных программ, поднимающих компьютерные технологии обучения на более высокий уровень.
ПРИМЕЧАНИЯ
1 См.: Кузьменков О.И. Проблемы сетевого плагиата (http://www.library.by/shpargalka/belarus/ 007/657.htm).
2 См.: Groark M., Oblinger D., Choa M. Term paper Mills, Anti-Plagiarism Tools, and Academic Integrity // EDUCOUSE Review / 2001. Sept./Oct.
P. 40—48; Mike H., Friesner T. Plagiarism and Poor Academic Practice — A Threat to the Extension of e-Learning in Higher Education? // Electronic Journal of e-Learning. V. 2. Iss. 1 (Febr. 2004). P. 89—96 (http://www.ejel.org/volume-2/vol2-issue1/issue1-art25-hart-friesner.pdf).
3 См.: Башмаков А.И., Башмаков И.А. Разработка компьютерных и обучающих систем. М., 2003; Кручинин В.В. Разработка компьютерных учебных программ. Томск, 1998.
4 См.: Кнут Д. Компьютерная типография. М., 2003.
5 См.: Mathematical Markup Language
(MathML) Version 2.0 (Second Edition) (http:// www.w3.org/TR/MathML2).
6 См.: Дмитриева H.M., Кручинин В.В., Сит-никова Е.А. Технология разработки компьютерных учебных работ и экзаменаторов в Томском межвузовском центре дистанционного образования // Тез. докл. семинара «Электронные учебники и учебно-методические разработки в открытом образовании». М., 2000. С. 69—70.
7 См.: Кручинин В.В. Генераторы в компьютерных учебных программах. Томск, 2003.
8 См.: Аванесов В.С. Теория и методика педагогических измерений (http://testolog.narod.ru).
9 См.: Организация всестороннего контроля знаний студентов в дистанционной технологии обучения / Кручинин В.В. и др. // Новые информационные технологии в университетском образовании: Тез. докл. междунар. науч.-метод. конф. Новосибирск, 2003. С. 72—73.
10 См.: Кручинин В.В., Магазинников Л.И. О повышении качества контролирующих материалов // Материалы науч.-метод. конф. Томск, 2002. С. 69.
11 См.: Молочко М.В., Тимченко С.В. Генераторы по информатике в компьютерных экзаменах // Материалы регион. науч.-техн. конф. «Современное образование: инновации и конкурентоспособность». Томск, 2004. С. 105.
12 См.: Борисов С.И., Дмитриева H.M., Долматов А.В., Кручинин В.В., Ситникова Е.А., То-миленко В.А. Компьютерный учебник по математике. Ч. 1 // Тез. докл. семинара «Электронные учебники и учебно-методические разработки в открытом образовании». С. 46—48.
Поступила 30.08.04.
