CC BY
48
УДК 51-77, 378. 146
М. Ю. Катаев, С. Г. Катаев
ПОДХОД К КОНТРОЛЮ ЗНАНИЙ В ВИРТУАЛЬНОЙ ОБРАЗОВАТЕЛЬНОЙ СРЕДЕ
Предлагается подход к контролю знаний в виртуальной образовательной среде, отличающийся от известных методик взвешенной суммой временных затрат при прохождении учащимся контрольных тестов и полученных успешных ответов. Предлагается алгоритм контроля знаний, показывающий успешность обучения в рамках изучаемой дисциплины.
Ключевые слова: образовательный процесс, виртуальная образовательная среда, контроль знаний.
Введение
Концепция модернизации российского образования на период до 2020 г. одной из ключевых приоритетных задач подразумевает обеспечение государственных гарантий - доступности и равных возможностей получения полноценного образования, достижение нового современного качества профессионального образования. Основные усилия по реализации реформы сегодня сосредоточены на усилении роли информационных технологий в образовательном процессе [1].
В настоящее время все более широкое распространение получают электронные обучающие системы (ЭОС), работающие в среде Интернет [2]. Это позволяет связать источники информации (электронные наборы учебных материалов, базы знаний и др.), программные среды, преподавателей и учащихся в едином информационно-образовательном пространстве или виртуальной образовательной среде (ВОС). Существует множество ЭОС, разрабатываемых различными вузами и организациями на основе собственных представлений о процессе обучения, объеме предоставляемых знаний, контроле знаний и различных других аспектах. Это приводит к тому, что невозможным становится сравнивать образовательные процессы в различных вузах, степень обученности и др.; назревает существенная необходимость в разработке некоторых общих положений, относительно которых должен строиться тот или иной образовательный процесс.
Одним из наиболее значимых вопросов, определяющих работоспособность ВОС, является разработка системы контроля знаний (СКЗ) учащегося. Организация СКЗ должна обладать следующими свойствами:
- обеспечивать корректные оценки получаемых знаний,
- быть адаптивной к различным типам дисциплин,
- допускать автоматизацию,
- быть контролируемой в процессе получения знаний (обратная связь).
В статье приводится описание подхода к контролю знаний в виртуальной образовательной сре-
де, дающего возможность учащемуся в автоматическом режиме получить заданный объем знаний по изучаемой дисциплине.
Виртуальная образовательная среда
Процессы развития теоретических и технических основ информатизации, компьютерной техники, повсеместное использование Интернета приводят к значительным изменениям системы образования. Реализация непрерывного и дистанционного образования [3], повышения квалификации и решения задач самостоятельной работы студентов возможна с помощью технологии обучения в виртуальной образовательной среде. Параметрами ВОС, обеспечивающими эффективность коммуникации между участниками процесса обучения, являются: возможность получения полной информации по изучаемой дисциплине без поиска, наличие обратной связи, удаленность и возможность обучения индивидуально.
Контроль знаний
Одной из форм контроля знаний и успеваемости в вузовском образовании является рейтинговая система [4-8]. Рейтинговая система повышает уровень мотивации учащихся к освоению учебного материала путем более высокой дифференциации оценки их учебной работы за счет возможного повышения ритмичности их работы, формирования более ответственного отношения и своевременного выполнения заданий, мотивации к выполнению заданий более высокого уровня сложности и др. Однако, несмотря на положительные качества, эта система имеет недостатки, связанные с трудоемкостью разработки оценочных средств, индивидуальных затрат преподавателя на проведение контроля результатов обучения, нормированием знаний, умений, навыков и личностных качеств учащихся в баллах и др.
Современные вычислительные и коммуникационные решения позволяют создавать современные. более эффективные формы тестирования, основанные на адаптации тестов к уровню знаний учащегося. Несмотря на все плюсы данной формы тестирования, при ее применении нет возможности кор-
ректировать процесс обучения, если в этом есть необходимость.
Методика
Нами предполагается, что материал лекций, лабораторных и курсовых работ можно разбить на линейную последовательность (рис. 1).
Рис . 1. Структура лекционного материала
На рис. 1 показана в качестве примера линейная структура лекционного материала, где каждая лекция разделена на определенные преподавателем темы. Эта структура является типичной и не вызывает больших проблем при ее разработке. Традиционная форма контроля знаний подразумевает суммарный контроль по определенным частям лекционного материала с выборочной формой выбора вопросов. Этот элемент вносит случайность в определении уровня знаний и в принципе не позволяет оценить знания и умения по всем элементам учебного материала. В виртуальной образовательной среде появляется возможность контроля каждого этапа обучения в показанной форме (рис. 2).
веты, учет сложности вопросов, повторов, и на основе его выводов принимается решение о повторе изучения материала темы или переход к следующей теме.
В итоге, после завершения изучения учебного материала в результате работы всех блоков анализа можно рассчитать время ответов на все задания тестов (вопросы, практические задания) по формуле
Т = iТ = iiТ , (!)
1=1 1=1 j =1
здесь i = I,.../ - число блоков материала (например лекций); j = 1,...J - число тем в каждом элементе блока i; J - суммарное время изучения i-го блока материалов (лекции); Ту - суммарное время изучения j-й темы i-го блока материалов.
Более детально время выполнения тестирования всех элементов учебного материала можно оценить по следующему выражению:
I Ji
Kij Mij
т = Hv
i=1 j=1 k=1 m=1
(2)
Повтор материала Рис . 2 . Контроль знаний с помощью тестов
На рис. 2 показан блок изучения определенной темы учебного материала, последующего тестирования и анализа. Тестирование предполагает структуру вопросов по изученной теме, включающей в себя основные определения, смысловые тематические понятия и примеры (если они присутствуют в данной теме). Все вопросы разбиты по нескольким уровням сложности, и учащийся вправе выбирать вопросы определенной сложности, имея в виду величину итоговой оценки (на уровне простых вопросов невозможно получить высокую оценку). Под анализом понимается блок, который проводит измерение времени на от-
где 8^ - показывает в каком тесте j для /-го блока материала необходимо провести повторное тестирование; Юу - показывает уровень сложности теста j для /'-го блока материала (например, ю может принимать значения 1, 2 или 3); k = 1,...,К/] - число повторов при прохождении теста j для /-го блока материала; т = 1,...М] - число вопросов теста j для /-го блока материала; tijm - время прохождения т-го вопроса для j теста /-го блока материала.
В выражении (2) считается, что при выполнении тестирования ]-й темы /-го блока материалов все вопросы относятся к одному уровню сложности. Смена сложности может происходить только при повторном тестировании. Например, студент не справился с тестом самого высокого уровня сложности и при повторном тестировании может перейти на более низкий уровень сложности теста. Это выражение позволяет также учитывать изменение сложности теста от одной темы к другой.
Если же вопросы теста являются смешанными по сложности, тогда формула (2) может быть переписана:
* J kjMJ со., t..
т = Ц Ц ■ vm vm
Mij
=1 j=1 k=1 m=1
(3)
о
где - уровень сложности т-го вопроса для] теста /-го блока материала.
В точности по такой же формуле можно подсчитать и суммарную величину правильных ответов 2. полученных в ходе тестирования.
2 = 1 г,=£ 1 2, (4)
і=1 і=1 і=1
здесь 2 - суммарная величина правильных ответов для і-го блока материала и 2^ - суммарная величина правильных ответов для і теста і-го блока материала.
I Лі Ку Му
2 = 113їтї 11 і , (5)
і=1 і =1 к=1 т=1
где 2.іт - оценка (1 - правильный ответ и 0 - неправильный) за ответ на время прохождения т-го вопроса для і теста -го блока материала.
Выражения (2), (3) и (5) могут лечь в основу некоторого критерия успеваемости учащегося
по данной дисциплине № в виде
Из рис. 3 видно, что время ответов на вопросы может быть меньше или больше некоторого типичного времени ответов на вопросы. Увеличение времени, конечно же, может быть связано как с повторным тестированием, так и со временем ответа. Анализ результатов полученных оценок и времени, затраченного на ответы, позволяет сделать определенные выводы о том, как получены ответы (списал, думал и др.) и каков уровень освоения материала по данному учебному курсу.
В качестве анализируемых данных можно предложить следующий вариант:
Г А2 = - Zi < 2о
[АТ = Т/+1 -Т <То . (8)
АУ = А2 / АТ
К = = £ (аТ +Р21). (6)
/=1 /=1
или
К=ІІWj=І;ІаTj+0Zj). (7)
/=1 j=1 /=1 j=1
где а.в - некоторые коэффициенты, отражающие важность временных и оценочных показателей (например, может быть вариант а=в=1 или а=0,3; в=0,7).
Критерий (6) позволяет увидеть степень освоения данного учебного материала в графическом виде (рис. 3).
(
У Р А ^
г
'у
I
Рис . 3 . Графическое отображение времени ответа на тестовые вопросы для /-го блока материала (сплошная линия - все ответы точные и пунктирная линия - ответы реальные)
здесь ДZ, ДТ - текущие разности суммарных оценок и времени, затраченного на тесты для i-го блока материала; 2i+1, Ti+1 - суммарные оценки и время, затраченное на тест для i+1-го блока материала; 2, Т - суммарные оценки и время, затраченное на тест для i-го блока материала; Zo, To - некоторые заданные априори величины разности оценок и времени; ДУ - скорость изучения i-го блока материала.
Заключение
Предлагаемый подход позволит, используя «знаниевый» W и «временной» T критерии, проводить детальный анализ уровня знаний отдельного обучающегося в режиме on-line и своевременно осуществлять корректировку. Это дисциплинирует студентов, заставит их ответственно относиться к этапу тестирования, готовиться к нему. Совместный анализ результатов контроля для целой группы обучающихся даст возможность выявлять недостатки организации курса и своевременно вносить соответствующие изменения. Кроме того, надо заметить, что в качестве оценок 2i могут выступать и степени сформированности компетенций, рассчитанные, например, с использованием индикаторного метода [9].
— 4З —
Список литературы
1. Проект государственной программы «Комплексная модернизация образования как механизм обеспечения инновационного развития социально-экономической сферы» . Сайт Министерства образования и науки РФ . URL: http://www. mon . gov. ru/
2 . Драйден Г . , Вос Дж . Революция в обучении / пер . с англ . М . : Парвинэ, 2003. 672 с .
3 . Полат Е . С . Педагогические технологии дистанционного обучения / Е . С . Полат, М . В . Моисеева и др . М .: Академия, 2006 . 600 с .
4 . Kirkpatrick D . L ., Kirkpatrick J . D . . Evaluating Training Programs: The Four Levels. Berrett-Koehler Publishers, 2006 . 379 p .
5 . Кукушин В . С . Педагогические технологии: учеб . пос . для студентов пед . спец-тей . Ростов н/Д: Март, 2002. 320 с .
6 . Баум В . В . Система зачетных единиц (кредитов) как один из инструментов признания квалификаций: учеб . пособие / В . В . Баум,
В . Н . Чистохвалов, В . М . Филиппов . М . : РУДН, 2008. 166 с .
7 . Гулидов И . Н . Педагогический контроль и его обеспечение: учеб . пос. М . : Форум, 2005. 240 с .
8 . Аванесов В . С . Композиция тестовых заданий М . : Асс. инженеров-педагогов, 1996 . 192 с .
9 . Катаев С . Г . Индикаторный метод оценивания компетенций / С . Г . Катаев, Ю . О . Лобода, Е . А. Хомякова // Вестн . Томского гос. пед .
ун-та (Tomsk State Pedagogical University Bulletin) . 2009 . Вып . 11. С . 70-73.
Катаев М. Ю., доктор технических наук, профессор.
Томский государственный университет систем управления и радиоэлектроники.
Пр. Ленина, 40, Томск, Россия, 634050.
E-mail: kataev.m@sibmail.com
Катаев С. Г., доктор технических наук, доцент.
Томский государственный педагогический университет.
Ул. Киевская, 60, Томск, Россия, 634061.
E-mail: sgkataev@sibmail.com
Материал поступил в редакцию 22.01.2014.
M. Yu. Kataev, S. G. Kataev THE APPROACH TO THE CONTROL OF KNOWLEDGE IN A VIRTUAL EDUCATIONAL ENVIRONMENT
The article offers an approach to knowledge control in a virtual educational environment, which differs from the known methods of a weighted sum of time costs when students passing of control tests and received successful response. The article gives the algorithm to the control of knowledge, showing the success of learning within the discipline which is being studied.
Key words: educational process, the virtual educational environment, the control of knowledge.
References
1. URL: http://www. mon . gov. ru/
2 . Drayden G . , Vos J . The New Learning Revolution. Moscow, Parvine Publ ., 2003. 544 p .
3 . Polat E . S . Pedagogical technologies of distant learning. Moscow, Akademiya Publ ., 2006 . 600 p . (in Russian) .
4 . Kirkpatrick D . L ., Kirkpatrick J . D . Evaluating Training Programs: The Four Levels. Berrett-Koehler Publishers . 2006 . 379 p .
5 . Kukushin V. S . Pedagogical technologies: textbook for students of pedagogical departments . Rostov-na-Donu, 2002 . 320 p . (in Russian) .
6 . Baum V. V. System of credit units (credits) as one of tools for recognition of qualifications . Moscow, RUDN Publ ., 2008. 66 p . (in Russian) .
7 . Gulidov I . N . Pedagogical control and its support. Moscow, 2005. 240 p . (in Russian) .
8 . Avanesov V. S . Composition of test settings. Moscow, 1996 . 192 p . (in Russian) .
9 . Kataev S . G ., Loboda Yu . O . , Homyakova E . A. The indicatoring method of value competence . Tomsk State Pedagogical University Bulletin,
2009, vol . 11, pp . 70-73. (in Russian) .
Kataev M. Yu.
Tomsk State University of Control Systems and Radioelectronics.
Pr. Lenina, 40, Tomsk, Russia, 634050.
E-mail: kataev.m@sibmail.com
Kataev S. G.
Tomsk State Pedagogical University.
Ul. Kievskaya, 60, Tomsk, Russia, 634061.
E-mail: sgkataev@sibmail.com
