CC BY
18
УДК 577:[378.146:004.4] ао1: 10.25298/2221-8785-2018-16-2-232-236
ПРИМЕНЕНИЕ КОМПЬЮТЕРНОГО ТЕСТИРОВАНИЯ ДЛЯ ОЦЕНКИ УЧЕБНЫХ ДОСТИЖЕНИЙ СТУДЕНТОВ ПО БИОЛОГИЧЕСКОЙ ХИМИИ В УЧРЕЖДЕНИЯХ
ВЫСШЕГО МЕДИЦИНСКОГО ОБРАЗОВАНИЯ
Петушок Н. Э. (kbh@grsmu.by), Леднева И. О., Лелевич В. В., Курбат М. Н.
УО «Гродненский государственный медицинский университет», Гродно, Беларусь
Введение. Оценка знаний обучающихся является одной из ключевых задач любой образовательной системы.
Цель исследования. Выявление значимости тестирования в комплексной системе средств оценки знаний обучающихся.
Материал и методы. Статистический анализ взаимосвязи результатов компьютерного тестирования, экзаменационной оценки и среднегодового балла.
Результаты. Выявлена положительная корреляционная связь между всеми парами сравниваемых показателей. У студентов лечебного факультета высокая теснота связи отмечена в парах показателей среднегодовой балл ^ экзаменационная оценка и тестирование ^ экзаменационная оценка. У студентов факультета иностранных учащихся тенденции взаимозависимости показателей сходны, теснота связи менее выражена.
Выводы. Компьютерное тестирование должно использоваться в совокупности с другими средствами контроля.
Ключевые слова: компьютерное тестирование, среднегодовой балл, экзаменационная оценка, коэффициент корреляции.
Контроль и оценка знаний обучающихся -одна из ключевых задач любой образовательной системы. Педагогические измерения в условиях применения государственных образовательных стандартов включаются в систему мониторинга предметных достижений с целью анализа функционирования педагогической системы и повышения эффективности управления ею. Опыт высших учебных заведений стран СНГ и белорусских вузов свидетельствует о том, что возможны разные модификации систем и средств диагностирования. Российские ведущие научно-педагогические центры создали примерные фонды оценочных средств. В Беларуси широкое распространение получили тестовые формы диагностики, апробируются комплексные квалификационные задания, обобщенные задачи [1].
Согласно инновационной модели развития образования, в системе контроля знаний должны присутствовать составляющие, которые позволяют оценить объём знаний, практические умения и навыки, а также мышление и речь обучающегося. Методом исследования уровня знаний, умений, навыков, способностей и других личностных качеств является такая форма контроля, как тест. Практическая цель использования компьютеров для тестирования уровня знаний заключается в достижении высоких показателей скорости, точности, непредвзятости в оценке и уменьшении трудоёмкости данного процесса. От других методов педагогической диагностики тесты отличаются тем, что предполагают стандартизованную процедуру сбора, обработки и интерпретации данных, позволяют проверить знания обучающихся по широкому спектру вопросов изучаемой дисциплины, существенно сокращают затраты времени на проверку результата, исключают субъективизм преподавателя как в процессе контроля, так и в процессе оценки [2].
Материал и методы Обобщен опыт применения тестирования, проведен анализ взаимосвязей результата итогового компьютерного тестирования, экзаменационной оценки и среднегодового балла 1273 студентов УО «Гродненский государственный медицинский университет» (ГрГМУ) лечебного факультета и факультета иностранных учащихся (русский язык обучения) по дисциплине «Биологическая химия» с 2014 по 2016 г. Данные обработаны методами параметрической статистики с применением коэффициента Стьюдента, представлены в виде среднего значения выборки и ошибки среднего (М±т). Рассчитаны коэффициенты корреляции Спирмена [3].
Результаты и обсуждение На кафедре биологической химии ГрГМУ тесты в качестве инструмента педагогической диагностики применяются с 2001 г. В течение этого времени велась постоянная работа по совершенствованию их содержания. Оно должно соответствовать современному состоянию науки, целям тестирования, содержанию учебной дисциплины. Кроме того, тесты должны быть корректными, а формулировки вопросов, ответов и дистракторов (отвлекающих ответов) -краткими и однозначными [4]. При разработке тестов учитывались общие требования тестоло-гии и обобщенный опыт создания образовательных тестов в ГрГМУ. Тестирование проводится с помощью компьютерной тестирующей среды Web Test Servis, разработанной сотрудниками университета.
После апробации нескольких вариантов тестов мы остановились на компьютерных аттестационных тестах закрытого типа с четырьмя вариантами ответов [5, 6]. В них есть задания как одиночного выбора (с единственно правильным ответом), так и с множественным выбором
(из предложенных вариантов нужно выбрать все правильные). Для ответа на один вопрос студенту даётся 30 секунд. Содержание тестов отражает содержание дисциплины, структурировано по тематическим разделам, включает основные и значимые положения, которые обучающийся должен знать в результате изучения дисциплины. Для усиления обучающей функции тестирования в сборниках тестов приводятся правильные ответы к ним.
Изначально тестирование по биологической химии было только итоговым, проводилось раз в год в конце изучения дисциплины. Это позволяло оценить степень владения базовыми знаниями и стимулировало обучающихся к повторению всего учебного материала. Задания для итогового тестирования включают более 700 тестовых заданий по всем разделам дисциплины. Особое внимание уделено величинам основных лабораторных показателей. Из этого массива каждому студенту методом случайной выборки предлагается 40 тестов.
Впоследствии стали проводить и промежуточные тестирования. Они проходят дважды в семестр перед каждым итоговым занятием. В этом случае тесты включают примерно 100 вопросов по определенному разделу дисциплины. Студенту для ответа предлагается 20 заданий. Введение промежуточного тестового контроля решает ряд задач. Во-первых, периодичность и неизбежность тестирования дисциплинирует, организует и направляет деятельность обучающихся. Во-вторых, студенты получают возможность постепенно адаптироваться к такой форме контроля знаний. Как показывает практика, не все обучающиеся изначально одинаково хорошо приспособлены к проведению контроля методом тестирования. Необходимость вдумчивого чте-
ния, быстрого восприятия и анализа информации (особенно с экрана компьютера) представляет собой значительное препятствие для ряда студентов. Адаптируемость обучающихся к проведению тестирований иллюстрируют данные, представленные на рисунке.
Они показывают поступательный рост среднего балла тестирования в течение года. У студентов лечебного факультета результат последнего тестирования выше первого на 10%. У студентов факультета иностранных учащихся результаты тестирования возрастают на 52%. Эти данные подчеркивают как обучающую, так и воспитательную функцию тестирования.
Для выявления эффективности тестирования как инструмента оценки знаний студентов (диагностической функции) нами проведено сопоставление оценки, полученной при компьютерном тестировании в конце изучения курса, экзаменационной оценки и среднегодового балла студента. Значения анализируемых показателей представлены в таблице 1.
Как видно из приведённых данных, у студентов лечебного факультета за анализируемый период наблюдается повышение среднегодового балла. Сходная тенденция наблюдается и по итогам компьютерной оценки знаний: результаты за второй и третий год наблюдений выше, чем за первый. Оценка за экзамен практически не изменяется. Сопоставление полученных значений показало, что экзаменационная оценка и результаты компьютерного тестирования достоверно превышают значения среднегодового балла. В 2013/2014 учебном году экзаменационная оценка была выше результатов компьютерного тестирования. Год спустя результаты компьютерного тестирования достоверно превышали экзаменационную оценку.
10 баллы
тестирование тестирование тестирование тестирование 12 3 4
Рисунок. - Средние баллы промежуточных тестирований студентов лечебного факультета и факультета иностранных учащихся в 2015/2016уч. году
Таблица 1. - Результаты успеваемости студентов лечебного факультета и факультета иностранных учащихся по биологической химии (М±т)
Учебный год
2013/2014 2014/2015 2015/2016
Лечебный факультет
Количество студентов, п 418 394 378
Среднегодовой балл (С) 5,72±0,05 5,96±0,07 6,08±0,07
Результат компьютерного тестирования (К) 6,16±0,08* 6,88±0,10* 6,60±0,08*
Экзаменационная оценка (Э) 6,33±0,08*,# 6,32±0,10*, # 6,51±0,11*
Факультет иностранных учащихся
Количество студентов, п 39 26 18
Среднегодовой балл (С) 5,21±0,14 5,69±0,11л 5,50±0,15
Результат компьютерного тестирования (К) 5,19±0,22 5,65±0,19 л 5,28±0,24
Экзаменационная оценка (Э) 5,61±0,18# 5,62±0,16 5,56±0,22
Примечание: статистически значимые различия *— по отношению к среднему баллу, # - по отношению к тестированию, А - по отношению к предыдущему учебному году
У студентов факультета иностранных учащихся значения среднегодового балла и результаты компьютерного тестирования не демонстрируют единой тенденции. В 2014/2015 учебном году эти показатели достоверно выше, чем в году предшествующем. Однако на экзаменационной оценке это не отразилось: она осталась такой же.
Для более полного анализа взаимосвязей между изучаемыми величинами нами рассчитаны коэффициенты корреляции Спирмена, которые представлены в таблице 2.
Таблица 2. - Коэффициенты корреляции между средним баллом, результатом компьютерного тестирования и экзаменационной оценкой у студентов лечебного факультета и факультета иностранных учащихся
Сравниваемые показатели 2013/2014 2014/2015 2015/2016
Лечебный факультет
Среднегодовой балл « тестирование 0,66* 0,66* 0,67*
Среднегодовой балл « экзаменационная оценка 0,82* 0,80* 0,87*
Тестирование « экзаменационная оценка 0,75* 0,70* 0,72*
Факультет иностранных учащихся
Среднегодовой балл « тестирование 0,60* 0,43* 0,52*
Среднегодовой балл « экзаменационная оценка 0,74* 0,66* 0,80*
Тестирование « экзаменационная оценка 0,68* 0,59* 0,72*
Примечание: здесь и в таблице 3 *— p<0,05
Полученные нами результаты демонстрируют прямую корреляционную связь между всеми парами сравниваемых показателей. У студентов лечебного факультета высокая теснота связи отмечена для показателей среднегодовой балл ^ экзаменационная оценка и тестирование ^ экзаменационная оценка. Умеренная теснота связи выявлена для показателей среднегодовой балл ^ тестирование. Значения коэффициентов корреляции в данном случае не превышают 0,67. Это свидетельствует о том, что студентам проще и легче освоить объем вопросов тестирования, чем регулярно готовиться к текущим занятиям. А возможность получить более высокую оценку на экзамене более высока для тех, кто в течение всего учебного года прилагал больше усилий для получения хорошего среднегодового балла. То есть показатель «среднегодовой балл» более полно оценивает сумму полученных студентами знаний, чем оценка за тестирование. У студентов факультета иностранных учащихся тенденции взаимозависимости обсуждаемых показателей сходны, но между ними отмечена менее выраженная теснота связи.
Наше предположение о причинах меньшей взаимосвязи между результатом тестирования и среднегодовым баллом проверено и по оценке учебных достижений при освоении меньшего объема учебного материала. Для этого рассчитали коэффициенты корреляции между результатом промежуточного компьютерного тестирования и оценкой на итоговом занятии в разных семестрах одного учебного года. Полученные нами результаты представлены в таблице 3. Они показывают гораздо меньшую тесноту связи между оценками у студентов лечебного факультета. Она изменяется от умеренной до слабой (коэффициент 0,37 в 2015/2016 уч. году). Здесь мы еще более четко видим, что студенты более успешно осваивают вопросы тестирования, так как это требует меньших усилий, чем подготовка к итоговому занятию. Эта тенденция более выражена в осеннем семестре. Степень тесноты связи показателей у студентов факультета иностранных учащихся более стабильна в течение всего учебного года и практически не отличается от результатов, полученных при итоговом контроле. В данном случае студенты, для которых русский язык не является родным, должны прилагать больше усилий для освоения учебного материала и с этой задачей лучше справляются более прилежные, дисциплинированные и старательные студенты, у которых и средняя оценка более высокая [7].
Таблица 3. - Коэффициенты корреляции между результатом промежуточного компьютерного тестирования и оценкой на итоговом занятии в разных семестрах у студентов лечебного факультета и факультета иностранных
2014/2015 2015/2016
Факультет осенний весенний осенний весенний
семестр семестр семестр семестр
Лечебный факультет 0,47* 0,55* 0,37* 0,44*
Факультет иностранных учащихся 0,62* 0,59* 0,66* 0,60*
Таким образом, проведенный нами анализ свидетельствует о значительной объективности компьютерного тестирования. Она основана на том, что все студенты отвечают на одни и те же вопросы, ответы оцениваются по единой шкале, которая не зависит от субъективного мнения преподавателя. Важнейшие преимущества данной формы педагогической диагностики - экономия времени и возможность проверки знаний по всем разделам дисциплины. Помимо диагностической функции, тестирование выпол-
Литература
1. Пономарев, Н. Л. Образовательные инновации. Государственная политика и управление : учебное пособие для студентов высших учебных заведений / Н. Л. Пономарёв, Б. М. Смирнов. - Москва : Академия, 2007. - 208 с.
2. Кабанова, Т. А. Тестирование в современном образовании : учебное пособие для вузов / Т. А. Кабанова, В. А. Новиков. - Москва : Высшая школа, 2010. - 381 с.
3. Боровиков, В. П. Statistica. Искусство анализа данных на компьютере / В. П. Боровиков. - Санкт-Петербург : Питер, 2003. - 688 с.
4. Майоров, А. Н. Теория и практика создания тестов для системы образования: как выбирать, создавать и использовать тесты для целей образования / А. Н. Майоров. - Москва : Интеллект-Центр, 2002.
- 52 с.
5. Эффективность использования компьютерного тестирования при итоговом трехступенчатом контроле знаний студентов / М. Н. Курбат [и др.] // Вышэйшая школа. - 2009. - № 1. - С. 63-65.
6. Применение компьютерного тестирования для оценки учебных достижений студентов по биологической химии / М. Н. Курбат [и др.] // ТехноОбраз 2009: Технологии оценки учебных достижений учащихся и студентов : материалы VII Международной научно-практической конференции, Гродно, 17-18 марта 2009 г. / Учреждение образования «Гродненский государственный университет им. Янки Купалы» ; отв. ред. В. П. Тарантей. - Гродно, 2009. - С. 297-301.
7. Компьютерное тестирование как компонент трехступенчатого контроля знаний иностранных учащихся по биологической химии / М. Н. Курбат [и др.] // Перспективы развития высшей школы : материалы II Международной научно-методической конференции, Гродно, 19-20 мая 2016 г. / Учреждение образования "Гродненский государственный аграрный университет ; редкол.: В. К. Пестис [и др.]. - Гродно, 2016.
- С. 354-357.
няет ещё обучающую и воспитательную функции. На наш взгляд, компьютерное тестирование знаний должно входить в арсенал средств диагностики учебных достижений студентов, использоваться в комплексе с другими формами контроля.
Выводы
1. Компьютерное тестирование -эффективный метод оценки учебных достижений обучающихся при изучении биологической химии.
2. Компьютерное тестирование должно использоваться как один из
инструментов, позволяющих проверить знание эмпирического материала (фактов, референтных величин). Для оценки умения обобщать, применять эти факты нужно использовать другие методы (письменный или устный опрос).
3. Особое значение компьютерное тестирование имеет для студентов, которые обучаются не на родном языке. Им тестирование помогает не только в освоении биологической химии, но и в совершенствовании языковой подготовки в рамках изучаемой дисциплины.
References
1. Ponomarev NL, Smimov BM. Obrazovatelnye innovacii. Gosudarstvennaja politika i upravlenie [Educational innovations. Public policy and management]. Moskva: Academia; 2007. 208 p. (Russian).
2. Kabanova TA, Novikov VA. Testirovanie v sovremennom obrazovanii [Testing in modern education]. Moskva: Vysshaja shkola; 2010. 381 p. (Russian).
3. Borovikov VP. Statistica. Iskusstvo analiza dannyh na kompjutere [Statistica. The art of analyzing data on a computer]. Sankt-Peterburg: Piter; 2003. 688 p. (Russian).
4. Majorov AN. Teorija i praktika sozdanija testov dlja sistemy obrazovanija: kak vybirat, sozdavat i ispolzovat testy dlja celej obrazovanija [Theory and practice of creating tests for the educational system: how to choose, create and use tests for education]. Moskva: Intellekt-Centr; 2002. 352 p. (Rus-sian).
5. Kurbat MN, Ledneva IO, Petushok NE, Lelevich VV. Jeffektivnost ispolzovan-ija kompjuternogo testirovanija pri itogovom trehstupenchatom kontrole znanij studentov [Effektivnost' ispol'zovaniya komp'yuternogo testirovaniya pri itogovom trekhstupenchatom kontrole znanij studentov]. Vyshejshaja shkola [Higher school] 2009;1:63-65. (Russian).
6. Kurbat MN, Petushok NE, Ledneva IO, Lelevich VV. Primenenie kompjuter-nogo testirovanija dlja ocenki uchebnyh dostizhenij studentov po biologicheskoj himii [The use of computer testing to assess the academic achievements of students in biological chemis-try]. In: Tarantej VP, executive editor. TehnoObraz 2009: Tehnologii ocenki uchebnyh dosti-zhenij uchashhihsja i studentov. Materialy VII Mezhdunarodnoj nauchno-prakticheskoj konferencii; 2009 Mart 17-18; Grodno. Grodno; 2009. р. 297-301. (Russian).
7. Kurbat MN, Ledneva IO, Lelevich VV, Petushok NE. Kompjuternoe testiro-vanie kak komponent trehstupenchatogo kontrolja znanij inostrannyh uchashhihsja po biologicheskoj himii [Computer testing as a component of the three-level control of knowledge of
foreign students in biological chemistry]. In: Pestis VK, nauchno-metodicheskoj konferencii; 2016 Maj 19-20;
Duduk AA, Sviridov AV, Jurgel SI, editors. Perspektivy Grodno. Grodno; 2016. p. 354-357. (Russian).
razvitija vysshej shkoly. Materialy II Mezhdunarodnoj
COMPUTER TESTING AS A METHOD FOR ESTIMATION OF ACADEMIC ACHIEVEMENTS OF STUDENTS ON BIOLOGICAL CHEMISTRY IN MEDICAL
UNIVERSITIES
Petushok N. E, Ledneva I O, Lelevich V V, Kurbat M. N. Educational Institution «Grodno State Medical University», Grodno, Belarus
Background. Assessment of students' knowledge is one of the key tasks of any educational system.
The aim of the study is to identify the significance of testing in a multipurpose system of means of assessing students' knowledge.
Material and methods. Statistic analysis of the relationship of the results of computer testing, the examination score and the average annual score.
Results. A positive correlation was revealed between all pairs of the compared indicators. For students of the Faculty of General Medicine high strength of relationship was noted for the average annual score ^ examination score and testing ^ examination score. For students of the Medical Faculty for International Students, the tendencies of interdependence of the indicators are similar, the strength of relationship is less pronounced.
Conclusions. Computer testing should be used in complex with other tools ofassessment of academic achievements.
Keywords: Computer testing, average annual score, examination score, correlation index.
Поступила: 15.09.2017
НЕОТЛОЖНАЯ НЕВРОЛОГИЯ
Учебно-методическое пособие
Отрецензирована: 03.10.2017
Неотложная неврология : учебно-методическое пособие для студентов учреждений высшего образования, обучающихся по специальности 1-79 01 05 "Медико-психологическое дело" : рекомендовано учебно-методическим объединением по высшему медицинскому, фармацевтическому образованию / Министерство здравоохранения Республики Беларусь, Учреждение образования "Гродненский государственный медицинский университет", Кафедра неврологии и нейрохирургии ; [Я. Я. Гордеев, Т. М. Шамова, Т. Я. Лебейко, А. И. Лебейко]. -Гродно : ГрГМУ, 2017. - 179 с. - Библиогр.: с. 179. - ISBN 978-985-558-899-4.
Книга посвящена вопросам врачебной тактики при неотложных состояниях в неврологии: нарушениях мозгового кровообращения, инфекционных и инфекционно-аллер-гических заболеваниях нервной системы, травматических поражениях центральной нервной системы, нервно-мышечных заболеваниях, пароксизмальных состояниях. Пособие адресовано обучающимся по специальности 1 - 79 01 05 «Медико-психологическое дело», а также может быть полезным студентам всех факультетов высших медицинских учебных заведений.
