CC BY
32
ЩФОРМАЦШШ ТЕХНОЛОГИ У СИСТЕМ1 ТЕСТОВОГО КОНТРОЛЮ
Валерш ГАБРУСеВ, Василь ОЛЕКСЮК
ОРГАН1ЗАЦ1Я ТЕСТОВОГО КОНТРОЛЮ ЗАСОБАМИ
СИСТЕМИ УПРАВЛ1ННЯ НАВЧАЛЬНИМИ РЕСУРСАМИ МООБЬЕ
Сучасну педагогiку неможливо уявити без активного використання iнструментарiю об'ективних методiв вишрювання та оцiнювання якiсних характеристик, притаманних людинi. Такий iнструментарiй створюеться та удосконалюеться протягом усього перiоду розвитку педа-гогiки. Розглядаючи проблему ощнювання знань та умiнь, необхiдно враховувати необхiднiсть забезпечення вiдповiдностi оцiнювання знань та умшь вимогам загально! теорп вимiрiв i опи-ратися на критерп, що дозволять оцiнити яюсть отриманих результатiв. Найважливiшими серед цих критерив е:
• об'ективнiсть, мiнiмiзацiя впливу суб'ективних чинникiв, незалежнiсть результата ввд того, хто вишрюе. 1ншими словами, вимiри об'ективнi в тому випадку, коли результати цих вимiрiв максимально незалежш вiд дослвдниюв. Це означае, що рiзнi дослвдники, вимiрюючи одну й ту ж характеристику, мають одержувати однаковий результат.
• надшшсть — це ступiнь узгодженостi результапв, отриманих при повторних вимiрах для тих самих суб'еклв оцiнювання. Стутнь надiйностi методу визна-чаеться за допомогою коефiцiента надiйностi.
• валвдшсть, комплексна характеристика, яка визначаеться як ввдповвдтсть того, що вимiрюеться даним методом, тому, що мае вишрюватися.
Традицiйнi форми перевiрки навчальних досягнень на сьогодш не достатньо забезпечу-ють необхiдну вiдповiднiсть вимогам загально! теорп вимiрiв.
Усна форма перевiрки знань — найбiльш поширена форма вишрювання знань. Досль дження доводять, що усне опитування не вщповвдае критерiям об'ективностi, надiйностi та ва-лiдностi, а методика оцiнювання е в основному наближеною. За усно! форми контролю знань не може бути забезпечена т об'ективтсть процесу вимiрювання, нi об'ективнiсть штерпретаци результапв вимiрювання. Одна й та ж особа по^зному оцiнюеться рiзними екзаменаторами. Навпъ тодi, коли iспит приймае група досвiдчених педагогiв i середт оцiнки бiльш-менш об'ективнi та тдпорядковуються об'ективним закономiрностям, iндивiдуальнi оцiнки у рiзних екзаменаторiв можуть коливатися вщ максимально! до мшшально!.
Письмова форма перевiрки знань найчастiше у виглядi письмово! вiдповiдi на постав-лет завдання використовуеться для посилення об'ективност вимiрювання знань у порiвняннi з усною формою контролю. Цей метод з точки зору об'ективноста, а саме утфжацп вимiрювання i забезпечення бшьшо! об'ективностi процесу вимiрювання та опрацювання даних, забезпечуе кращi результати. Але процес ощнювання фактично залишаеться таким же, як i тд час усно! форми контролю i не забезпечуе необхвдно! об'ективностi тд час штерпретацл результатiв.
Передовий досввд пiдготовки фахiвцiв свiдчить про те, що одним з найбшьш коректних засобiв вимiру характеристик особистостi суб'екта навчання е тестова форма контролю.
Тест — система взаемопов'язаних предметним змiстом завдань специфiчноl форми, яю дають змогу оцiнювати структуру i вимiрювати ршень знань та iншi характеристики особистос-т1 [2].
Тести досягнень (на ввдмшу вiд широко ввдомих тестiв iнтелекту) вiддзеркалюють не сть льки вплив набутого досввду i загальних здiбностей на повед^у та розв'язання тих чи iнших завдань, скшьки вимiрюють вплив спещальних освiтнiх програм, професшно! та шшо! тдгото-
Науков1 записки. Серш: Педагопка. — 2005. — №6.
25
вки на ефективтсть здобуття того чи шшого комплексу знань та формування вiдповiдних спе-цiальних умшь [2, 6].
У багатьох роботах зазначаеться, що тестування може розглядатися як метод вишрюван-ня рiвня знань, який, на вiдмiну ввд уже розглянутих методiв, задовольняе основш критерп яко-стi. Вiн дае можливкть забезпечити об'ективнiсть процесу вишрювання, опрацювання резуль-татiв та 1х штерпретацп. Надiйнiсть тестування визначаеться доволi високим показником у разi вишрювання якiсних характеристик [1, 2, 3].
Розвиток комп'ютерно! технiки справив значний вплив на всi етапи тестування — конст-руювання тестових завдань, проведення тестування, пiдрахунку «сирих балiв» та 1х штерпрета-цИ. Використання засобiв iнформацiйних технологiй для проведення ощнювання успiшностi дае змогу бшьш об'ективно пiдiйти до питання ощнювання, забезпечити ушфжоваш умови проведення тестового контролю, автоматизувати процес оцiнювання студенлв та аналiз ре-зультатiв тестового контролю.
Системи такого класу стають все бшьш необхвдними i розглядаються як необхвдна скла-дова оргашзаци навчального процесу, i тому ринок програмних засобiв тестового контролю до-волi швидко розвиваеться. Тому виникае проблема вибору необхвдного програмного продукту для розгортання проведення тестового контролю.
Проблему розгортання комп'ютеризовано1 системи тестового контролю необхвдно розг-лядати iз двох точок зору: методично!" та програмно!'.
З методично1 точки зору необхвдно визначити мету, форми подання тестових завдань; змiст тестових завдань; методи аналiзу та штерпретацп результата тестування: для групи зага-лом i кожного студента зокрема.
Мета тестового контролю може бути доволi рiзноплановою:
• тестування з метою контролю ощнювання навчальних досягнень;
• тестування з метою подальшо! корекцп викладачем шдиввдуально1 траекторп навчання для кожного студента;
• самоконтроль засвоення навчального матерiалу та корекщя процесу роботи з на-вчальним матерiалом безпосередньо студентом.
Змiст тестових завдань визначаеться як оптимальне вщображення навчально1 змiсту ди-сциплiни в системi тестових завдань i безпосередньо пов'язаний iз формами подання тестових завдань. Що бшьше способiв формування питання, то бшьш точно можна ощнити результати навчання. Загалом у теорп тестування видiляють кiлька титв завдань.
1) питання з варiантами вiдповiдей Так/Нi ;
2) питання на вибiр однiеl правильно1 ввдповвдц
3) питання на вибiр кшькох правильних вiдповiдей;
4) питання на встановлення вiдповiдностi;
5) питання на впорядкування;
6) питання вiдкритого типу, введення тексту;
7) вiльна ввдповщь яка оцiнюеться викладачем.
Аналiз та штерпретащя результатiв тестування дае змогу визначити певш недолiки як засвоення навчального матерiалу студентами, так i органiзацil тестового контролю, провести стандартизащю за результатами пiлотних тестувань на репрезентативнш вибiрцi з метою встановлення дiагностичних властивостей тесту через визначення основних статистичних парамет-рiв.
Тест Тестове завдання
середне значення — Х. середне квадратичне вiдхилення — ст. коефщент надiйностi — Я. стандартна помилка вишрювання — Е. коефщент валiдностi — V. шдекс складностi тестового завдання — 1С. шдекс диференцiйноl здатностi — 1Д.
26
Науков1 записки. Сер1я: Педагопка. — 2005. — №6.
Вибiр програмного засобу для використання y навчальному процесi, в тому чи^ для ро-згортання системи автоматизованого контролю, необxiдно здiйснювати, опираючись на мето-дичнi вимоги щодо програм такого класу, якi було розглянуто вище, та на загальш вимоги до педагогiчниx програмниx засобiв [4, 7]. Отже, пiдсyмовyючи вище наведет мiркyвання, необ-xiдно зробити висновок, що для проведення тестового контролю насамперед необxiдно враxо-вувати те, що:
1) iнтерфейс програмного засобу повинен тдтримувати дiалог рвдною мовою студента (yкраïнська, росiйська);
2) об^ктивтсть тестового контролю посилюeться з використання рiзниx типiв тестовиx завдань y межаx одного тесту;
3) можлишсть формування тестовиx завдань на осжга вибiрки зi значноï кшькоста завдань як однieï з умов забезпечення об^ктивност тестового контролю. Тобто програмний засiб повен мютити засоби yправлiння банком тестовиx завдань, подшом його на роздiли ввдповвдно за певними критершми: теми, тдтеми, рiвнi складностi тощо;
4) подання тестовиx завдань тiльки y виглядi тексту значно обмежye можливостi використання тестового контролю. З огляду на це необxiдно, щоб система тдтримувала включення y тестовi завдання мyльтимедiйниx об'eктiв: рисунки, вiдео та аудю фрагменти;
5) вирiшення питання безпеки зберiгання бази тестовиx завдань та забезпечення заxистy вiд несанкцюнованого втручання y результати виконання тестовиx завдань та забезпечення yнiфiкованостi проведення тестового контролю, що e можливим за умови роботи програмного засобу y мережевому середовищi;
6) необxiднiсть усунення стороннix впливiв на процес виконання тесту: тдказування, звертання за допомогою до шший засобiв, що досягаeться поданням y рiзнiй послщовност тес-товиx завдань та варiантiв вiдповiдей для кожного студента, обмеження на час виконання тестового завдання;
7) вщкрилсть системи, сумстсть з iншими програмними засобами. Hаприклад, використання тестового редактора MS Word для початкового етапу введення тестовиx завдань та елек-тронний таблиць MS Excel для детального аналiзy тестовиx завдань, резyльтатiв тестування;
8) допyстимiсть використання програмного засобу тшьки за наявностi вiдповiдниx документа, якi тдтверджують законнiсть придбання та використання програмного продукту, лще-нзiï [5].
Серед значноï кшькост комп'ютерно-орieнтованиx систем, якi забезпечують тестову пе-ревiркy знань, доцiльно звернути увагу на систему yправлiння навчальними ресурсами (LCMS — Learning Course Management System) Moodle (Modular Object-Oriented Dynamic Learning Environment — модульна об'eктно-орieнтована динамiчна система yправлiння навчальними ресурсами). Розглядуваний програмний заиб призначений для створення та тдтримки кyрсiв як дистанцiйного, так i традицшного (аудиторного) навчання. Система поширкеться як вiльно поширюваний проект Open Source на осжга лiцензiï GPL (General Public License) [8, 9].
Система управлшня навчальними курсами Moodle организована на осжга гiпертекстовиx та клieнт-серверниx теxнологiй. Програмним засобом користyвачiв системи (адмiнiстратора, викладача, студента) e браузер. Така модель забезпечye певний рiвень незалежностi вiд викори-стовуваного типу програмного забезпечення, операцiйноï системи, апаратжй платформи. Сту-денти, викладач^ адмiнiстратори системи можуть використовувати Moodle на робочиx мiсцяx без додаткового встановлення програмного забезпечення. Використання сервера систем керу-вання базами даниx даe змогу централiзованого збереження та опрацювання даниx. Moodle даe змогу автоматично вiдстежyвати користувачам кyрсiв yd змши в межаx системи.
Основним елементом Moodle e навчальний курс, до складу якого можуть включатися не-обxiднi начальнi ресурси, засоби оргатзацп навчальноï дiяльностi стyдентiв y межаx курсу. Оцiнювання рiвня знань студента тд час роботи y системi Moodle здiйснюeться на осжш тестування (рис. 1).
Hy^ei записки. Серш: Педагопка. — 2005. — №6.
27
Рис. 1. Виконання тестового завдання у системi управлтня навчальними ресурсами МооМв
Значна кшьюсть параметрiв тестових завдань дозволяе доволi повно контролювати про-цес тестування (рис. 2):
• часовий штервал проведення тестування. Студенти матимуть змогу проводити тестування тшьки упродовж дат, якi належать вказаному штервалу;
• час на виконання завдань тесту;
• кшьюсть питань на сторшщ. У випадку використання досить довгих запитань або значно! 1х кiлькостi iснуе можливкть оформити виведення тестових завдань у виглядi кiлькох сторiнок;
• випадковий порядок питань та ввдповвдей. Використання цього режиму тестування унеможливлюе ситуацiю «тдглянув» у випадку виконання одного i того ж завдання;
• кшьюсть спроб для виконання тесту. Такий режим може бути корисним, якщо тест е вправою на закршлення, i студент може виконувати 11 стшьки раз1в, скшь-ки вказав викладач. У цьому випадку кожна ощнка не поввдомляеться виклада-чевц
• залежнiсть тесту вiд результата попередшх спроб. Якщо дозволено декшька спроб виконання тесту, i даний режим уымкнено, то результати попереднього тестування будуть включеш до ново! спроби (включаючи коментарi). Якщо режим вимкнено, то тест щоразу мiститиме новi запитання;
• залежшсть тесту вiд результатiв попереднiх спроб. Якщо дозволено декшька спроб виконання тесту, i даний режим утмкнено, то результати попереднього тестування будуть включеш до ново! спроби (включаючи коментар^. Якщо режим вимкнено, то тест щоразу мктитиме новi запитання;
• метод ощнювання. Режим дае змогу налаштувати ощнювання теста, як вико-нуються багаторазово. Можна обрати тдсумкову оцiнку, дотримуючись найви-що! оцiнки, середньо! з ощнок, першо! оцiнки чи останньо!;
28
Шауков1 записки. Сер1я: Педагопка. — 2005. — №6.
• використання коментарiв. Задае виввд пояснення одразу пiсля вiдповiдi на чер-гове запитання. У коментарi також можна вказати правильну ввдповвдь;
• режим «захищеного вжна», застосування якого унеможливлюе певнi ди з браузером (перехвд на попередш сторшки, кошювання, вставку, тощо);
• виконання тесту тiльки пiсля авторизацп користувача, тобто пред'явлення паролю;
• виконання тесту лише з комп'ютерiв з певними 1Р-адресами. Даний режим унеможливлюе «паралельне» розв'язування завдань тесту шшим студентом з шшо! лабораторп комп'ютерних технологiй.
^Програмування: Редагування ТЕСТ - Ми гобоП ГоЬегпе! Екр1огег
Файл Правка Вид Избранное Сервис Справка т
Назад ■ 4 - Л (3 ¿¡Поиск Избранное ¿¡¡'Медиа
Почати тестування:
Закшчити тестування:
Час для виконання тесту:
Ктьккть питань на сторшцг
Випадковий порядок питань:
Випадковий порядок вщповщей:
Дозволено:
Залежшсть спроб:
Оцшювання:
Рис. 2. Налагодження параметрiв тестування
Для встановлення бшьш об'ективно1 оценки у системi тестування передбачено використання питань рiзних титв.
Альтернативнi питання типу правильно/неправильно, яке використовуе висловлення, а студенту пропонуеться визначити його логiчне значення iстинностi. Викладач може вказати коментарi до обох варiантiв вiдповiдi (Так/Ш).
Питання в закритiй формi, у яких можливий один або кшька варiантiв правильно1 ввд-повiдi. У процем створення питання зазначено1 форми можна задати таю його параметри: кате-горiя, малюнок для шюстраци, варiанти вiдповiдей, коментарi до них, ввдсоткова оцiнка варiан-ту (рис. 3).
Необхвдно звернути увагу на можливють оцiнювання частково правильних варiантiв та зниження тдсумково1 оцiнки тесту внаслвдок вибору явно неправильних. Ощнки вiдповiдей з позитивними вiдповiдями повинш у сумi дорiвнювати 100%.
Питання на встановлення вщповщност мiж термшами. Викладач задае пари ввдпо-ввдноста, якi оцiнюються як одне питання. Наприклад, такими вщповвдностями можуть бути означення поняття i власне поняття. У випадку задання 4-ох ввдповвдностей, за правильне з1вс-тавлення одше! з них студент отримуе 25% максимального балу запитання.
Питання типу «коротка вщповщь». Питання передбачае введення ввдповвд та може мати до 5 коротких ввдповвден Варiанти доцшьно формулювати вiдповiдно до найбiльш поши-рених типiв помилок. Кожен з варiантiв оцiнюеться у процентному ввдношенш. Використання зазначеного типу питань вимагае високо1 коректностi формулювання запитання викладачем, а також точност введення ввдповвд студентами, оскiльки визначення критерiю правильност мае основою порiвняння рядка вводу iз взiрцем.
Науков1 записки. Серш: Педагопка. — 2005. — №6.
29
<Э Програмування: Ре дагування питання - Microsoft Internet Explorer Jali^
Файл ¡Правка Вид Избранное Сервис Справка KU
Назад - • 1 J И 1 ^Поиск а Избранное Е§ГМедиа 0 | Щг # ^ Э 3 £1 £ О
Питания:
Trebuchet J 11 (3 pQ | 0 В / Ü ir хг % Js Цй] о «
р
з Опис ictothhx для по ставлено! зад ач1 властив остей i закономерностей поведшки об'екта, що
забезпечуе îï розв'язання називаютъ ...
Path:
Зображення: 1 Немае j^J
Штрафний бал: Одна або кшька вщповщей?: Q ("Пльки одна вщповщь ^J
Доступш в а р i анти: Вибф 1: Коментар: Bn6ip 2: Коментар: Необхщно заповнити MiHiMyM 2 виборкь ¡накше питання не буде використовуватися (модель Оц1нка:|Ю0% zl 1 ^ 1 d (макет Оц1нка: 1 Немае 1 ^ \ и d
Рис. 3. Створення питання закритого типу
Питання на введення числово!" вщповщ, яке передбачае проведення студентом обчис-лень. Перевiрка коректностi ввдповвд може проводитися з урахуванням задажй викладачем по-хибки обчислення.
Використовуваш тестовi завдання можна структур увати за категорiями та шдкатегс^ями, з подальшим формування тестав, якi мiстять тестсш завдання, вказанi викладачем або вибира-ються випадковим чином з рiзних категорiй (рис. 4.)
30
Науков1 записки. Сер1я: Педагопка. — 2005. — №6.
Рис. 4. Формування тесту використовуючи базу тестових завдань
Як зазначалося вище, устшне проведення тестового контролю можливе за умови всебiч-но1 перевiрки та аналiзу тестових завдань, визначення основних статистичних параметрiв. Розг-лядувана система мiстить засоби для обчислення основних статистичних показниюв тесту та тестових завдань (рис. 5).
■^Програмування: Тест. Алгоритми. - М1сго5оП: 1п1егпе1: Екр1огег
1 Файл Правка Вид Избранное Сервис Справка ■ 1
^ Назад " ' @ 3 Й5 Э Поиск ^Избранное ^Медиа 1 на
1 _ _ _ _ .._.. . _ _ _ _ 3
Мо— Т8КСТП к-сть. Чо В1Д- »■о прав иль них . 1ндекс коеф.
повщеи - в1дпов1дей * - н н дискр." дискр-
П38 : (766) Анатз о^ складносл алгоритму полягае у ... □ ц1нц1 часових витрат залежно в1д обсягу вихщних даних; 2/26 (8%) 8 % 0.272 0.14 0.18
оц1нц1 ктькослч використовуваних змЫних та констант; 3/26 (12%)
□ц1нц1 ктькослч використовуваних тип1в даних; 1/26 (4%)
□ц1нц1 ктькослч використовуваних функщй ввeдeння/вивeдeння^ цикл 1в, розгалужень; 17/26 (65%)
П13 : (741) у цому полягае зм1ст ^ властивосл визначеносл алгоритму? можливють визнамення результату виконання алгоритму 14/26 (54%) 15 % 0.368 0.29 0.45
завершения роботи в цтому за шнчену ктыасть кроюв 4/26 (15%)
^шт
Рис. 5. Аналiз тестових завдань у системi управлтня навчальними ресурсами МооМв
Науков1 записки. Серш: Педагопка. — 2005. — №6. 31
Подальший, детальний аналiз тесту, тестових завдань можна виконати за допомогою еле-ктронних таблиць або шших програмних засобiв. Для цього кнуе послуга експорту даних у файл ввдповвдного формату (електроннi таблицi, текстовий файл тощо).
Альтернативою до проведення формального тестування у системi МооИе передбачено можливiсть використання спецiальних титв iгор, наприклад, розв'язування кросвордiв на зада-ну тему з можливим подалыпим ощнюванням результате (рис. 6).
и Шр:0И*Д|> __V] О ПК»™ □ Гл * д. _ в *
ч л №1 *■
Рис. 6. Виконання тестового контролю у виглядi кросворду
Враховуючи сказане вище, можна зробити висновок, що розгортання системи тестування знань можливе за мiнiмальних фiнансових затрат, використовуючи вiльно поширюване про-грамне забезпечення. Також необхiдно врахувати, що на Moodle е не лише засобом оргашзаци тестового контролю, але одночасно е системою управлшня навчальними курсами, яка дозволяе значно тдсилити ефективнiсть навчального процесу, контроль за виконанням навчального на-вантаження. На жаль, методичний потенцiал систем управлшня навчальними ресурсами на зра-зок Moodle у освггньому просторi Украши використовуеться не в повному обсязi й потребуе подальшого дослiдження та впровадження.
Л1ТЕРАТУРА
1. Аванесов В. С. Методологические и теоретические основы тестового педагогического контроля. — Дисс. д. пед. наук. 13.00.01. — М., 1994.
2. Анастази А., Урбина С. Психологическое тестирование. — 7-е изд. — СПб.: Питер, 2005. — 688 с.
3. Булах I. С. Теор1я i методика комп'ютерного тестування усшшност навчання (на матер1алах медич-них навчальних закладiв): Дис... д-ра пед. наук: 13.00.01 / Кшвський ун-т ii«. Т. Шевченка. — К., 1995. — 430 с.
4. Жалдак М. I. , Латнський В. В., Шут М. I. Комп'ютерно-орiентованi засоби навчання математики, фiзики, шформатики. Пойбник для вчитетв // 1нформатика, №41 (281). — 2004 р.
5. Закон Украши про авторське право i сумiжнi права. — К.: Парламентське видавництво, 1998. — 31 с.
6. Методичш рекомендацп з оргашзаци тестового контролю осв^ньо-професшно! тдготовки вчителя. — Терношль: Вид-во ТНПУ i!. В. Гнатюка, 2004. — 100 с.
7. Сергеева Т., Чернявская А. Дидактические требования к компьютерным обучающим программам // Информатика и образование. — №1. 1988. — С. 48-51.
8. Jason Cole. Using Moodle. — O'Reilly, 2005. — 238 p.
9. www.moodle.org.
32
Науковi записки. Серiя: Педагопка. — 2005. — №6.
