CC BY
74
Вестник РУДН. Серия: Информатизация образования
RUDN Journal of Informatization in Education
2018 Vol. 15 No. 3 319-332
http://journals.rudn.ru/informatization-education
DOI 10.22363/2312-8631-2018-15-3-319-332 УДК 378
КОМПЛЕКСНАЯ ТЕХНОЛОГИЯ КОМПЬЮТЕРНОГО ТЕСТИРОВАНИЯ ПО РУССКОМУ ЯЗЫКУ КАК ИНОСТРАННОМУ
В.И. Нардюжев1, И.В. Нардюжев2, В.Е. Марфина1, И.Н. Куринин1
1 Российский университет дружбы народов Российская Федерация, 117198, Москва, ул. Миклухо-Маклая, 6 2 Департамент разработки программного обеспечения ОАО «Седьмой континент»
Российская Федерация, 142784, Москва, п. Московский, д. Говорово, 47км МКАД, стр. 2
Проблема и цель. В настоящее время, при массовом распространении компьютерных технологий и росте интереса к русскому языку, со стороны граждан зарубежных стран, не разработана и не внедрена в головных и локальных центрах тестирования по русскому языку как иностранному (РКИ) система компьютерного тестирования, не получили широкого распространения современные методики и программы статистического анализа результатов компьютерного тестирования и оценки качества репетиционных и экзаменационных тестов.
Методология. Предложены два варианта разработанных авторами комплексных технологий «Тестер» (программы «Банкир», «Тестер», «Маркер», «СтатИнфо») и «ТРТестер» (программы «Протокол», «ТРКлиент», «ТРТестер», «ТРИнформ», «ТРФормы») для организации компьютерного тестирования по РКИ. Оба варианта прошли апробацию в централизованном тестировании и в вузах России, являются комплексными и универсальными, обеспечивая весь цикл работ — от подготовки компьютерных тестов, проведения компьютерного тестирования, сбора результатов в базы данных, выполнения оперативного статистического анализа результатов тестирования и статистического анализа качества тестовых заданий.
Результаты. В технологии «ТРТестер» реализована возможность полностью перейти на компьютерное тестирование или часть субтестов проводить на компьютерах, а часть — на бланках. Репетиционное и экзаменационное тестирование по РКИ можно проводить на компьютерах по всем субтестам (лексика и грамматика, чтение, аудирование, письмо, говорение). Автоматизирована работа эксперта для проверки и оценки на компьютере результатов выполнения неформализованных субтестов (письмо и говорение). В статье, в качестве примеров, показаны фрагменты изображений на экране дисплея при работе с программами комплекса «ТРТестер».
Заключение. Обоснована актуальность создания комплексной системы компьютерного тестирования по РКИ. Предложены два варианта инициативно разработанных ими комплексных технологий «Тестер» и «ТРТестер» для организации компьютерного тестирования по РКИ.
Ключевые слова: компьютерные тесты, русский язык как иностранный, субтесты, компьютерное тестирование, статистический анализ, качество тестов
Постановка проблемы. Российская государственная система тестирования по РКИ обеспечивает оценку (сертификацию) общего владения РКИ. Установлены шесть сертификационных уровней владения русским языком как иностранным языком, определяющие степени сформированности коммуникативной компе-
тенции по РКИ [11]. Каждый тест системы ТРКИ состоят из пяти субтестов (письмо, лексика и грамматика, чтение, аудирование, говорение). Успешное прохождение теста завершается выдачей тестируемому сертификата международного образца. Выдаваемые сертификаты признаны ALTE (Европейской ассоциацией по лингвистическому тестированию). Пять вузов (Государственный институт русского языка им. А.С. Пушкина, МГУ им. М.В. Ломоносова, РУДН, СПбГУ, Тюменский государственный университет) получили право проводить государственное тестирование по РКИ [12]. Эти вузы открыли головные центры тестирования и создали сеть локальных центров тестирования по РКИ (например, в МГУ [4] и в СПбГУ [16]).
Исследования различных вопросов функционирования системы ТРКИ нашли отражение во многих публикациях и диссертационных исследованиях. Это были вопросы подготовки иностранных граждан по русскому языку и к тестированию по РКИ [2; 5], подходы к построению универсальной модели виртуальной языковой среды дистанционного обучения по РКИ [3], адаптации тестов к национальным и личностным особенностям тестируемых рассматривались в работе [14]. На сайте Государственного института русского языка им. А.С. Пушкина представлены образцы тестов по разным сертификационным уровням и дана возможность пройти репетиционные онлайн тесты [15]. Перспективные виртуальные технологии частично описаны в виде «трехмерной активно-коммуникативной образовательной среды», представляющей собой виртуальное пространство и позволяющей симулировать обучающие мероприятия для дистанционного обучения по РКИ при взаимодействии обучаемых с интерактивными объектами, ведущими к текстам (чтение), с каналами социальных сетей (аудирование и говорение), с графическим чатом (письмо) [1]. Компьютерное диагностическое тестирование при обучении РКИ студентов зарубежных стран, дающее возможность получить корректную диагностику практически всех составляющих языковой компетенции студента, рассмотрено в работе [13]. Вопросы разработки моделей, алгоритмов, комплексной технологии и информационно-вычислительных систем компьютерного тестирования отражены в работах [7; 8; 10]. Подходы к использованию в системе тестирования по РКИ компьютерных версий тестов изложены в работах [6; 9].
Однако до настоящего времени не разработана комплексная технология компьютерного тестирования по РКИ, обеспечивающая работу на современных мобильных компьютерах, в локальных сетях и в компьютерных классах по процедурам, принятым в системе тестирования по РКИ, обеспечивающая накопление в базах результатов тестирования в головных и локальных центрах тестирования, обеспечивающая статистический анализ результатов тестирования и анализ качества используемых тестов по всем субтестам и всем сертификационным уровням. Учитывая массовое распространение компьютерных технологий и мобильных устройств, интереса к русскому языку со стороны граждан зарубежных стран, необходимость обеспечить тестируемому дистанционный и локальный доступ к репетиционным (экзаменационным) материалам в системе тестирования по РКИ, можно говорить об актуальности представленного далее исследования, в котором дано описание проекта, инициативно выполненного авторами статьи для головного центра тестирования иностранных граждан.
Цель исследования — изложить два варианта комплексной технологии для организации репетиционного и экзаменационного компьютерного тестирования в системе РКИ. Условное наименование этих вариантов «Тестер» и «ТРТестер». Отличаясь технологиями (алгоритмами) изготовления компьютерных тестов, большим или меньшим удобством для преподавателя и для тестируемого, оба варианта комплексные (выполняют комплекс задач от создания компьютерных тестов до статанализа полученных результатов), универсальные (обеспечивали подготовку и работу с тестами по самым различным дисциплинам, включая русский и английский языки). Обе разработанные технологии и программное обеспечение прошли апробацию в централизованном тестировании и в вузах России.
Например, технология «Тестер» и комплекс соответствующих программ апробированы в Центре тестирования Минобразования России в репетиционном компьютерном тестировании через Интернет в 1997—2001 гг., в централизованном компьютерном тестировании (в 2001 г. проведено 22 тыс. тестов, в 2002 г. проведено 70 тыс. тестов, в 2003 г. проведено 111 тыс. тестов), на вступительных экзаменах в вузы РФ (в июле 2001—2003 гг.). Эффективность и надежность технологии и разработанных программ доказана многолетним опытом эксплуатации в кредитной системе обучения для решения преподавателем вуза задач компьютерного тестирования и оценки качества разработанных тестов. Программы имеют документацию и свидетельства РОСПАТЕНТ РФ [7; 8]. Комплексная технология компьютерного тестирования «Тестер» и разработанный программный комплекс подробно описаны во многих работах авторов. В работах [7; 8; 10] дано ее полное описание. Технология позволяет преподавателю вуза без помощи программистов быстро и качественно подготовить банк тестовых заданий, провести текущий, рубежный и итоговый контроль знаний студентов в виде компьютерного тестирования, проанализировать его результаты и оценить качество своих тестов. В состав программного комплекса входят четыре программы: «Банкир» предназначена для изготовления банков тестовых заданий и компьютерных тестов; «Тестер» обеспечивает тестирование на компьютерах; «СтатИнфо» обеспечивает оперативный статистический анализ результатов компьютерного тестирования; «Маркер» реализует анализ выполнения заданий в тесте и проведение апелляций.
В головном центре тестирования граждан зарубежных стран по русскому языку прошли апробацию отдельные программные комплексы технологии «ТРТе-стер»:
1) система сбора данных о результатах тестирования в региональных представительствах;
2) система ведения центрального банка данных с результатами тестирования;
3) компьютерные версии тестов по РКИ (с разделами — лексика, чтение, аудирование, письмо и говорение) с обработкой результатов тестирования на автономно расположенном компьютере или на сервере через Интернет.
Письмом головного центра тестирования от 06.09.2000 г. № ГЦТ/2-34 вузам, входящим в государственную систему тестирования граждан зарубежных стран по русскому языку, было рекомендовано:
1) начать практическую работу по внедрению компьютерного тестирования по базовому и первому сертификационным уровням;
2) все сведения о лицах, прошедших тестирование в любой форме (на бумаге или на компьютере), об их результатах и выданных им документах передавать в головной центр тестирования в электронном виде для занесения в центральную базу данных. Указанные действия выполнялись с помощью описанных далее программ.
Методы исследования. Комплексная технология компьютерного тестирования «ТРТестер» больше «заточена» под задачи головного центра тестирования в системе РКИ. Актуальность его реализации — обеспечить современный уровень автоматизации всего комплекса работ по компьютерному тестированию граждан зарубежных стран по РКИ в вузах России.
Цель создания данной системы — разработать для вузов России, входящих в государственную систему тестирования граждан зарубежных стран по русскому языку, комплексную технологию и систему компьютерного тестирования по русскому языку как иностранному.
Задачи — провести исследования, разработать алгоритмы и программы для шести подсистем:
1) репетиционные и экзаменационные мультимедийные компьютерные тесты (лексика и грамматика, чтение, аудирование, письмо, говорение) по базовому и первому сертификационным уровням;
2) автоматизация работы преподавателя-эксперта с субтестами письмо и говорение;
3) автоматизация работы организатора тестирования в компьютерном классе;
4) оперативный статистический анализ результатов тестирования;
5) статистический анализ качества тестовых материалов (для авторов);
6) информационная поддержка системы компьютерного тестирования в Интернет.
Ожидаемые результаты.
1. Внедрение в опытную эксплуатацию комплексной технологии и системы компьютерного тестирования по РКИ.
2. Включение центрального и региональных банков данных о лицах, прошедших тестирование по всем сертификационным уровням, их результатах и выданных им документах.
3. Включение через Интернет системы дистанционного репетиционного и экзаменационного компьютерного тестирования по базовому и первому сертификационным уровням для зарубежных культурных центров.
4. Разработка алгоритмов и программного обеспечения репетиционных и экзаменационных мультимедийных компьютерных тестов для второго и третьего сертификационных уровней, для прикладных модулей (филологический, журналистика, экономика, медицинский, энергетический).
Описание разработанной технологии и программного обеспечения. В целях совершенствования тестовых методов оценки уровня владения русским языком как иностранным и в рамках подготовки к переходу на компьютерное тестирование была разработана технология компьютерного тестирования и начата опытная
эксплуатация компьютерных тестов по базовому и первому сертификационным уровням Государственной системы тестирования граждан зарубежных стран по РКИ (рис. 1).
Рис. 1. Технология компьютерного тестирования по РКИ
Результаты и обсуждение. На основе разработанной технологии создана система, которая обеспечивает:
1) возможность для вуза, уполномоченного тестировать иностранных граждан по русскому языку, либо полностью перейти на компьютерное тестирование, либо часть субтестов проводить на компьютерах, а часть — на бланках;
2) репетиционное и экзаменационное тестирование по всем субтестам (лексика и грамматика, чтение, аудирование, письмо, говорение) на автономных или объединенных в локальную сеть мультимедийных персональных компьютерах;
3) автоматизацию работы эксперта для проверки и оценки на компьютере результатов выполнения неформализованных субтестов (письмо и говорение);
4) компьютерную обработку результатов тестирования, включая оперативный статистический и тестологический анализ;
5) ведение центрального и региональных банков данных о лицах, прошедших тестирование, их результатах и выданных им документах.
Программа «ТРПротокол» обеспечивает ввод в базу данных сведений с регистрационных карточек и с бланков ответов о результатах тестирования по сертификационным уровням системы тестирования граждан зарубежных стран по РКИ, учет выданных по результатам тестирования документов, подготовку накопленной информации к отправке по электронной почте в головной центр тестирования для занесения в центральную базу данных. За реквизитами тестируемого следуют его ответы на задания формализованных субтестов («Лексика», «Чтение», «Аудирование»). В программе активно используются справочники («вузы», «Документы», «Линия прибытия», «Модуль», «Страна», «Тест», «Уровень», «Цель тестирования», «Родной язык» и др.). Они соответствуют вопросам регистрационной карточки для тестируемых и обеспечивают ускоренный, формализованный (без случайных ошибок), ввод информации в базу данных. Отмечая «Родной язык»,
нужно сделать выбор названия из справочника (более 150 названий), исключив тем самым ошибки, появляющиеся при самостоятельном написании названия. В справочнике «Страна» представлено более 220 названий стран мира, из которых можно ждать тестируемых по РКИ (рис. 2).
ПрФТйсбЛ ЗаЛгСк (JWKi I
0|е»| В|6|
№ ч>.ни lílirtKpf |Пип [Уржт- |
1 ПШН И57Ж« 1 089 №1 ял 1
i t^KCIÍL? 1 гл 1« ип V
3 л ^•.t-Mpuet' нП КенетАЛн : i» 1Я Кб !
í
0 в Sj
Ткг |Ц*ш J Ли*я |И0М»р| [¿в» ¡Aau*«
т tn г осе ? i doi TÍ345 oí 027000 Я те 77
Сгцмючни* "Я jwC £<в И*
|вГ W
ÍS
па
(НО ÍH1 № <нэ (й*
№ 047
(не
(ИЗ (КО
tira»» IbiMlHbiH Исанеиха
HT*ífc(HC*>d flu
flvyfe KttHlrf
KtMAMud
Дгщмлъ
f пр JDOJh Л- "CTpiHi"
Ё«
075 HpiKujun A.
0?6 HtfMlA
077 Ночи*»
□ТЕ
079 Йпчен
080
091 l'jfAsftíe
08Í
033
он hW
oes
Offi И
«7 bqiwfi
on
¡ÍTMSMJTk
Рис. 2. Фрагмент изображений на экране дисплея при работе программы «ТРПротокол» (вызваны справочники «Язык» и «Страна»)
Программа «ТРТестер» реализует репетиционное и экзаменационное компьютерное тестирование граждан зарубежных стран по русскому языку как иностранному по всем разделам типовых тестов базового и первого (любого) сертификационного уровней (рис. 3, 4).
Программа «ТРЭксперт» автоматизирует работу преподавателя-эксперта и позволять ему с помощью компьютера оценить результаты тестирования по неформализованным субтестам (письмо и говорение) экзамена по русскому языку как иностранному по сертификационным уровням системы тестирования граждан зарубежных стран по РКИ (рис. 5, 6).
Программа «ТРКлиент» дает возможность инструктору-организатору тестирования в компьютерном классе на автономном компьютере или в локальной сети увидеть на экране и распечатать на принтере результаты компьютерного тестирования по русскому языку как иностранному по сертификационным уровням системы тестирования граждан зарубежных стран по русскому языку, полученные с помощью программы «ТРТестер» (рис. 7).
В гшн*т a x
[ Пр*слушая сцлшшы СЛсйрошоа (.'траш пш ] -
ЧАСТЬ 1 J
ИиГлгрЩг I!|]41111.11,ни 11 И4рЯЯКТ:
1. Этот мужчина молотой, л тог - .... ■■ стцрцщД г еггпрцй <~ сгармшып
2. Джон чьста« . ело11р». Г ПО-ру^СМ! 1 русский <~ русскиП »ЗЫК
Л, ЁнЛ.'И кис ко намшгс* нет 1ДКЬ, & ....
'ImfI»*.ijiiwuinw ЧтН Odtwt№*M1
Рис. 3. Фрагмент изображений на экране дисплея при работе программы «ТРТестер»
1С ггоыст - а х
зланршшпш РАБОТЫ НстегрИикмшиП ш'яер ■ -IООО I
Сувтсгт Лаза п" BptMi
!. Логага, гранмпна OO-JOitW OOdOUI
2. '[iffliit оси™» «НЯМЮ
}. AyUipoHJHHi ОИОПИ) «нхию
Письмо in»« OftOMM
J, Говорили? OCtfCiW <»jDIJ<1
ОДист_[ I
Рис. 4. Фрагмент изображений на экране дисплея при работе программы «ТРТестер»
Программа «ТРИнформ» предназначена для учета граждан зарубежных стран, прошедших тестирование по РКИ, для сбора и анализа полученных результатов. В программе «ТРИнформ» можно подгрузить в базу нужные файлы с результатами бланкового или компьютерного тестирования. Работая с программой, можно выбрать объект статистической обработки; для выбранного объекта получить в виде цифр и графиков (количество тестируемых; распределение тестируемых по оценкам с учетом шкалы перевода тестовых баллов в оценки, которую можно тут же подстраивать; распределение тестируемых по количеству набранных баллов); произвести сравнительный анализ результатов тестирования различных объектов статобработки; просмотреть список тестируемых, с возможностью произвольной сортировки и быстрого поиска; распечатать статистические формы и списки (или их части) на принтере (рис. 8).
^ТПЕхрегГ
-\1 Тест тз Баллы Итог
¡2 к*»] : . : Г01 ЭО.О 16
900001 001-0-0) Г02 0,0 1«
»00001 М1 -0-01 гоз 0,0 16
»00001 001-0-01 гтм ^ 16
в 0000! 001-0-01 П01 40.0 50
900001 001-0-01 П02 0,0 50
«40001 001-0-01 Г01 л 0
«40001 001-0-0) Г02 0
»40001 001-001 гоз •У 0
»40001 001-0-01 Г04 <У 0
»4000! 001-1М» П01 34,0 75
»40001 001-0-01 П02 26,0 75
I - Г I «НЮЛО'ОКНЗО
Нарушен* норы речгьего этикету £-0,5)
Коммуникативно значимая ошибка (-1.0)
Комытакатавно ыешэчнмля ошибка
Грубое нарушение фонетню-ннтонац. норм КЗ ксфоне Н Д ГИЧГСИОМ уровне (-2,0)
Ляеинтмоетъ решгша ымм^-ишшиой 51ЛЭН11 [пошил Л1 1-5] (-|"6Г0)
Максимально полюс нсполыоялниг средств речевого грагп (+Ц>)
Соответствие фонепко юпошоюниым норнам (НО)
X Пуск |
0.0 0.0 0.0 0,0 ».о
Г 1.0 1,0
Принять
Развернутость «ысЕХжрания (+1,0) 1,0
БАЛЛЫ 30.0
Рис. 5. Фрагмент изображений на экране дисплея при работе программы «ТРЭксперт»
(субтест «Говорение»)
^ ТИГхрегТ
.VI Тест тз Баллы Итог
»00001 001-0-01 ГШ зоо 16
»00001 001-0-01 Г02 оо 16
»00001 001-0-01 ГОЗ 0,0 16
»00001 001-0-0) Г04 16
П00001 0й| 0 01 ПО! 40.0 50
»00001 001-0-01 П02 0,0 50
»40001 001-0-01 Г01 0
»40001 001-0-01 ПЙ 0
»40001 001-001 гоз 0
»40001 001-О-01 Г£Н 0
»40001 001-0-01 П01 34,0 75
»40001 001 -0-01 П02 26,0 75
Шаальные друзья Виктора говорили о той. что они б^утлешп, ногсга стили школу Виктор вдтед стать оисателш Он поступил 1 ЛцтератчргвгП институт.
Пропуск истнзмого фрагмента тлети (-5,0) 0.0
Неточность передачи югформашш 1-5.0) 0,0
Нелогичность икмшосп кшожнж 1,-2,0) -2.0
Коммуникативно занимая ошибка <-2,0) 0.0
Коммуникативно незютнмая ошибка (-0,5) 0.0 Ад
он пели (-Ю.0) 40,0 Полном и развернутость ответа (+3,0) 3,0
Принять
Элементы с амоститглъкостн 3,0
=1
БАЛЛЫ 40.0
Рис. 6. Фрагмент изображений на экране дисплея при работе программы «ТРЭксперт»
(субтест «Письмо»)
Рис. 7. Фрагмент изображений на экране дисплея при работе программы «ТРКлиент»
[jD IÎ'HHOojîu Сеп Своди* Режии Окно 7
'3 Ей
Запрос
Столбцы
Фцгьтс*'
Ключ
№ л
ФИО
Паспорт
Поп
Страна
Язык
Модуль
Уровень
Цепь
□ уз
Линия
Документ
Серия
H опар
Лота V
Зи4ме™я. JCmtotou
CifSfflCT^j ■
L." Аексм-л □ Чте«*
L Адацяв.
! Лчсьмо □Г морей
Ортятъ
ÛTMemrt
Рис. 8. Фрагмент изображений на экране дисплея при работе программы «ТРИнформ»
Программа «ТРФормы» обеспечивает подготовку статистического отчета по итогам тестирования иностранных граждан по РКИ и проведение статистического анализа качества тестовых материалов по основным тестологическим параметрам.
Заключение. В работе обоснована актуальность создания комплексной системы компьютерного тестирования по РКИ. Авторами предложены два варианта инициативно разработанных ими комплексных технологий «Тестер» и «ТРТестер» для организации компьютерного тестирования по РКИ. Оба варианта являются универсальными, обеспечивая весь цикл работ — от подготовки компьютерных тестов, проведения компьютерного тестирования, сбора результатов в базы данных, выполнения оперативного статистического анализа результатов тестирования и статистического анализа качества тестовых заданий.
Тестирование по РКИ можно проводить на компьютерах по всем субтестам (лексика и грамматика, чтение, аудирование, письмо, говорение). Автоматизирована работа эксперта для проверки и оценки на компьютере результатов выполнения неформализованных (мультимедийных) субтестов (письмо и говорение).
СПИСОК ЛИТЕРАТУРЫ
[1] Азимов Э.Г., Жильцов В.А. Использование технологий виртуальных миров в дистанционном обучении РКИ // Русский язык за рубежом. 2016. № 4. С.111—116.
[2] Андрюшина Н.П., Битехтина Г.А., Клобукова Л.П. [и др.] Программа по русскому языку для иностранных граждан. Первый уровень. Общее владение. СПб.: Златоуст, 2006. 120 с.
[3] Богомолов А.Н. Виртуальная языковая среда обучения русскому языку как иностранному (лигвокультурологический аспект). М.: МАКС Пресс, 2008. 315 с.
[4] Головной центр тестирования МГУ имени М.В. Ломоносова. URL: http://gct.msu.ru/o-tsentre/ (дата обращения: 30.04.2018).
[5] Дунаева Л.А. Средства информационных и коммуникационных технологий в обучении иностранных учащихся гуманитарных специальностей научному общению. М.: МАКС Пресс, 2006. 189 с.
[6] Дьяконов И.А., Нардюжев В.И., Нардюжев И.В. Автоматизация тестирования граждан зарубежных стран по русскому языку // Международное сотрудничество в образовании: материалы науч.-практ. конф. СПб.: СПбГТУ, 1998. C. 92—93.
[7] Куринин И.Н., Нардюжев В.И., Нардюжев И.В. Компьютерное тестирование в оценке учебных достижений студентов: учебно-методическое пособие. М.: РУДН, 2008. 308 с.
[8] Куринин И.Н., Нардюжев В.И., Нардюжев И.В. Комплексная технология компьютерного тестирования // Вестник Российского университета дружбы народов. Серия: Информатизация образования. 2013. № 2. С. 112—121.
[9] Нардюжев В.И., Нардюжев И.В. Комплексная технология компьютерного тестирования по русскому языку как иностранному // Развитие системы тестирования в России: тезисы докл. Второй Всеросс. науч.-практ. конф. Ч. 2. М.: Прометей, 2000. С. 14—15.
[10] Нардюжев В.И., Нардюжев И.В. Модели и алгоритмы информационно-вычислительной системы компьютерного тестирования: монография. М.: Прометей, 2000. 148 с.
[11] Приказ Минобрнауки РФ от 1 апреля 2014 г. № 255 «Об утверждении уровней владения русским языком как иностранным языком и требований к ним». URL: https://www.9111. m/uncos/t210963-prikaz-minobrnauki-rossii-ot-01-04.2014-n-255-ob-utverzhdenii-urovney-vladeniya-russkim-yazikom-kak-inostrannim-yazikom-i-trebovaniy-k-nim/ (дата обращения: 30.04.2018).
[12] Приказ Минобрнауки РФ от 28 октября 2014 г. № 1394 «Об утверждении перечня образовательных организаций, проводящих государственное тестирование по русскому языку как иностранному языку». URL: http://ppt.ru/docs/prikaz/minobrnauki/n-1394-67391 (дата обращения: 30.04.2018).
[13] Руденко-Моргун О.И., Дунаева Л.А. Диагностическое тестирование как механизм управления самостоятельной работой в обучающей мультимедийной среде // Компьютерные учебные программы и инновации. 2004. № 2. С. 15.
[14] Румянцева Н.М. Проблемы адаптивного тестирования и адаптации тестов к национальным и личностным особенностям тестируемых. URL: http://www.testor.ru/files/Conferens/ problsovtest/ Probladapttest.doc (дата обращения: 30.04.2018).
[15] Центр лингводидактики, языкового тестирования и содействия миграционной политике Гос. ИРЯ им. А.С. Пушкина. URL: http://www.pushkin.institute/Certificates/CCT/tests-online.php (дата обращения: 30.04.2018).
[16] Центр языкового тестирования СПбГУ. URL: http://spbu.ru/science/expert/lang-centre. html (дата обращения: 30.04.2018).
© Нардюжев В.И., Нардюжев И.В., Марфина В.Е., Куринин И.Н., 2018
История статьи:
Дата поступления в редакцию: 15 мая 2018 Дата принятия к печати: 18 июня 2018
Для цитирования:
Нардюжев В.И., Нардюжев И.В., Марфина В.Е., Куринин И.Н. Комплексная технология компьютерного тестирования по русскому языку как иностранному // Вестник Российского университета дружбы народов. Серия «Информатизация образования». 2018. Т. 15. № 3. С. 319—332. DOI 10.22363/2312-8631-2018-15-3-319-332
Сведения об авторах:
Нардюжев Виктор Иванович, кандидат технических наук, доцент кафедры «Компьютерные технологии» филологического факультета Российского университета дружбы народов. Контактная информация: е-mail: [email protected]
Нардюжев Иван Викторович, кандидат технических наук, программист департамента разработки программного обеспечения ОАО «Седьмой континент». Контактная информация: е-mail: [email protected]
Марфина Виктория Евгеньевна, студентка магистратуры кафедры «Сравнительной образовательной политики» Российского университета дружбы народов. Контактная информация: е-mail: [email protected]
Куринин Иван Николаевич, кандидат экономических наук, доцент, заведующий кафедрой «Компьютерные технологии» филологического факультета Российского университета дружбы народов. Контактная информация: е-mail: [email protected]
COMPLEX TECHNOLOGY OF COMPUTER TESTING IN RUSSIAN AS
A FOREIGN LANGUAGE
V.I. Nardyuzhev1, I.V. Nardyuzhev2, V.E. Marfina1, I.N. Kurinin1
1 Peoples' Friendship University of Russia (RUDN University) 6, Miklukho-Maklaya str., Moscow, 117198, Russian Federation 2 Software development department, JSC "The Seventh Continent" Building, 2, MKAD 47, v. Govorovo, Moscow, 142784, Russian Federation
Problem and goal. At present, with the massive spread of computer technology and the growth of interest in the Russian language, by the citizens of foreign countries, is not developed and implemented in the Head and local testing centers in Russian as a foreign language (RCT) system of computer testing, not widely used modern methods and programs of statistical analysis of the results of computer testing and quality assessment of rehearsal and examination tests.
Methodology. Two options developed by the authors of complex technologies «Tester» (the program "the Banker", "Tester", "Token", "Statinfo") and "Trester" (program "Protocol", "Tsclient", "Trester", "Tranform", "Thorny") for computer-based testing by RCTS. Both variants have been tested in centralized testing and in Russian universities, are complex and versatile, providing the entire cycle of work — from the preparation of computer tests, computer testing, data collection, performance of operational statistical analysis of test results and statistical analysis of the quality of test items.
Results. In technology «Trester» the possibility to completely switch to computer testing or part of a subtest to spend on computers and some on the forms. Rehearsal and examination testing for RCT can be carried out on computers for all sub-tests (vocabulary and grammar, reading, listening, writing, speaking). Automated expert work to check and evaluate on the computer the results of unformalized subtests (writing and speaking). In the article, as examples, show the fragments of images on the display screen when working with complex programs "Trester".
Conclusion. The urgency of creating a complex system of computer testing for RCT is substantiated. Two options of the initiative they have developed complex technologies "Tester" and "Trester" for computer testing in RCTS.
Key words: computer tests, Russian as a foreign language, subtests, computer testing, statistical analysis, quality of tests
REFERENCES
[ 1] Azimov EH.G., ZHil'cov VA. Ispol'zovanie tekhnologij virtual'nyh mirov v distancionnom obuchenii RKI [The use of virtual worlds technologies in remote learning of RCTS]. Russkij yazyk za rubezhom [Russian language abroad]. 2016. No. 4. Pp. 111—116.
[2] Andryushina N.P., Bitekhtina G.A., Klobukova L.P. i dr. Programmapo russkomu yazyku dlya inostrannyhgrazhdan. Pervyjuroven'. Obshchee vladenie [Program in Russian for foreign citizens. First level. Common ownership]. SPb.: Zlatoust, 2006. 120 p.
[3] Bogomolov A.N. Virtual'naya yazykovaya sreda obucheniya russkomu yazyku kak inostrannomu (ligvokul'turologicheskij aspekt) [The virtual language environment of teaching Russian as a foreign language (lingvokulturologicheskom aspect).]. M.: MAKS Press, 2008. 315 p.
[4] Golovnoj centr testirovaniya MGU imeni M.V. Lomonosova [Head testing center of Moscow state University named After M. V Lomonosov]. URL: http://gct.msu.ru/o-tsentre/ (дата обращения: 10.03.2018).
[5] Dunaeva L.A. Sredstva informacionnyh i kommunikacionnyh tekhnologij v obuchenii inostrannyh uchashchihsya gumanitarnyh special'nostej nauchnomu obshcheniyu [Means of information and communication technologies in teaching foreign students of Humanities to scientific communication]. M.: MAKS Press, 2006. 189 p.
[6] D'yakonov I.A., Nardyuzhev V.I., Nardyuzhev I.V. Avtomatizaciya testirovaniya grazhdan zarubezhnyh stran po russkomu yazyku [Automation of testing citizens of foreign countries in Russian language]. Mezhdunarodnoe sotrudnichestvo v obrazovanii [International cooperation in education]: materialy nauchno-prakticheskoj konferencii. SPb.: SPbGTU, 1998. Pp. 92—93.
[7] Kurinin I.N., Nardyuzhev V.I., Nardyuzhev I.V. Komp'yuternoe testirovanie v ocenke uchebnyh dostizhenijstudentov [Computer testing in the evaluation of educational achievements of students]: uchebno-metodicheskoe posobie. M.: RUDN, 2008. 308 p.
[8] Kurinin I.N., Nardyuzhev VI., Nardyuzhev I.V. Kompleksnaya tekhnologiya komp'yuternogo testirovaniya [Complex technology of computer-based testing]. Vestnik Rossijskogo universiteta druzhby narodov. Serija «Informatizacija obrazovanija» [Bulletin of the Russian university of friendship of the people. "Education Informatization" series]. 2013. No. 2. Pp. 112—121.
[9] Nardyuzhev VI., Nardyuzhev I.V. Kompleksnaya tekhnologiya komp'yuternogo testirovaniya po russkomu yazyku kak inostrannomu [The complex technology of computer-based testing in Russian as a foreign language]. Razvitie sistemy testirovaniya v Rossii [Development of system of testing in Russia]: tezisy dokladov Vtoroj Vserossijskoj nauchno-prakticheskoj konferencii. Chast' 2. M.: Prometej, 2000. Pp. 14—15.
[10] Nardyuzhev V.I., Nardyuzhev I.V. Modeli i algoritmy informacionno-vychislitel'noj sistemy komp'yuternogo testirovaniya [Models and algorithms of information system computer-based testing]: monografiya. M.: Prometej, 2000. 148 p.
[11] Prikaz Minobrnauki RF№ 255 ot 1 aprelya 2014 g. «Ob utverzhdenii urovnej vladeniya russkim yazykom kak inostrannymyazykom i trebovanijknim» [Order No. 255 of the Ministry of education of the Russian Federation of April 1, 2014 "on approval of levels of Russian as a foreign language and requirements to them"]. URL: https://www.9111.ru/uncos/t210963-prikaz-minobrnauki-rossii-ot-01-04.2014-n-255-ob-utverzhdenii-urovney-vladeniya-russkim-yazikom-kak-inostrannim-yazikom-i-trebovaniy-k-nim/
[12] Prikaz, Minobrnauki RF№1394ot 28oktyabrya 2014 g. «Ob utverzhdenii perechnya obrazovatel'nyh organizacij, provodyashchih gosudarstvennoe testirovanie po russkomu yazyku kak inostrannomu yazyku» [Order of the Ministry of education of the Russian Federation № 1394 of October 28, 2014 "on approval of the list of educational institutions conducting state testing of Russian as a foreign language"]. URL: http://ppt.ru/docs/prikaz/minobrnauki/n-1394-67391
[13] Rudenko-Morgun O.I., Dunaeva L.A. Diagnosticheskoe testirovanie kak mekhanizm upravleniya samostoyatel'nojrabotojv obuchayushchejmul'timedijnojsrede [Diagnostic testing as a mechanism for the management of independent work in educational multimedia environment]. Komp'yuternye uchebnyeprogrammy i innovacii [Computer training programs and innovation]. 2004. No. 2. 15 p.
[14] Rumyanceva N.M. Problemy adaptivnogo testirovaniya iadaptacii testovknacional'nym i lichnostnym osobennostyam testiruemyh [Problems of adaptive testing and adaptation of tests to national and personal characteristics of the test subjects]. URL: http://www.testor.ru/files/Conferens/ problsovtest/ Probladapttest.doc
[15] Centr lingvodidaktiki, yazykovogo testirovaniya i sodejstviya migracionnoj politike Gos. IRYA im. A.S. Pushkina [The center of language didactics, language testing and promotion of migration policy ofthe state. ORYA them. ofA.S. Pushkin]. URL: http://wwwpushkin.institute/Certificates/ CCT/tests-online.php
[16] Centr yazykovogo testirovaniya SPbGU [Language testing Center ofSt. Petersburg state University]. URL: http://spbu.ru/science/expert/lang-centre.html
Article history:
Date of receipt: May 15, 2018
Date of adoption: June 18, 2018
For citation:
Nardyuzhev V.I., Nardyuzhev I.V., Marfina V.E., Kurinin I.N. (2018). Complex Technology of
Computer Testing in Russian as a Foreign Language. RUDN Journal of Informatization of Education, 15 (3), 319—332. DOI 10.22363/2312-8631-2018-15-3-319-332
Bio Note:
Nardyuzhev Viktor Ivanovich, candidate of engineering sciences, associate professor of the department "Computer technologies" of the philological faculty of the Peoples' Friendship University of Russia. Contact Information: e-mail: [email protected]
Nardyuzhev Ivan Viktorovich, candidate of engineering sciences, programmer of the software development department of JSC "The Seventh Continent". Contact Information: e-mail: inard@ rambler.ru
Marfina Victoria Evgenievna, student of the master course at the department of comparative educational policy of the Peoples' Friendship University of Russia. Contact information: e-mail: [email protected]
Kurinin Ivan Nikolayevich, candidate of economic sciences, associate professor, head of the department "Computer technologies" of the philological faculty of the Peoples' Friendship University of Russia. Contact Information: e-mail: [email protected]
