Научная статья на тему 'ПРОГНОСТИЧЕСКАЯ МОДЕЛЬ ОЦЕНКИ УСПЕШНОСТИ ПРЕДМЕТНОГО ОБУЧЕНИЯ В УСЛОВИЯХ ЦИФРОВИЗАЦИИ ОБРАЗОВАНИЯ'

ПРОГНОСТИЧЕСКАЯ МОДЕЛЬ ОЦЕНКИ УСПЕШНОСТИ ПРЕДМЕТНОГО ОБУЧЕНИЯ В УСЛОВИЯХ ЦИФРОВИЗАЦИИ ОБРАЗОВАНИЯ Текст научной статьи по специальности «Науки об образовании»

CC BY
290
37
i Надоели баннеры? Вы всегда можете отключить рекламу.
Ключевые слова
ЦИФРОВИЗАЦИЯ ОБРАЗОВАНИЯ / РАННЕЕ ПРОГНОЗИРОВАНИЕ / УСПЕШНОСТЬ ОБУЧЕНИЯ / СИСТЕМА УПРАВЛЕНИЯ ОБУЧЕНИЕМ / МАРКОВСКАЯ МОДЕЛЬ / АНАЛИЗ ОБРАЗОВАТЕЛЬНЫХ ДАННЫХ

Аннотация научной статьи по наукам об образовании, автор научной работы — Носков Михаил Валерианович, Вайнштейн Юлия Владимировна, Сомова Марина Валериевна, Федотова Ирина Михайловна

Постановка проблемы . Представлен один из подходов к решению задачи прогнозирования академической успеваемости обучающихся. В отличии от большинства исследований в этой области, направленных на прогнозирование эффективности выпуска, то есть позволяющих на основе результатов промежуточных аттестаций оценить шансы обучающихся на успешное окончание вуза, результаты данного исследования нацелены на прогнозирование успешности обучения на ранних стадиях образовательного процесса. Методология . Особенность и новизна предлагаемой модели в прогнозировании успеваемости обучающихся на основе марковской модели, источниками данных которой выступают универсальные предикторы электронного обучающего курса, определяющие успешность предметного обучения на основе личностных характеристик обучаемого. Результаты . Описана прогностическая модель оценки успешности предметного обучения в условиях цифровизации образования, раскрыт авторский опыт ее апробации для студентов направления подготовки «Информатика и вычислительная техника» Сибирского федерального университета и результаты качественной оценки работы модели. Заключение . Определены перспективы построения на основе результатов исследования цифрового сервиса прогнозирования академической успеваемости обучающихся в электронной информационно-образовательной среде вуза.

i Надоели баннеры? Вы всегда можете отключить рекламу.
iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

PROGNOSTIC MODEL FOR ASSESSING THE SUCCESS OF SUBJECT LEARNING IN CONDITIONS OF DIGITALIZATION OF EDUCATION

Problem statement. One of the approaches to solving the problem of predicting the academic performance of students is displayed. Unlike existing studies in this area, which are mainly aimed at predicting the effectiveness of graduation, that is, based on the results of intermediate certifications that allow us to assess the chances of students to successfully graduate from a university, the results of this study are aimed at predicting the success of education in the early stages of the educational process. Methodology. A feature and novelty of the proposed prognostic model is the forecasting of student performance based on the Markov model, the data sources of which are universal predictors of an e-learning course that determine the success of subject education based on the personal characteristics of the student. Results. The authors present a description of a predictive model for assessing the success of subject education in the context of digitalization of education, reveal their experience of its approbation for students of the Siberian Federal University in the field of study “Informatics and Computer Engineering” and the results of a qualitative assessment of the model. Conclusion. The prospects for building a digital service for predicting the academic performance of students in the electronic information and educational environment of the university based on the results of the study are stated.

Текст научной работы на тему «ПРОГНОСТИЧЕСКАЯ МОДЕЛЬ ОЦЕНКИ УСПЕШНОСТИ ПРЕДМЕТНОГО ОБУЧЕНИЯ В УСЛОВИЯХ ЦИФРОВИЗАЦИИ ОБРАЗОВАНИЯ»

¡ä

RUDN Journal of Informatization in Education Вестник РУДН. Серия: Информатизация образования

ISSN 2312-8631 (Print); ISSN 2312-864X (Online) 2023 Vol. 20 No. 1 7-19

http://journals.rudn.ru/informatization-education

МЕНЕДЖМЕНТ ОБРАЗОВАТЕЛЬНЫХ ОРГАНИЗАЦИЙ В ИНФОРМАЦИОННУЮ ЭПОХУ

MANAGEMENT OF EDUCATIONAL INSTITUTIONS IN THE INFORMATION ERA

DOI 10.22363/2312-8631-2023-20-1-7-19 EDN: BDFDRI УДК 378.14

Научная статья / Research article

Прогностическая модель оценки успешности предметного обучения в условиях цифровизации образования

М.В. Носков , Ю.В. Вайнштейн , М.В. Сомова , И.М. Федотова

Сибирский федеральный университет, Красноярск, Российская Федерация

^ yweinstein@sfu-kras.ru

Аннотация. Постановка проблемы. Представлен один из подходов к решению задачи прогнозирования академической успеваемости обучающихся. В отличии от большинства исследований в этой области, направленных на прогнозирование эффективности выпуска, то есть позволяющих на основе результатов промежуточных аттестаций оценить шансы обучающихся на успешное окончание вуза, результаты данного исследования нацелены на прогнозирование успешности обучения на ранних стадиях образовательного процесса. Методология. Особенность и новизна предлагаемой модели в прогнозировании успеваемости обучающихся на основе марковской модели, источниками данных которой выступают универсальные предикторы электронного обучающего курса, определяющие успешность предметного обучения на основе личностных характеристик обучаемого. Результаты. Описана прогностическая модель оценки успешности предметного обучения в условиях цифровизации образования, раскрыт авторский опыт ее апробации для студентов направления подготовки «Информатика и вычислительная техника» Сибирского федерального университета и результаты качественной оценки работы модели. Заключение. Определены перспективы построения на основе результатов исследования цифрового сервиса прогнозирования академической успеваемости обучающихся в электронной информационно-образовательной среде вуза.

Ключевые слова: цифровизация образования, раннее прогнозирование, успешность обучения, система управления обучением, марковская модель, анализ образовательных данных

История статьи: поступила в редакцию 8 ноября 2022 г.; доработана после рецензирования 16 ноября 2022 г.; принята к публикации 5 декабря 2022 г.

© Носков М.В., Вайнштейн Ю.В., Сомова М.В., Федотова И.М., 2023 lice) I work is licensed under a Creative Commons Attribution 4.0 International License

https://creativecommons.Org/licenses/by-nc/4.0/legalcode

Для цитирования: Носков М.В., Вайнштейн Ю.В., Сомова М.В., Федотова И.М. Прогностическая модель оценки успешности предметного обучения в условиях цифро-визации образования // Вестник Российского университета дружбы народов. Серия: Информатизация образования. 2023. Т. 20. № 1. С. 7-19. http://doi.org/10.22363/2312-8631-2023-20-1-7-19

Prognostic model for assessing the success of subject learning in conditions of digitalization of education

Mikhail V. Noskov , Yuliya V. Vaynshteyn , Marina V. Somova , Irina M. Fedotova

Siberian Federal University, Krasnoyarsk, Russian Federation ^ yweinstein@sfu-kras.ru

Abstract. Problem statement. One of the approaches to solving the problem of predicting the academic performance of students is displayed. Unlike existing studies in this area, which are mainly aimed at predicting the effectiveness of graduation, that is, based on the results of intermediate certifications that allow us to assess the chances of students to successfully graduate from a university, the results of this study are aimed at predicting the success of education in the early stages of the educational process. Methodology. A feature and novelty of the proposed prognostic model is the forecasting of student performance based on the Markov model, the data sources of which are universal predictors of an e-learning course that determine the success of subject education based on the personal characteristics of the student. Results. The authors present a description of a predictive model for assessing the success of subject education in the context of digitalization of education, reveal their experience of its approbation for students of the Siberian Federal University in the field of study "Informatics and Computer Engineering" and the results of a qualitative assessment of the model. Conclusion. The prospects for building a digital service for predicting the academic performance of students in the electronic information and educational environment of the university based on the results of the study are stated.

Keywords: digitalization of education, early prediction, learning success, learning management system, Markov model, educational data analysis

Article history: received 8 November 2022; revised 16 November 2022; accepted 5 December 2022.

For citation: Noskov MV, Vaynshteyn YuV, Somova MV, Fedotova IM. Prognostic model for assessing the success of subject learning in conditions of digitalization of education. RUDN Journal of Informatization in Education. 2023;20(1):7-19. (In Russ.) http://doi.org/10.22363/2312-8631-2023-20-1-7-19

Проблема и цель. Высшие учебные заведения России и мира активно внедряют цифровые технологии, обеспечивающие поддержку образовательного процесса и повышение качества образования в условиях его цифровой трансформации [1; 2]. Одним из распространенных примеров цифровой поддержки является применение систем управления обучением (LMS) и создание на их базе электронных обучающих курсов (ЭОК), количество кото-

рых стремительно выросло за последние годы, особенно в период распространения новой коронавирусной инфекции и вынужденного массового перехода вузов к онлайн-обучению.

Педагогическая практика и накопленный опыт в области электронного обучения демонстрирует высокий уровень результативности и эффективности смешанного формата обучения, сочетающего традиционные формы офлайн-обучения с элементами онлайн-обучения. Наличие множества образовательных данных, накапливаемых в условиях смешанного обучения в электронной информационно-образовательной среде (ЭИОС) вуза и пополняемых как автоматизировано, так и вручную преподавателями, дает возможность решения различных задач учебной аналитики. Например, прогнозирования успешности обучения студента на основе построения и использования прогностических моделей.

Анализ научно-педагогической литературы показывает, что наиболее часто прогностические модели опираются на алгоритмы машинного обучения и наборы предикторов, задаваемых авторами с учетом методики изучения дисциплин. В исследовании предлагается использовать Марковскую модель, которая, на наш взгляд, позволяет найти объективные прогнозные значения успеваемости обучающихся, оценить значения латентных параметров и на основе этого выстроить сценарии оптимального управления процессом обучения каждого обучающегося. Заметим, что в отличие от большинства исследовательских работ, в которых успешность обучения рассматривается с точки зрения прогнозирования отсева студентов, мы рассматриваем успешность обучения по конкретной дисциплине с целью раннего прогнозирования успеваемости обучающихся по дисциплине (результатов промежуточной аттестации). Одной из задач исследования является выделение кластеров обучающихся, классифицированных по группам риска относительно факта сдачи промежуточной аттестации по дисциплине, например группа высокого, пограничного и низкого риска неуспешности. Определив кластеры обучающихся, перспективным представляется построение и реализация сценариев управляющего содействия и помощи обучающимся с высоким риском образовательной неуспешности. Очевидно, что данная работа должна осуществляться на ранних этапах образовательного процесса и чем раньше это будет сделано, тем большего успеха в обучении может добиться студент.

Таким образом, цель исследования - построение эффективной прогностической модели, обеспечивающей динамическое прогнозирование успешности предметного обучения студентов на основе данных ЭИОС вуза в условиях цифровизации образования.

Методология. Наиболее распространенной практикой в области прогнозирования образовательных результатов обучающихся является прогнозирование на основе данных учебной аналитики. В научных исследованиях обозначены распространенные в образовательных организациях проблемы, связанные со сбором и интерпретацией образовательных данных. Особое значение в задачах учебной аналитики, как подчеркивают исследователи Университета Константина Философа (Constantine the Philosopher University in Nitra), приобретает важность процессов сбора и хранения данных учебной

аналитики, ограничения и интерпретации доступных наборов образовательных данных [3]. Пример прогноза успешности обучения продемонстрирован в [4], где предложена прогностическая модель, использующая образовательные данные, накапливаемые в LMS, и данные, поступающие от преподавателей, а именно результаты текущей успеваемости и посещаемости аудиторных занятий. В связи с влиянием субъективного фактора при фиксации данных преподавателями и широкими возможностями регулярного мониторинга и сбора образовательной статистики в ЭИОС актуальность приобретает построение математической модели, обеспечивающей прогнозирование академической успеваемости студентов вуза на основе регулярно пополняемого цифрового следа обучающегося.

Одним из распространенных подходов является прогнозирование отсева студентов на уровне дисциплины при статичной структуре электронного обучающего курса и регулярной наполняемости его данными в течение нескольких лет [5]. Очевидно, что в условиях интенсивной динамичности содержания образовательной программы и входящих в нее дисциплин это выступает существенным ограничением прогностической модели.

В модели прогнозирования, предложенной учеными Национального университета Сан-Агустина (Universidad Nacional de San Agustín), в качестве предикторов используют не только данные из LMS, но и социально-демографические данные, а также данные социальных сетей [6]. Авторы в своем исследовании выделяют двадцать два предиктора и строят прогноз на основе алгоритма Simple Regression Tree Learner, достигая достаточно высокой точности для студентов старших курсов обучения, колеблющейся от 4 до 6 % для первого и третьего курсов. Однако подобные прогностические модели в связи с высоким количеством предикторов сложны для масштабирования и нуждаются в развитии с точки зрения повышения точности предсказания для студентов первого курса обучения.

Исследователи Туринского политехнического университета (Politecnico di Torino), предлагают осуществлять раннее прогнозирование успеваемости на основе алгоритмов ассоциативной классификации [7]. Считается, что ассоциативные классификаторы более точны, чем традиционные деревья решений и алгоритмы машинного обучения и опираются на базу знаний, интерпретирующих повторяющиеся сочетания тех или иных предикторов. В основу модели положена классификация, выстроенная на базе знаний, которая интерпретирует повторяющиеся сочетания различных совокупностей предикторов. Подчеркивается, что результаты работы ассоциативной модели исследуется вручную для определения профилей учащихся, находящихся в группе риска неуспешности обучения, что серьезно ограничивает применение модели для прогнозирования при большом контингенте студентов.

Одним из наиболее обстоятельных является исследование группы ученых Университета Овьедо (University of Oviedo) и Коркского технологического института (Cork Institute of Technology) по раннему прогнозированию успешности обучения. В нем авторы на основе использования совокупности методов машинного обучения демонстрируют, что модели, обученные на данных из LMS для одной выбранной дисциплины, могут давать низкую точ-

ность для другой дисциплины и предлагают подход, основанный на построении различных моделей прогнозирования для студентов, классифицированных по группам риска, например, так называемых неудачников и отличников [8]. Установлено, что точность прогнозирования при таком подходе возрастает по мере увеличения момента предсказания, то есть чем больше период сбора данных, тем выше точность прогноза. Например, уже начиная с середины семестра изучения дисциплины можно достичь точности выше 90 % для выявления обучающихся как высокого, так и низкого риска неуспешности. Но оказать помощь и поддержку отстающим студентам в тот момент, когда прошло уже более половины учебного семестра, не всегда представляется результативным.

Несмотря на популярность и востребованность подобных исследований, подходов к построению прогностических моделей и реализации на их основе цифровых сервисов в ЭИОС вузов в отечественной и зарубежной практике, которые бы позволяли массово на регулярной основе на ранних этапах прогнозировать образовательный результат обучающихся, пока не представлено. Полагаем, в основу решения данной задачи можно заложить применение марковских моделей прогнозирования успешности обучения. Отметим, что марковские модели не пользуются популярностью в задачах прогнозирования успешности обучения студентов ни в России, ни за рубежом. Немногочисленные существующие работы, в основе которых лежит марковская модель, решают задачи долгосрочного прогнозирования, например позволяют на основе результатов промежуточных аттестаций студентов прогнозировать успешное завершение обучения в университете или вероятность отсева студентов по курсам или направлениям обучения [8-12].

Результаты и обсуждение. В исследовании мы рассматриваем процесс обучения как марковский процесс. В работе Е.С. Вентцеля и Л.А. Ов-чарова показано, что если процесс удовлетворяет свойствам пуассоновских потоков событий, а именно свойствам стационарности, отсутствия последействия и ординарности, то он может быть представлен как марковский процесс [13]. Для процесса обучения свойство стационарности представляет собой независимость времени изучения учебного материала (изучения темы, выполнения задания, решения теста и др.) от времени его начала. Свойство отсутствия последействия состоит в том, что время решения задачи не зависит от того, решались ли другие задачи ранее; время изучения темы не зависит от времени изучения других тем, а свойство ординарности в том, что наступление двух и более переходов между процессами тренинга и передачи знаний за малый промежуток времени практически невозможно. На основании этого процесс обучения по дисциплине можно представить с помощью марковского процесса «гибель - размножение».

Для этого мы выделяем в процессе обучения студента по дисциплине процессы получения информации/учебного материала (представление учебных объектов и материалов, передача знаний, демонстрация умений и т. п.) и усвоения информации/учебного материала (формирование навыков, овладение опытом и т. п.), которые являются противоположно направленными. Конечно, это разделение является в некотором роде условным, но тем не

менее прослеживается в научных исследованиях и педагогической практике. Заметим, что процесс получения информации не зависит от отношения к нему студента, который обязан освоить учебные материалы и сформировать образовательные результаты на уровне не ниже прописанного в рабочей программе дисциплины. В свою очередь, процесс усвоения учебного материалы субъективен и во многом зависит от личностных качеств и особенностей обучающихся.

Классически при применении марковских моделей вводится шкала оценивания обучающегося и в каждый момент времени можно поставить в соответствие студенту некоторое состояние Sk при к, соответствующем размерности вводимой шкалы (5-балльная, 100-бальная и др.). Например, 5-балльная шкала оценивания, принятая в вузах России, предполагает, что состояние Sk может быть представлено как одно из четырех возможных состояний студента: Si - студент знает предмет на «отлично», S2 - на «хорошо», S3 - на «удовлетворительно» и S4 - на «неудовлетворительно» [4]. Переходы между этими состояниями осуществляются под воздействием процессов получения и усвоения информации, генерирующих два встречных потока событий, связанных с учебной деятельностью, интенсивность которых можно считать постоянной. Обозначим интенсивность процесса получения информации X, процесса усвоения информации ц. Таким образом, каждому состоянию Sk, например при к = 1,...,4, можно поставить в соответствие pk(t) - вероятность наступления этого состояния в момент времени t, которые можно найти из системы уравнений Колмогорова [13]:

^Pi

^ = ÀPl(t) - (À+^p2(t) + №з(0. (1)

dp-,

= Àp2(t) - (Л + Юрз(0 + №4(0.

dp4

— = Àp3(t) -^p4(t).

С учетом экспертного мнения преподавателей и согласно ранее проведенным исследованиям, принимаем интенсивность процесса получения информации X =1, а интенсивность процесса усвоения информации ц = 3/2 [4]. Однако, учитывая, что студенты по-разному усваивают материал дисциплины, считаем необходимым ввести персонификацию коэффициента ц относительно каждого обучающегося за счет введения функции успешности обучения - í/¿(t), характеризующей учебную деятельность i-го студента по изучению данной дисциплины в каждый момент времени изучения дисциплины t. В педагогической практике понятие «успешность обучения» рассматривается учеными как качественная характеристика, показатель результативности пе-

дагогической деятельности, но ее содержательное наполнение и набор качественных показателей различны [14].

Анализ разных подходов к определению сущности и результатов обучения позволил выделить такие качественные показатели успешности, как текущая успеваемость, активность и эффективность [15].

В условиях цифровизации образования и развития онлайн-обучения, осуществляемого на базе электронного обучающего курса, предлагаем формализовать эти характеристики следующим образом. Текущую академическую успеваемость обучающегося по дисциплине определим как суммарную оценку текущего образовательного результата /-го обучающегося в баллах из электронного журнала ЭОК в момент времени Активность ^¿(0 определим как кликабельную активность /-го обучающегося в электронной среде предметного обучения в момент времени I и интерпретируем ее как личностную характеристику, выражающую упорство, целеустремленность студента в освоении дисциплины. Эффективность ^¿(0 определим как количество эффективных входов /-го обучающегося в ЭОК по дисциплине в момент времени I - характеристика, отражающая настойчивость и вовлеченность студента в учебный процесс. Под эффективными входами понимаем учебные действия обучающегося в ЭОК, результаты которой сопровождаются получением оценки. Предложенные интерпретации показателей успешности в электронной среде как личностных характеристик обучающихся носят гипотетический характер и представляют интерес для дальнейшей исследовательской работы.

Введенные в работе показатели успешности обучения выступают универсальными предикторами для построения прогностической модели, так как могут выступать источниками данных для прогнозирования успеваемости по любой дисциплине вне зависимости от структуры электронного обучающегося курса. В связи с разнородным характером, накапливаемых в учебном процессе данных предлагаем использовать относительные показатели успеваемости, активности и эффективности, рассчитываемые еженедельно в течение учебного процессе по дисциплине.

Относительную успеваемость студента предлагаем определять как

0 < < 1, (2)

где ¿>¿(0 - относительная накопленная успеваемость /-го студента на текущую неделю ^¿(т) - текущая успеваемость /-го студента в неделю т; 0тах(т) - максимальное значение текущей успеваемости по группе в неделю т.

Относительную активность студента в ЭОК определим как

4(0 = ^=17^, 0 < < 1, (3)

где i4¿(t) - относительная накопленная активность в ЭОК i-го студента в текущую неделю t; ^¿(т) - активность в ЭОК i-го студента в неделю т; Лтах(т) - максимальное значение активности в ЭОК по группе в неделю т. Относительную эффективность входов в ЭОК предлагаем определять

как

0 < ЖО < 1, (4)

где V¿(t) - относительная накопленная эффективность входов в ЭОК i-го студента в неделю t; ^¿(т) - эффективность входов в ЭОК i-го студента в неделю т; 1^ах(т) - максимальное значение эффективности входов в ЭОК по группе в неделю т.

На основе полученных данных в электронной среде успешность обучения студента в относительном выражении предлагаем определять по формуле

t/¿(t) =k1Öi{t) + k2Äi{t) + k2Vi{t),0 < t/f(t) < 1, (5)

где - это веса для параметров успеваемости (<5¿(t)), активности

(i4¿(t)) и эффективности входов (V¿(t)) соответственно, кг +к2 + к3 = 1.

Обучение модели раннего прогнозирования успешности обучения осуществлялось на основе архивных данных, которые были собраны в предшествующий исследованию период. Для расчета коэффициентов ^ Д2 Дз на основе обучающей выборки вычислены коэффициенты корреляции между результатами:

- промежуточной аттестации студентов и их текущей успеваемостью (öi(0);

- промежуточной аттестации студентов и их активностью в ЭОК

(Mm

- промежуточной аттестации студентов и эффективностью их входов в ЭОК (^(t).

Оказалось, что самая сильная корреляционная связь наблюдается между результатами промежуточной аттестации студентов и их текущей успеваемостью (0¿(t)) (коэффициент корреляции равен 0,86), а корреляционная связь между результатами промежуточной аттестации студентов и их активностью в ЭОК и результатами промежуточной аттестации студентов и их эффективностью входов в ЭОК слабее (коэффициенты равны 0,22 и 0,32 соответственно). Исходя из этого, для вычисления функции успешности выбраны коэффициенты ki = 0,7; кг = 0,1; кз = 0,2. В результате функция успешности обучения студента представляет собой

t/¿(t) = 0,70¿(t) + 0,L4¿(t) + 0,2^(0. (6)

Соответственно, интенсивность процесса усвоения информации ц равняется 3i/j(t) /2, а система уравнений Колмогорова примет вид

dpi ~

-jl=3Ui(t) p2(t)/2-Pl(t).

= Pi(0 + -—)P2W +-2-. (7)

dp3 Л, ^ , ЗЩЩгЩг) = Р2(0 -11+-z- )Рз(0 +-~-.

dt

dp4 dt

= Рз№ -зим ЮрМ/2.

В результате решения полученной системы дифференциальных уравнений получаем вероятности состояний для каждого обучающегося на неделе Поскольку процесс обучения длится достаточно долго, а потоки событий являются простейшими, возникает вопрос о предельном поведении вероятностей (финальных вероятностей) при ^<х>. Финальные вероятности не зависят от того, в каком состоянии находилась система в начальный момент. Это означает, что в системе устанавливается предельный стационарный режим, в ходе которого она переходит из состояния в состояние, но вероятности состояний уже не меняются. Поэтому вероятности состояний целесообразно пересчитывать еженедельно по финальным вероятностям, они более точно характеризуют вероятности оценок на промежуточной аттестации, если интенсивность процесса усвоения информации останется на постоянном уровне. Формула для расчета финальных вероятностей при к = 1,...,4 имеет вид

... (8)

(1 + 30,(1) /2)(1 + (зиМ /2)2)'

Для выделения кластеров студентов, характеризующихся высоким, пограничным (средним) и низким рисками неуспешности обучения, воспользуемся формулой математического ожидания, которое для /-го обучающегося в нашем случае будет иметь вид

= 5рпЮ + 4р2М + + 2р4М- (9)

В случае, когда соблюдается неравенство и математическое ожидание М/ < 3, вероятности получить на экзамене оценки «отлично» или «хорошо» достаточно малы (менее 0,1 и менее 0,2 соответственно), а вероятность получения неудовлетворительной оценки достаточно высока - более 0,4. Вычисления по обучающей выборке это подтвердили. Экспериментально уста-

новлено, что кластер обучающихся высокого риска неуспешности обучения определяется неравенством Mi < 3, кластер обучающихся пограничного риска определяется неравенством 3 < Mi < 3,4, а кластер студентов низкого риска - 3,4 < Mi.

Предложенная в работе прогностическая модель была применена для оценки успешности предметного обучения для студентов Сибирского федерального университета направления подготовки «Информатика и вычислительная техника» по дисциплинам: «Дискретная математика», «Алгебра и геометрия», «Программирование». Качественная оценка работы модели была произведена на основе расчета точности прогнозирования, а именно взвешенной абсолютной процентной ошибки прогнозирования. Взвешенная абсолютная процентная ошибка прогнозирования - WAPE (weighted absolute percent error) рассчитана по формуле

WAPE = 100 %, (10)

где Et - прогнозируемое значение успешности (успех, неудача) промежуточной аттестации по дисциплине; Ei - реальное значение успешности (успех, неудача) промежуточной аттестации по дисциплине; R - количество обучающихся, участвовавших в эксперименте.

Оценка точности прогнозирования определена как разница между 100 % и ошибкой прогнозирования и представлена в виде графика понедельной точности работы прогностической модели оценки успешности предметного обучения (рисунок).

20--

10--

о -I-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,

2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17

Недели / Weeks

Точность прогнозирования успешности предметного обучения Accuracy in predicting success in subject-based learning

Как видно по рисунку, точность прогнозирования составила более 90 %, начиная с 7-й недели обучения. Проведенная апробация предложенной в работе прогностической модели показала, что прогнозирование успеваемости студентов по дисциплине осуществляется с достаточно высокой степенью точности, что позволяет говорить о состоятельности модели.

Заключение. Подводя итоги, отметим, что в качестве источников данных прогностической модели могут выступать универсальные предикторы, определяющие успешность предметного обучения, такие как успеваемость, упорство (целеустремленность) и настойчивость, для которых определены качественные показатели ЭОК. Предложенная прогностическая модель позволяет выделить кластеры обучающихся с высоким, пограничным и низким риском неуспешности обучения на ранних стадиях образовательного процесса, что позволяет своевременно реагировать и принимать меры. На основе полученных результатов исследования считаем перспективным реализацию цифрового сервиса прогнозирования академической успеваемости обучающихся в электронной информационно-образовательной среде вуза. В настоящее время в Сибирском федеральном университете осуществляется программная реализация алгоритмов работы прогностической модели и создание цифрового сервиса прогнозирования академической успеваемости обучающихся на основе данных, формируемых в сервисах ЭИОС университета, что позволит своевременно реагировать и принимать меры содействия и поддержки, как в отношении обучающихся, попадающих в группу риска, так и успешных обучающихся, с целью выстраивания персонализированных маршрутов личностного развития.

Список литературы

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

[1] Уваров А.Ю. На пути к цифровой трансформации школы. М.: Образование и информатика, 2018. 120 с.

[2] Гриншкун В.В. Проблемы и пути эффективного использования технологий информатизации в образовании // Вестник Московского университета. Серия 20: Педагогическое образование. 2018. № 2. С. 34-47. http://doi.org/10.51314/2073-2635-2018-2-34-47

[3] Носков М.В., Сомова М.В., Федотова И.М. Управление успешностью обучения студента на основе марковской модели // Информатика и образование. 2018. № 10 (299). С. 4-11. http://doi.org/10.32517/0234-0453-2018-33-10-4-11

[4] Kustitskaya T.A., Kytmanov A.A., Noskov M. V. Early student-at-risk detection by current learning performance and learning behavior indicators // Cybernetics and Information Technologies. 2022. Vol. 22. No. 1. Pp. 117-133. http://doi.org/10.2478/cait-2022-0008

[5] Kabathova J., Drlik M. Towards predicting student's dropout in university courses using different machine learning techniques // Applied Sciences. 2021. Vol. 11. No. 7. https://doi.org/10.3390/app11073130

[6] Maraza-Quispe B., Valderrama-Chauca E.D., Cari-Mogrovejo L.H., Apaza-Huanca J.M., Sanchez-Ilabaca J.A. Predictive model implemented in KNIME based on learning analytics for timely decision making in virtual learning environments // International Journal of Information and Education Technology. 2022. Vol. 12. No. 2. Pp. 91-99. http://doi.org/10.18178/ijiet.2022.12.2.1591

[7] Cagliero L., Canale L., Farinetti L, Baralis E., Venuto E. Predicting student academic performance by means of associative classification // Applied Sciences. 2021. Vol. 11. No. 4. https://doi.org/10.3390/app11041420

[8] Riestra-Gonzalez M., del Puerto Paule-Ruiz M., Ortin F. Massive LMS log data analysis for the early prediction of course-agnostic student performance // Computers & Education. 2021. Vol. 163. Pp. 104-108. http://doi.org/10.1016/j.compedu.2020.104108

[9] Помян С.В., Белоконь О.С. Прогноз результатов успеваемости студентов вуза на основе марковских процессов // Вестник Вятского государственного университета. 2020. № 4 (138). С. 63-73. http://doi.org/10.25730/VSU.7606.20.057

[10] González-Campos J.A., Carvajal-Muquillaza C.M., Aspeé-Chacón J.E. Modeling of university dropout using Markov chains // Uniciencia. 2020. Vol. 34. No. 1. Pp. 129-146. http://doi.org/10.15359/ru.34-L8

[11] Eldose K.K., Mayureshwar B.D., Kumar K.R., Sridharan R. Markov analysis of academic performance of students in higher education: a case study of an engineering institution // International Journal of Services and Operations Management. 2022. Vol. 41. No. 1-2. Pp. 59-81. http://doi.org/10.1515/orga-2017-0006

[12] Сербии В.И. Метод расчета параметров автоматизированной обучающей системы // Прикаспийский журнал: управление и высокие технологии. 2012. № 2 (18). С. 66-71.

[13] Веитцель Е.С., Овчаров Л.А. Теория случайных процессов и ее инженерные приложения. М.: Юстиция, 2018. 448 с.

[14] Расковалова О.С. Теоретико-методологические основы успешности обучения в системе дополнительного образования // Перспективы науки. 2017. № 10 (97). С. 85-89.

[15] Зоаби А. Успешность обучения: задачи и проблемы // Вестник Новгородского государственного университета. 2016. № 5 (96). С. 17-19.

References

[1] Uvarov AY. On the way to the digital transformation of the school. Moscow: Obra-zovaniye i Informatika Publ.; 2018. (In Russ.)

[2] Grinshkun VV. Problems and ways of informatization technologies in education effective use. Bulletin of Moscow University. Series 20: Teacher Education. 2018;(2):34-47. (In Russ.). http://doi.org/10.51314/2073-2635-2018-2-34-47.

[3] Noskov MV, Somova MV, Fedotova IM. Management of the success of student's learning based on the Markov model. Informatics and Education. 2018;(10):4-11. (In Russ.). http://doi.org/10.32517/0234-0453-2018-33-10-4-11

[4] Kustitskaya TA, Kytmanov AA, Noskov MV. Early student-at-risk detection by current learning performance and learning behavior indicators. Cybernetics and Information Technologies. 2022;22(1):117-133. http://doi.org/10.2478/cait-2022-0008

[5] Kabathova J, Drlik M. Towards predicting student's dropout in university courses using different machine learning techniques. Applied Sciences. 2021;11(7):3130. https://doi.org/10.3390/app11073130

[6] Maraza-Quispe B, Valderrama-Chauca ED, Cari-Mogrovejo LH, Apaza-Huanca JM, Sanchez-Ilabaca JA. Predictive model implemented in KNIME based on learning analytics for timely decision making in virtual learning environments. International Journal of Information and Education Technology. 2022;12(2):91-99. http://doi.org/10.18178/ijiet.2022.122.1591

[7] Cagliero L, Canale L, Farinetti L, Baralis E, Venuto E. Predicting student academic performance by means of associative classification. Applied Sciences. 2021;11(4):14-20. https://doi.org/10.3390/app11041420

[8] Riestra-González M, del Puerto Paule-Ruíz M, Ortin F. Massive LMS log data analysis for the early prediction of course-agnostic student performance. Computers & Education. 2021;163:104-108. http://doi.org/10.1016Zj.compedu.2020.104108

[9] Pomyan SV, Belokon OS. Forecast of the results of academic performance of university students based on Markov processes. Herald of Vyatka State University. 2020;(4):63-73. (In Russ.) http://doi.org/10.25730/VSU.7606.20.057

[10] González-Campos JA, Carvajal-Muquillaza CM, Aspeé-Chacón JE. Modeling of university dropout using Markov chains. Uniciencia. 2020;34(1):129-146. http://doi.org/10.15359/ru.34-L8

[11] Eldose KK, Mayureshwar BD, Kumar KR, Sridharan R. Markov analysis of academic performance of students in higher education: a case study of an engineering institution. International Journal of Services and Operations Management. 2022;41(1-2):59-81. http://doi.org/10.1515/orga-2017-0006

[12] Serbin VI. Method for calculating the parameters of an automated learning system. Prikaspiyskiy Zhurnal: Upravleniye i Vysokiye Tekhnologii. 2012;(2):66-71. (In Russ.)

[13] Venttsel YeS, Ovcharov LA. Theory of random processes and its engineering applications. Moscow: Yustitsiya Publ.; 2018. (In Russ.)

[14] Raskovalova OS. Theoretical and methodological foundations of the success of education in the system of additional education. Perspectives of Science. 2017;10(97):85-89.

[15] Zoabi A. Success of the study: challenges and problems. Vestnik of Novgorod State University. 2016;(5):17-19. (In Russ.)

Сведения об авторах:

Ноское Михаил Валериановым, доктор физико-математических наук, профессор, профессор кафедры прикладной математики и компьютерной безопасности, Институт космических и информационных технологий, Сибирский федеральный университет, Российская Федерация, 660041, Красноярск, Свободный пр-кт, д. 79. ORCID: 0000-0002-4514-7925. E-mail: mnoskov@sfu-kras.ru

Вайнштейн Юлия Владимировна, доктор педагогических наук, доцент, профессор кафедры прикладной математики и компьютерной безопасности, Институт космических и информационных технологий, Сибирский федеральный университет, Российская Федерация, 660041, Красноярск, Свободный пр-кт, д. 79. ORCID: 0000-0002-8370-7970. E-mail: yweinstein@sfu-kras.ru

Сомова Марина Валериевна, старший преподаватель, кафедра прикладной информатики, Институт космических и информационных технологий, Сибирский федеральный университет, Российская Федерация, 660041, Красноярск, Свободный пр-кт, д. 79. ORCID: 0000-0002-8538-4108. E-mail: msomova@sfu-kras.ru

Федотова Ирина Михайловна, кандидат физико-математических наук, доцент, доцент кафедры прикладной математики и компьютерной безопасности, Институт космических и информационных технологий, Сибирский федеральный университет, Российская Федерация, 660041, Красноярск, Свободный пр-кт, д. 79. ORCID: 0000-0002-8673-6275. E-mail: ifedotova@sfu-kras.ru

Bio notes:

Mikhail V. Noskov, Doctor of Physical and Mathematical Sciences, Professor, Professor of the Department of Applied Mathematics and Computer Security, Institute of Space and Information Technologies, Siberian Federal University, 79 Svobodnyi Prospekt, Krasnoyarsk, 660041, Russian Federation. ORCID: 0000-0002-4514-7925. E-mail: mnoskov@sfu-kras.ru

Yuliya V. Vaynshteyn, Doctor of Pedagogy, Associate Professor, Professor of the Department of Applied Mathematics and Computer Security, Institute of Space and Information Technologies, Siberian Federal University, 79 Svobodnyi Prospekt, Krasnoyarsk, 660041, Russian Federation. ORCID: 0000-0002-8370-7970. E-mail: yweinstein@sfu-kras.ru

Marina V. Somova, senior lecturer, Department of Applied Informatics, Institute of Space and Information Technologies, Siberian Federal University, 79 Svobodnyi Prospekt, Krasnoyarsk, 660041, Russian Federation. ORCID: 0000-0002-8538-4108. E-mail: msomova@sfu-kras.ru

Irina M. Fedotova, Candidate of Physical and Mathematical Sciences, Associate Professor, Associate Professor of the Department of Applied Mathematics and Computer Security, Institute of Space and Information Technologies, Siberian Federal University, 79 Svobodnyi Prospekt, Krasnoyarsk, 660041, Russian Federation. ORCID: 0000-0002-8673-6275. E-mail: ifedotova@sfu-kras.ru

i Надоели баннеры? Вы всегда можете отключить рекламу.