Научная статья на тему 'ВЗАИМОСВЯЗЬ ОБРАЗОВАТЕЛЬНЫХ ДОСТИЖЕНИЙ СТАРШЕКЛАССНИКОВ И ИХ ЦИФРОВОГО СЛЕДА В СОЦИАЛЬНОЙ СЕТИ.'

ВЗАИМОСВЯЗЬ ОБРАЗОВАТЕЛЬНЫХ ДОСТИЖЕНИЙ СТАРШЕКЛАССНИКОВ И ИХ ЦИФРОВОГО СЛЕДА В СОЦИАЛЬНОЙ СЕТИ. Текст научной статьи по специальности «СМИ (медиа) и массовые коммуникации»

CC BY-NC
152
54
i Надоели баннеры? Вы всегда можете отключить рекламу.
Ключевые слова
ОЛИМПИАДЫ / ОБРАЗОВАТЕЛЬНЫЕ ДОСТИЖЕНИЯ / СОЦИАЛЬНАЯ СЕТЬ / МАШИННОЕ ОБУЧЕНИЕ / ЦИФРОВЫЕ СЛЕДЫ / ВКОНТАКТЕ / СЛУЧАЙНЫЙ ЛЕС / СООБЩЕСТВО / ЮПИТЕР / БОЛЬШИЕ ДАННЫЕ / RANDOM FOREST / VKONTAKTE / DIGITAL FOOTPRINT / MACHINE LEARNING / SOCIAL NETWORKS / EDUCATIONAL ACHIEVEMENTS / EDUCATIONAL OLYMPIAD / COMMUNITY / JUPYTER / BIG DATA

Аннотация научной статьи по СМИ (медиа) и массовым коммуникациям, автор научной работы — Кашпур Виталий Викторович, Губанов Александр Валерьевич, Фещенко Артем Викторович, Изофатова Мария Сергеевна, Кобенко Алина Владимировна

В работе рассматриваются взаимосвязь между цифровым следом старшеклассников в социальной сети «Вконтакте» с их высокими формальными образовательными достижениями (призовые места во всероссийских олимпиадах). Для этого c помощью API «Вконтакте» выгружается цифровой след пользователей, строится классификатор, является ли школьник призёром олимпиад, и выясняется, какие группы переменных (личные характеристики, популярность и новизна постов на стене, подписки на сообщества) имеют наибольшее влияние на точность классификации. Для классификации используются пользовательские данные из социальной сети «Вконтакте» 12 588 выпускников 11 класса в 2019 и 2020 гг., и алгоритмы машинного обучения. В результате исследования выявлена взаимосвязь между уровнем образовательного потенциала, как способности учащегося побеждать в олимпиадах, и тематикой контента интересного таким учащимся. Также определено 63 сообществ «Вконтакте» наиболее значимые для классификации участников исследования. Среди сообществ, более популярных у победителей олимпиад, фигурирует тематика, имеющая отношение к науке и сдаче ЕГЭ, а также к интеллектуальным мемам. В подписках «не олимпиадников» выражено присутствие сообществ с юмором и развлекательным контентом. Это наблюдение опровергает распространенное в педагогическом сообществе мнение о негативном влиянии социальных сетей на успешность обучения школьников. Информационное пространство «Вконтакте» содержит не только развлекательный контент, но информацию поддерживающую или стимулирующую познавательный интерес и учебную мотивацию.

i Надоели баннеры? Вы всегда можете отключить рекламу.

Похожие темы научных работ по СМИ (медиа) и массовым коммуникациям , автор научной работы — Кашпур Виталий Викторович, Губанов Александр Валерьевич, Фещенко Артем Викторович, Изофатова Мария Сергеевна, Кобенко Алина Владимировна

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

CORRELATION BETWEEN ACADEMIC ACHIEVEMENTS OF HIGH SCHOOL STUDENTS AND THEIR DIGITAL SHADOW IN SOCIAL NETWORK

This article examines the correlation between digital shadow of high school students in the social network “Vkontakte” and their high academic achievements (medal places in All-Russian Olympiads). Using the API “Vkontakte”, the author pulled digital shadow of the users, classifies whether a student is a medalist of Olympiads, and which groups of variables (personal characteristics, popularity, recentness of posts, and subscriptions to communities) have strongest influence upon the classification accuracy. User data from “Vkontakte” social network of 12,588 graduates of 2019 and 2020, and algorithms for machine learning are used for classification. As a result the conducted research, correlation is established between the level of educational potential, as a student's ability to win in Olympiads, and the content appealing to such students. The author also outlines 63 communities in “Vkontakte” that are most significant for carrying out classification of students participating in the research. Among the communities that enjoy most popularity among the winners of Olympiads, are those related to science and passing the unified state exam, as well as intellectual memes. The subscriptions of students not participating in the Olympiads indicate the communities featuring humor and entertainment content. This observation contradicts the opinion widespread in pedagogical community on the negative impact of social networks upon academic achievements of the students. The online platform “Vkontakte” contains not only entertainment content, but also information that stimulates cognitive interest and academic motivation.

Текст научной работы на тему «ВЗАИМОСВЯЗЬ ОБРАЗОВАТЕЛЬНЫХ ДОСТИЖЕНИЙ СТАРШЕКЛАССНИКОВ И ИХ ЦИФРОВОГО СЛЕДА В СОЦИАЛЬНОЙ СЕТИ.»

Педагогика и просвещение

Правильная ссылка на статью:

Кашпур В.В., Губанов А.В., Фещенко А.В., Изофатова М.С., Кобенко А.В. — Взаимосвязь образовательных достижений старшеклассников и их цифрового следа в социальной сети. // Педагогика и просвещение. - 2020. -№ 4. - С. 37 - 51. DOI: 10.7256/2454-0676.2020.4.33952 URL: https://nbpublish.com'Hbrary_read_article.php?id=33952

Взаимосвязь образовательных достижений старшеклассников и их цифрового следа в социальной сети.

Кашпур Виталий Викторович

кандидат социологических наук доцент, кафедра социологии, Томский государственный университет 634050, Россия, Томская область, г. Томск, ул. Ленина, 36

И vitkashpur@mail.ru

Губанов Александр Валерьевич

Научный сотрудник, Sirius University of Science and Technology 354340, Россия, Краснодарский край, г. Сочи, Олимпийский проспект, 1

И derzhiarbuz@yandex.ru Фещенко Артем Викторович

старший преподаватель, кафедра Гуманитарной информатики, Томский государственный университет

636019, Россия, Томская область, г. Томск, ул. Ленина, 36

И fav@ido.tsu.ru

Изофатова Мария Сергеевна

студент, Sirius University of Science and Technology 354340, Россия, Краснодарский край, г. Сочи, Олимпийский проспект, 1

И izofatova.mariya@mail.ru

Кобенко Алина Владимировна

студент, Sirius University of Science and Technology 354340, Россия, Краснодарский, г. Сочи, Олимпийский проспект, 1

И a.v.kobenko@outlook.com

Статья из рубрики "Новые методики и технологии"

DOI:

10.7256/2454-0676.2020.4.33952

Дата направления статьи в редакцию:

22-09-2020

Дата публикации:

09-11-2020

Аннотация.

В работе рассматриваются взаимосвязь между цифровым следом старшеклассников в социальной сети «Вконтакте» с их высокими формальными образовательными достижениями (призовые места во всероссийских олимпиадах). Для этого c помощью API «Вконтакте» выгружается цифровой след пользователей, строится классификатор, является ли школьник призёром олимпиад, и выясняется, какие группы переменных (личные характеристики, популярность и новизна постов на стене, подписки на сообщества) имеют наибольшее влияние на точность классификации. Для классификации используются пользовательские данные из социальной сети «Вконтакте» 12 588 выпускников 11 класса в 2019 и 2020 гг., и алгоритмы машинного обучения. В результате исследования выявлена взаимосвязь между уровнем образовательного потенциала, как способности учащегося побеждать в олимпиадах, и тематикой контента интересного таким учащимся. Также определено 63 сообществ «Вконтакте» наиболее значимые для классификации участников исследования. Среди сообществ, более популярных у победителей олимпиад, фигурирует тематика, имеющая отношение к науке и сдаче ЕГЭ, а также к интеллектуальным мемам. В подписках «не олимпиадников» выражено присутствие сообществ с юмором и развлекательным контентом. Это наблюдение опровергает распространенное в педагогическом сообществе мнение о негативном влиянии социальных сетей на успешность обучения школьников. Информационное пространство «Вконтакте» содержит не только развлекательный контент, но информацию поддерживающую или стимулирующую познавательный интерес и учебную мотивацию.

Ключевые слова: олимпиады, образовательные достижения, социальная сеть, машинное обучение, цифровые следы, Вконтакте, случайный лес, сообщество, юпитер, большие данные

Исследование выполнено при финансовой поддержке РФФИ в рамках научного проекта № 19-313-51024 «Влияние структурных и содержательных характеристик интернет-активности старшеклассников и студентов на их образовательные достижения».

Введение

Тема образовательных достижений находится под пристальным вниманием субъектов образовательной политики всех уровней: организационном (школы и университеты); институциональном (муниципальные и региональные департаменты образования, министерства просвещения и высшего образования и науки); общественном (профессиональные и родительские сообщества и ассоциации). Политику государства в этом направлении субъекты образования реализуют путем выявления и поддержки талантов среди школьников и студентов, проведением профориентации и индивидуализации обучения. Одним из конкретных механизмов претворения в жизнь

политики образовательной эффективности является стимулирование образовательных учреждений в зависимости от успехов их обучающихся. Примером тому служит рейтингование субъектов образовательной деятельности в зависимости от среднего балла ЕГЭ выпускников школ или абитуриентов вузов.

Таким образом, находясь в ситуации конкуренции, образовательные учреждения и экспертные центры начинают собирать массивы информации, связанные с успеваемостью учащихся, и применять чаще сложные аналитические методы для определения наиболее важных факторов, способствующих успешности обучающихся и эффективности обучения. Однако аналитика в большей степени ограничивается оценкой зависимости учебной успеваемости от персональных (связанных с обучающимся) и институциональных (связанных с образовательным учреждением) факторов. Источником информации для такой аналитики выступают данные, генерируемые в рамках LMS образовательных учреждений, данные психологических тестирований, а также данные образовательной и социально-экономической статистики. При этом, игнорируется колоссальный объем данных, позволяющих оценить образовательные достижения учащихся, которые сгенерированы в сети и ключевом для современной молодежи интернет локусе -социальных сетях. Существующие в настоящее время попытки использовать эти данные для индивидуализации процесса обучения сводятся к применению данных LMS учебных заведений, информации о процессе и прогрессе обучения для выстраивания траектории в рамках изучаемого курса. Между тем, проникновение социальных медиа в повседневную и профессиональную жизнь современного общества актуализирует исследования методов и инструментов извлечения и анализа данных о пользователях социальных сетей, так называемых цифровых следах. Цифровой след (или цифровой отпечаток; англ. digital footprint) — совокупность информации о посещениях и вкладе пользователя во время пребывания в цифровом пространстве.

Изучение цифрового следа человека позволяет осуществлять анализ и моделирование его физиологических, психологических и когнитивных особенностей. Сформированная в результате исследования модель вполне применима для целей прогнозирования, программирования и эффективного управления образовательной деятельностью.

Данная работа направлена на изучение вышеназванной проблематики о сборе и анализе данных обучающихся в Интернет. Она посвящена исследованию взаимосвязи формальных образовательных достижений школьников-выпускников 11 классов с их цифровыми следами в социальной сети «Вконтакте». Гипотеза исследования заключается в том, что характеристики профиля, связанные с поведенческими особенностями (наличие фото профиля, количество друзей, популярность постов, их уникальность и т.д.), а также подписки на сообщества выражено отличаются у школьников, занявших призовые места на олимпиадах, от таковых у школьников, не ставших призерами или победителями. Подтверждение данной гипотезы позволяет установить наличие связи цифрового следа с образовательными достижениями. Кроме этого, становится возможно делать выводы о том, какие компоненты цифрового следа наиболее значимы для этой связи.

Тема использования социальных сетей обучающимися в современных исследованиях представлена в основном в качестве эмпирического материала данных о студентах, особенности поведения которых измеряются преимущественно показателями времени проведенными ими в сети. Например, журнал записанных действий (Jacobsen и Forste 2011); минуты использования (Karpinski et al. 2013); частота и часы использования (Rouis 2012); количество времени, проведенного на Facebook и частота проверки Facebook (Lee 2014 ); среднее ежедневное использование Facebook (Michikyan et al.

2015); шкала интенсивности Facebook (Ainin et al. 2015); частота использования и средняя продолжительность использования Facebook (Lambic 2016 ); количество часов в неделю в социальной сети (Alwagait et al. 2014 ). Самая популярная техника измерения использования социальных медиа - самоотчеты участников исследований. Однако данная методика является неточной, показывает субъективные измерения. Дело в том, что в период проведения исследований 2011-2016 годах, уровень проникновения социальных медиа в повседневную жизнь человека не был настолько высоким как сейчас. Не случайно ранние исследовательские работы по настоящей теме рассматривали только вопросы использования и неиспользования социальных медиа (Kirschner and Karpinski 2010; Kolek and Saunders 2008). И это было актуально для времени становления пользовательской культуры Интернет и знакомства с ним. Спустя годы в литературе произошел отказ от самоотчетного подхода, поскольку социальные медиа укоренились в нашей повседневной жизни. Несколько исследований описывают использования методов измерения, отличных от самоотчетов (Rosen et al. 2013). По существу исследования ученые наблюдали за использованием участниками различных технологий социальных медиа во время обучения и дополнили их анкетой после обучения. Авторы других исследований анализировали журнал записей мероприятия по измерению времени, затраченного на социальные сети (Jacobsen and Forste 2011).

В литературе по изучаемой теме встречаются работы, в которых освещается анализ академической успеваемости и методов ее измерения. Под академической успеваемостью чаще всего принимается общая средняя оценка за семестр. Академическая успеваемость в исследованиях измерялась с помощью: самооценки (Bellur et al. 2015 ), данных, полученных от преподавателя или из LMS вуза, и предполагаемая субъективная оценка (e.g., Ainin et al.2015; Jankovic et al. 2015). В подавляющем большинстве случаев в исследовательских работах использовалась самооценка успеваемости и это, вероятно, говорит о сложности полученияточных данных об академической успеваемости. В большинстве исследований сообщалось о демографических переменных участников, таких как пол и возраст. Женщины были лучше представлены среди респондентов, чем мужчины, разброс возраста среди участников исследований от 12 до 67. Размер выборки исследований варьировался от 93 до 1839 человек. В большинстве работ представлен описательный анализ данных. В ранних исследованиях по этой теме преимущественно показывался анализ через корреляции (Pasek et al. 2009). В чуть более поздних - применялся регрессионный анализ (Junco and Cotten 2012; Rosen et al.2013). Выводы исследователей относительно взаимосвязи использования социальных медиа и академической успеваемостью противоречивы. Их позиции условно делятся на три группы. К первой группе относится только одно исследование, которое обнаружило позитивные отношения указанной взаимосвязи (Ainin et al. 2015). Вторая группа составляет большую часть исследований, которые выявили негативную связь (Glass et al. 2014; Jacobsen and Forste 2011; Jankovic et al. 2015; Junco and Cotten 2012; Junco, 2012; Junco 2015; Karpinski et al. 2013; Kirschner and Karpinski 2010; Lee 2014; Michikyan et al. 2015; Paul et al. 2012; Rosen et al. 2013; Rouis et al. 2011; Wohn and LaRose 2014). Третья группа - это материалы ученых, не нашедших значимой связи (Alwagait et al. 2014; Bellur et al. 2015; Kabre and Brown 2011; Kolek and Saunders 2008; Lambic 2016; Pasek et al. 2009; Rahman and Stephen 2016; Rouis 2012).

Противоречивость выводов, к которым пришли ученые, можно объяснить субъективной природой данных, полученных ими для анализа от участников как об академической успеваемости, так и характеристиках использования социальных сетей. В то же время в исследованиях, посвященных теме влияния социально-демографических характеристик и

психологических черт личности на поведение в социальных сетях, подтверждается гипотеза о наличии взаимосвязи между особенностями личности и поведением, отраженным в цифровых следах (Gosling et al. 2011; Miller et al. 2012; Markovikj et al. 2013; Schwartz et al. 2013; Kosinski et al. 2014; Arroju et al. 2015). При этом исследователи используют объективные данные о действиях пользователей выгруженных и з социальной сети (тексты сообщений, подписки на сообщества, лайки, количество друзей и фотографий) и алгоритмы машинного обучения для их анализа.

Некоторые исследования отечественных авторов подтверждают наличие взаимосвязи поведения в социальной сети не только с психологическими чертами личности, но и когнитивными: академическая успеваемость (Поливанова 2017), диагностика уровня интеллекта и креативности (Фещенко, Кабанова 2018) и образовательных интересов (Резанова 2018). При этом основу данных о поведении пользователей в социальных сетях составили сведения о подписках на тематические сообщества, от нескольких десятков до нескольких сотен на одного пользователя. Эти сведения выгружались с помощью API российской популярной социальной сети «Вконтакте».

Обзор представленных исследований показывает, что в работах по теме влияния социальных сетей на образовательные достижения не предлагается анализ положительной и отрицательной взаимосвязи использования социальных сетей на оценки учащихся, так как для этого не достаточно данных об особенностях использования контента студентами в сети. Исходя из анализа названных выше научных работ, представляется недостаточным искать взаимосвязь между временем нахождения в сети и образовательными достижениями учащихся. Важно понимать какому именно содержанию обучающийся отдает предпочтение в социальной сети. Поскольку знание о существе интереса обучающегося пользователя в Интернет позволит объяснить как позитивное, так и негативное его влияние на достижения школьника или студента в формальном образовании. Для проверки гипотезы о существовании взаимосвязи цифрового следа и образовательных достижений предлагается использовать анализ не только подписок на тематические сообщества, но и личные данные (пол, возраст, число друзей и публикаций) из профиля пользователя «Вконтакте».

Данные и методы

Проверка данной гипотезы осуществлялась с использованием методов машинного обучения. В качестве источников данных выступала следующая информация: данные Приемной комиссии ТГУ об абитуриентах, занявших призовые места на всероссийских олимпиадах; пользовательские данные этих школьников, выгружаемые из социальной сети «Вконтакте». В качестве первоначальных данных были взяты id социальной сети «Вконтакте» школьников - выпускников Томской области и информация о том, являются ли они призерами олимпиад. Из соображений конфиденциальности id были пронумерованы и отсоединены от информации, полученной в дальнейшем из личных профилей участников исследования, таким образом, данные были обезличены. В выборке присутствуют школьники - выпускники 2019 (450 человек) и 2020 (624 человека) годов. Для решения задачи сравнительного анализа цифровых следов, данные «олимпиадников» дополнены данными о школьниках, не являющимися приз е ра ми олимпиа д, но из те х ж е ре гионов и того ж е в оз ра с та , ч то и олимпиа дники (4879 человек для 2019 года и 6635 человек для 2020 года).

О всех участниках исследования были выгружены данные из профиля «Вконтакте»: тип профиля (открытый или закрытый); наличие фотографии; наличие информации о дате рождения; пол; число друзей; среднее число просмотров постов на странице; число

репостов; число собственных постов; коэффициент уникальности постов - отношение числа собственных постов к их общему числу. Также из пользовательских профилей были выгружены данные о подписках на тематические сообщества и выделение наиболее популярных сообществ у всех школьников. Сообщества были разделены на два класса: сообщества, на которые подписаны в большей степени призеры олимпиад, и сообщества, на которые подписаны в большей степени школьники, не являющиеся призерами олимпиад. Насколько значимо в сообществе преобладает одна или другая категория школьников определяется точным тестом Фишера.

На основе двух конечных классов сообществ (в скольких суммарно сообществах одного и другого класса состоит школьник) было создано два новых признака количества подписок на сообщества. Сформированы новые признаки из сообществ, которые были выделены ранее в отдельные классы (бинарная матрица подписок школьников на сообщества). Число признаков равно числу сообществ. Школьник либо состоит в сообществе (значение признака равно единице), либо не состоит в сообществе (значение признака равно нулю).

Подготовленные наборы данных за 2019 и 2020 год оказались не сбалансированными (менее 10% учащихся - «олимпиадники»), поэтому производилось семплирование призеров олимпиад, чтобы сбалансировать выборку. Семплирование проводилось после разбиения выборок на тестову и обучающую, чтобы избежать попадания одинаковых копий в обе выборки. После был обучен классификатор (случайный лес с ограничением высоты деревьев равным 6) для разных наборов параметров и вычислены для них метрики качества. Затем классификаторы сравнивались между собой (кросс-валидация случайными разбиениями с дальнейшим сравнением метрик качества по критерию Стьюдента) и формулировался вывод о вкладе тех или иных составляющих цифрового следа в точность классификации.

Выгрузка данных о школьниках 2020 года происходила с помощью API «Вконтакте» в среде разработки Jupyter с использованием id их личных страниц. Выгрузка данных о школьниках 2019 происходила при помощи специальной платформы ТГУ и базы данных, сохранившей информацию о профилях «Вконтакте» на период 2019 года. Однако в базе данных не содержится информации о постах на стене пользователей, поэтому данная группа признаков в классификаторах для 2019 года не используется. Обработка данных осуществляется в среде разработки Jupyter.

Результаты

В математической модели объектом (элементом выборки) является выпускник 11 класса. Выборка состоит из всех школьников выпускников - участников исследования. В качестве признаков объектов (независимых переменных), отвечающих за личные характеристики, были выбраны: тип профиля (открытый или закрытый); наличие фотографии; наличие информации о дате рождения; пол; число друзей. Также в наборе данных выпускников 2020 года дополнительно использовались следующие признаки: среднее число просмотров постов; число репостов; число собственных постов; коэффициент уникальности постов.

Кроме того, как для данных 2019 так и для данных 2020 годов добавлены признаки подписки на сообщество наиболее популярное у"олимпиадников" и "не олимпиадников" (всего 63 сообщества выделеные при помощи теста Фишера. Число новых признаков равно числу сообществ (63), и каждый признак является бинарным, принимая значение равное "1! если школьник состоит в сообществе и значение равное "0", если не состоит.

Исследование производилось над выпускниками 2020 года, количество участников исследования составляло 7259 школьников, из которых 624 являются призерами олимпиад. В таблицах ниже приведены средние значения метрик качества для кросс-валидации методом случайных разбиений (разбиение 80/20, к=10).

Таблица 1. Признак для каждого сообщества и признаки личных характеристик после семплирования ( 2020 год, 7259 школьников).

accuracy precision recall ROC-AUC

0.771 0.822 0.704 0.865

Из таблицы видно, что получено положительное значение чувствительности (recall). Это означает, что классификатор хорошо выделяет настоящих призеров олимпиад и тех, кто на них сильно похож, но при этом не является призером олимпиады. Высокое значение ROC-AUC говорит о том, что классы хорошо разделимы.

Если убрать признак подписок школьников на сообщества и оставить только признаки с их личной информацией на странице, то точность уменьшается, но классы по-прежнему разделимы.

Таблица 2. Только признаки личных характеристик (2020 год, 7259 школьников).

accuracy precision recall ROC-AUC

0.684 0.647 0.830 0.758

Если убрать из признаков личную информацию страницы и оставить только признак о подписках на сообщества, точность уменьшатся, однако уменьшается чувствительность классификатора.

Таблица 3. Признак для каждого сообщества без личных характеристик (2020 год, 7259 школьников).

accuracy precision recall ROC-AUC

0.692 0.780 0.549 0.758

Следовательно, как личностные характеристики школьника, так и его подписки имеют влияние на точность классификатора.

Для наглядности ниже приведены сообщества, отнесенные к классу наиболее характерных для призеров олимпиад 2020 года: Мемуары ценителей научных мемов; «FEMALE MEMES»; «Рифмы и Панчи»; «УЛСииМ»; «MARVEL/DC»; «Палата №6»; «голуб; папка»; «че»; «Строки пыльных книг|Литература»; «Netflix, Reddit; КБ»; «Словарный запас (EN)»; «околоинтеллектуальные мемы»; «Begin English. Английский язык для всех»; «ЕГЭ 2020»; «my astrology»; «МХК»; «Литература»; «Поступашки - Олимпиады, ЕГЭ и ДВИ»; «Лентач»; «это моя вечеринка»; «CLIQUE»; «Hollywood по-русски»; «Dr», Д»обрые мемы»; «potrachenó»; «ALMERIA»; «Словарный запас»; «какие-то биохимические мемы»; «ЕГЭ | Онлайн школа ЗНАНИЕ»; «NR.Music»; «Репетиторская империя: битва за сотку | ЕГЭ 2021»; «как в книге написано»; «твоей прекрасной юности момент».

Ниже представлены сообщества, определенные к классу наиболее характерных для

школьников, которые не были призерами олимпиад 2020 года: «Леонардо Дай Винчик»; «Овсянка, сэр!»; «Бот Максим»; «ПРИКОЛЫ | Смеяка»; «Новинки Музыки 2020 | Лучшая Музыка»; «Смейся до слёз «Команда ВКонтакте»; «Четкие Приколы»; «Бог

фотошопа»; «СТЫД»; «Музыка ВКонтакте»; «Арт Бот; ОРУ, СЭР!»; «Комментатор от Бога»; «Мембот»; «СигнаL»; «Действительно смешно»; «HD Кино - Фильмы онлайн 2020»; «MORGENSHTERN»; «Я * КИНО»; «ШВТ»; «Вся жизнь в скринах»; «абсурдные комедии» «Знакомо?»; «ОБОИ»; «Правда жизни».

При сравнении характерных для «олимпиадников» и «не олимпиадников» сообществ, можно сделать вывод, что среди сообществ, более популярных у победителей олимпиад, фигурируют сообщества, имеющие отношение к науке и сдаче ЕГЭ, а также к интеллектуальным мемам. Во втором классе «не олимпиадников» выражено присутствие сообществ с юмором и развлекательным контентом.

В наборе данных о выпускниках школ 2019 года, количество участников исследования составило 5329 школьников, из которых 450 являются призерами олимпиад. В таблицах ниже приведены средние значения метрик качества для кросс-валидации методом случайных разбиений (разбиение 80/20, к=10).

Так как информация о профиле должна соответствовать тому моменту времени, когда школьник ещё являлся выпускником общеобразовательного учреждения, данные были выгружены из базы данных ТГУ с информацией по профилям 2019 года.

Таблица 4. Признак для каждого сообщества и признаки личных характеристик после семплирования (2019 год, 5329 школьников).

accuracy precision recall ROC-AUC

0.649 0.640 0.701 0.708

Несмотря на высокий recall, accuracy и precision получаются несколько меньше, чем в аналогичном случае для 2020 года. Предположительные причины этого может подсказать следующая таблица 6, из которой видно, что если убрать признак о подписках на сообщества и оставить только личную информацию на странице точность классификации уменьшается, чем в аналогичном классификаторе для 2020 года. В 2019 году среди признаков о личных характеристиках школьников не учитывалось число просмотров их страниц, число постов, число собственных постов и коэффициент уникальности постов. Можно сделать вывод, что эти признаки оказывают значительное в лия ние на ра з де лимос ть кл а с с о в .

Таблица 5. Только личные характеристики (2019 год, 5239 школьников).

accuracy precision recall ROC-AUC

0.563 0.565 0.572 0.581

Если исключить из признаков личную информацию страницы и оставить только признак о подпис ка х на с ообще с тв а, то ч но с ть с ниж а е тс я .

Таблица 6. Признак для каждого сообщества (2019 год, 5239 школьников).

accuracy precision recall ROC-AUC

0.645 0.627 0.728 0.701

Ниже представлены сообщества, определенные как наиболее характерные для призеров олимпиад 2019 года: «Палата №6;» «УЛСиим»; «че»; «ЕГЭ 2021»; «голубая папка»; «Мемуары ценителей научных мемов»; «Dr»; «ЕГЭ Итоговое сочинение | «ЗНАНИЕ»»; «Лучшие стихи великих поэтов | Литература»; «Наука и Техника»; «Словарный запас (EN)»; «Стихи давно забытого поэта»; «Литература»; «Русский язык ЕГЭ 100БАЛЛОВ»; «Словарный запас».Далее представлены сообщества, определенные как наиболее характерные для школьников, которые не были призерами олимпиад 2019 года: «4ch»; «MDK»; «Леонардо Дай Винчик»; «НОВИНКИ МУЗЫКИ 2020»; «Я тебя хочу»; «Бс Максим»; «Смейся до слёз»; «Лайфхак»; «ПРИКОЛЫ | Смеяка»; «КиноКайф - Лучшие фильмы»; «Четкие Приколы»; «Киномания ► Новинки 2020»; «Бог фотошопа»; «Чёткие приколы»; «GIRL MEMES»; «Арт Бот»; «Киномания | Фильмы | Сериалы»; «А ты знал?», «Команда ВКонтакте»; «ЁП»; «СТЫД»; «Я тебя люблю»; «СМС приколы»; «KFC Россия» «Vine Video»; «Телеканал ТНТ»; «Я * КИНО»; «НЕНОРМАЛЬНО»; «Школьные истории» «HD Кино - Фильмы онлайн 2020»; «Мои аудиозаписи»; «Музыка ВКонтакте»; «Действительно смешно»; «Tattoo»; «Книга Рекордов»; «Бесплатные стикеры | Кролик Кир»; «Эскизы»; «Академия Порядочных Парней»; «Улётный Юмор»; «станция №12»; «ты сохранишь»; «ЗАСТЫДИ И ХВАСТАЙ»; «Восемнадцать плюс»; «Филиал сообщений о родственников»; «Vulgar»; «КАЕФ»; «Записки сумасшедших»; «Videosos»; «Грубо? Простите»; «Комментатор от Бога»; «Улыбнуло».

В первой группе повторяются некоторые сообщества из исследования для 2020 года, а именно: «Палата №6»; <^ЛСиим»; «Мемуары ценителей научных мемов»; «Dr»; «Словарный запас (EN)»; «Словарный запас». Во второй же группе повторяются: «Леонардо Дай Винчик»; «Бот Максим»; «ПРИКОЛЫ | Смеяка»; «Смейся до слёз»; «Команда ВКонтакте»; «Четкие Приколы»; «Бог фотошопа»; «СТЫД»; «Музыка ВКонтакте»; «Арт Бот»; «Комментатор от Бога»; «Действительно смешно»; «HD Кино -Фильмы онлайн 2020»; «Я * КИНО».

Таким образом, характерная зависимость сохраняется: на сообщества с юмором и развлекательным контентом чаще подписаны школьники, не являющиеся призерами олимпиад. Призеров олимпиад больше в сообществах, которые связаны с обучением и наукой.

Заключение и выводы

Сравнительный анализ цифровых следов школьников-призеров олимпиад со старшеклассниками, без подтверждения высоких образовательных достижений, показал, что информация о личных характеристиках учащихся и их интересах позволяет создать точный классификатор, определяющий по цифровому следу факт их победы в олимпиадах. Классификаторы, не учитывающие личные характеристики, показали меньшую точность. Кроме того, наилучшую точность показал классификатор, использующий отдельные признаки принадлежности к определенным сообществам. Это означает, что существует связь между уровнем образовательного потенциала, как способности учащегося побеждать в олимпиадах, и тематикой контента интересного таким учащимся. На наш взгляд это наблюдение опровергает распространенное в педагогическом сообществе мнение о негативном влиянии социальных сетей на успешность обучения школьников. Информационное пространство «Вконтакте» содержит не только развлекательный контент, но и информацию, поддерживающую или стимулирующую познавательный интерес и учебную мотивацию. Пока мы можем констатировать только взаимосвязь подписок на сообщества определенной тематики и успешного участия в олимпиадах. Лонгитюдное наблюдение за цифровым следом учащегося до и после участия в олимпиаде, позволит изучить степень влияния

потребляемого контента в социальной сети на вероятность победы в олимпиаде.

Таким образом, можно предположить возможность в дальнейшем составить цифровую модель школьника-призера олимпиады по цифровому следу «Вконтакте». Сравнение этой модели со следами новых пользователей «Вконтакте» позволит делать прогноз о схожести образовательного потенциала такого учащегося с победителем предметных олимпиад. Прикладное применение такой прогнозной модели можно найти в цифровых рекомендательных сервисах для школьников, где идет речь о их возможности принять участие в олимпиаде с высокой вероятностью победы в ней, а также для университетов, приглашающих старшеклассников к участию в олимпиадах.

Исследование выполнено при финансовой поддержке РФФИ в рамках научного проекта № 19-313-51024 «Влияние структурных и содержательных характеристик интернет-активности старшеклассников и студентов на их образовательные достижения».

Библиография

1. Jacobsen W. , Forste R. The wired generation: Academic and social outcomes of electronic media use among university students // Cyberpsychology, Behavior, And Social Networking, no. 14(5), 2011.-pp. 275-280.

2. Karpinski A., Kirschner P., Ozer I., Mellott J., Ochwo P. An exploration of social networking site use, multitasking, and academic performance among United States and European university students// Computers in Human Behavior, no. 29(3), 2013.-pp. 1182-1192.

3. Rouis S., Limayem M., Salehi-Sangari E. Impact of Facebook usage on students' academic achievement: Role of self-regulation and trust //Electronic Journal of Research in Educational Psychology, no. 9(3), 2011.-pp. 961-994.

4. Lee E. Facebook use and texting among African American and Hispanic teenagers: An implication for academic performance // Journal of Black Studies, no. 45(2), 2014.-pp. 83-101.

5. Michikyan M., Subrahmanyam K., Dennis J. Facebook use and academic performance among college students: A mixed-methods study with a multi-ethnic sample // Computers in Human Behavior, no. 45, 2015.-pp. 265-272.

6. Ainin S., Naqshbandi M., Moghavvemi S., Jaafar N. Facebook usage, socialization and academic performance// Computers & Education, no. 83, 2015.-pp. 64-73.

7. Lambic D. Correlation between Facebook use for educational purposes and academic performance of students // Computers in Human Behavior, no. 61, 2016.-pp. 313-320.

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

8. Alwagait E., Shahzad B., Alim S. Impact of social media usage on students academic performance in Saudi Arabia // Computers in Human Behavior, no. 51, 2014.-pp. 10921097.

9. Kirschner P., Karpinski A. Facebook and academic performance // Computers in Human Behavior, no. 26(6), 2010.-pp. 1237-1245,

10. Kolek E., Saunders D. Online disclosure: An empirical examination of undergraduate Facebook profiles// NASPA Journal, no. 45(1), 2008.-pp. 1-25,

11. Rosen L., Carrier L., Cheever N. Facebook and texting made me do it: Media-induced taskswitching while studying// Computers in Human Behavior, no. 29(3), 2013.-pp. 948-958.

12. Jacobsen W., Forste R. The wired generation: Academic and social outcomes of electronic media use among university students// Cyberpsychology, Behavior, And Social Networking, no. 14(5), 2011.-pp. 275-280.

13. Bellur S., Nowak K., Hull K. Make it our time: In class multitaskers have lower academic performance//Computers in Human Behavior, no. 53, 2015.-pp. 63-70.

14. Junco R., Cotten S. The relationship between multitasking and academic performance// Computers & Education, no. 59(2), 2012.-pp. 505-514.

15. Jankovic B., Nikolic M., Vukonjanski J., Terek E. The impact of Facebook and smart phone usage on the leisure activities and college adjustment of students in Serbia// Computers in Human Behavior, no. 55, 2015.-pp. 354-363.

16. Pasek J., More E., Hargittai E. Facebook and academic performance: Reconciling a media sensation with data// First Monday, no. 14(5), 2009.

17. Michikyan M., Subrahmanyam K., Dennis J.//Facebook use and academic performance among college students: A mixed-methods study with a multi-ethnic sample//Computers in Human Behavior, no. 45, 2015.-pp. 265-272.

18. Wohn D., LaRose R. Effects of loneliness and differential usage of Facebook on college adjustment of first-year students// Computers & Education, no. 76, 2014.-pp. 158-167.

19. Glass R., Li S., Pan R. Personality, problematic social network use and academic performance in China// Journal of Computer Information Systems, no. 54(4), 2014.-pp. 88-96.

20. Gosling S., Augustine A., Vazire S., Holtzman N., Gaddis S. Manifestations of personality in online social networks: Self-reported Facebook-related behaviors and observable profile information// Cyberpsychology, Behavior, and Social Networking, vol. 14, no. 9, 2011.-pp. 483-488.

21. Miller Z., Dickinson B., Hu W. Gender prediction on twitter using stream algorithms with N-gram character features// International Journal of Intelligence Science, vol. 2, no. 4A, 2012.-pp. 143-148.

22. Markovikj D., Gievska S., Kosinski M., Stillwell D. Mining Facebook Data for Predictive Personality Modeling// Proceedings of the 7th international AAAI conference on Weblogs and Social Media, 2013.-pp. 23-26.

23. Schwartz A., Eichstaedt J., Kern M., Dziurzynski L., Ramones S. et al. Personality, Gender, and Age in the Language of Social Media: The Open-Vocabulary Approach// PLOS ONE, vol. 8, no.9, 2013.-p. 73791.

24. Kosinski M., Bachrach Y., Kohli P., Stillwell D., Graepel T. Manifestations of user personality in website choice and behaviour on online social networks// Machine learning, vol. 95, no. 3, 2014.-pp. 357-380.

25. Arroju M., Hassan A., Farnadi G. Age, gender and personality recognition using tweets in a multilingual setting// 6th Conference and Labs of the Evaluation: Experimental IR meets multilinguality, multimodality, and interaction, 2015.-pp. 23-31.

26. Поливанова К. Н., Смирнов И. Б. Что в профиле тебе моем данные «ВКонтакте» как инструмент изучения интересов современных подростков//Вопросы образования, № 2, 2017,-с. 134-152.

27. Feshchenko A., Goiko V., Matsuta V., Stepanenko A., Kiselev P. Modelling of an educational profile of a student by analyzing public user data from social networks// INTED2018 Proceedings, 2018.-pp.640-646.

28. Кабанова Т.В., Корепанов К.В., Мацута В.В., Можаева Г.В., Фещенко А.В. Моделирование признаков одаренности учащихся по цифровым следам в социальной сети «ВКонтакте»// eLearning Stakeholders and Researchers Summit 2018, 2018, c.111-118.

29. Степаненко А.А., Резанова З.И., Гойко В.Л. Автоматическая классификация контента персональных страниц пользователей социальной сети «Вконтакте» как

маркеров профессиональных интересов абитуриента // Гуманитарная информатика, № 15, 2018, с. 6-14.

Результаты процедуры рецензирования статьи

В связи с политикой двойного слепого рецензирования личность рецензента не раскрывается.

Со списком рецензентов издательства можно ознакомиться здесь.

Предметом исследования в статьи «Взаимосвязь образовательных достижений старшеклассников и их цифрового следа в социальной сети» выступает выявление связи между формальными образовательными достижениями выпускников 11 классов и их цифровым следом в социальной сети «Вконтакте». В статье выявляется взаимосвязь между характеристиками профиля, которые связаны с поведенческими особенностями школьников, занимающих призовые места на олимпиадах, т.е. представлены результаты эмпирического исследования по выявлению связи цифрового следа с образовательными достижениями обучающихся. Указываются компоненты цифрового следа, которые наиболее значимы для исследуемой связи Методология исследования построена на совокупности теоретических методов - анализ, систематизация и классификация имеющихся в литературе данных по использованию методов анализа больших данных. В частности отмечается, что исследователи привлекают объективные данные о действиях пользователей (тексты сообщений, подписки на сообщества, лайки, количество друзей и фотографий в социальной сети) и алгоритмы машинного обучения для их анализа. Основополагающим выступает метод статистической обработки данных о пользователях социальных сетей, т.е. исследуется цифровой след респондентов. Данная методология вполне отвечает целям исследования и направлена на систематизацию подходов в поиске методов и инструментов извлечения и анализа данных о пользователях социальных сетей. Стиль, структура, содержание. Статья посвящена математическому моделированию классификации признаков, содержащих личные характеристики школьников, для выявления взаимосвязи с их образовательными результатами. Во ведении указывается на необходимость изучения цифрового следа человека, что п о з в о л и т «осуществлять анализ и моделирование его физиологических, психологических и когнитивных особенностей», а применение модели будет способствовать прогнозированию и управлению образовательной траекторией обучающихся. В основной части раскрываются основные позиции экспериментальной работы и используемые методы, указываются подходы и используемые характеристики для математического моделирования исследуемого процесса. Дается оценка и интерпретация экспериментальных данных. В заключительной части обращается внимание, что проведенный сравнительный анализ цифровых следов школьников-призеров олимпиад и старшеклассников без подтверждения высоких образовательных достижений указывает на то, что информация о личных характеристиках учащихся и их интересах позволяет построить классификатор, который бы по цифровому следу учащихся мог выявлять их образовательные результаты. Стиль работы научный. Заслуживает внимание обращение автора к решению проблемы построения математической модели для выявления особенностей цифрового следа и подтвержденных образовательных результатов. Имеются аналитические материалы в виде таблиц, результаты которых интерпретируются и по ним делаются выводы. Библиография содержит 29 источников, 26 из которых на английском языке. В работе имеются ссылки на научные статьи, проводится обзор подходов, представленных в используемых источниках. Список литературы оформлен по ГОСТу. Замечания по работе: 1) В тексте имеется много стилистических ошибок оформления. Приведем некоторые

фразы, требующие корректив: «В существующей по теме использования социальных сетей учащимися литературе, эмпирический материал представлен в основном данными о студентах», «Авторы другое исследования анализировали журнал записей мероприятия по измерению времени, затраченного на социальные (Jacobsen and Forste 2011)», «формулировался выводы о вкладе тех или иных составляющих цифрового следа в точность классификации», «О всех участниках исследования были выгружены данные о личных характеристиках пользователя «Вконтакте». 2) Вместо «производилось сэмплирование призёров олимпиад» необходимо использовать корректный термин «семплирование (от англ. sample — выборка)». В качестве перспектив проведенного исследования можно отметить, возможность составить рекомендательные сервисы для школьников, которые планируют участвовать в олимпиадах с достижением высоких образовательных результатов, подобные сервисы могут также использоваться университетами для приглашения старшеклассников к участию в организуемых ими олимпиадах. Статья может быть полезна специалистам, занимающимся вопросами математического моделирования в образовании, обработкой больших данных для прогнозирования образовательных достижений. Однако статья требует некоторой доработки в стилистическом плане.

Результаты процедуры повторного рецензирования статьи

В связи с политикой двойного слепого рецензирования личность рецензента не раскрывается.

Со списком рецензентов издательства можно ознакомиться здесь.

Предмет исследования - взаимосвязь достижений старшеклассников в предметных олимпиадах с их участием в тематических сообществах в социальной сети ВКонтакте. Методология исследования основана на сочетании теоретического и эмпирического подходов с применением методов анализа, моделирования, статистического анализа, обобщения, сравнения, синтеза. Актуальность исследования определяется широким распространением социальных сетей и неоднозначным отношением к педагогов к увлечению ими учащихся и, соответственно, необходимостью их изучения, включая взаимосвязь образовательных достижений старшеклассников с их участием в тематических сообществах в социальной сети ВКонтакте. Научная новизна связана с полученными эмпирическими данными, а также сформулированными выводами о том, что информация о личных характеристиках учащихся и их интересах позволяет создать точный классификатор, определяющий по цифровому следу факт их победы в олимпиадах. Наилучшую точность показал классификатор, использующий признаки принадлежности к определённым сообществам. Это означает, что существует связь между уровнем образовательного потенциала учащихся и тематикой интересного им контента. В дальнейшем составить цифровую модель школьника-призера олимпиады по цифровому следу «ВКонтакте». Статья написана русским литературным языком. Стиль изложения научный. Структура рукописи включает следующие разделы: Введение (тема образовательных достижений, политика государства, выявление и поддержка талантов среди школьников и студентов, профориентация и индивидуализация обучения, рейтингование и стимулирование образовательных учреждений, массивы информации, связанные с успеваемостью учащихся, аналитические методы для определения наиболее важных факторов, цифровой след, сбор и анализ данных обучающихся в Интернет, взаимосвязь формальных образовательных достижений выпускников с их цифровыми следами в социальной сети «ВКонтакте», гипотеза исследования, тема использования социальных сетей обучающимися в современных исследованиях, анализ академической успеваемости и методов ее измерения, гипотеза о наличии взаимосвязи

между особенностями личности и поведением, отраженным в цифровых следах, исследования отечественных авторов, анализ положительной и отрицательной взаимосвязи использования социальных сетей на оценки учащихся), Данные и методы (использование методов машинного обучения, исходные данные, школьники-выпускники

2019 (450 чел.) и 2020 (624 чел.) гг., данные о школьниках, не являющимися призерами олимпиад, из тех же регионов и того же возраста (4879 чел. для 2019 г. и 6635 чел. для

2020 г.), данные из профиля «ВКонтакте», данные о подписках на тематические сообщества, семплирование призеров олимпиад), Результаты (средние значения метрик качества для кросс-валидации методом случайных разбиений, только признаки личных характеристик, признак для каждого сообщества без личных характеристик, сообщества, отнесенные к классу наиболее характерных для призеров (наука, ЕГЭ, интеллектуальные мемы) и не призеров олимпиад (юмор, развлекательный контент), Заключение и выводы), Библиография. Текст включает шесть таблиц. Каждая таблица должна иметь ссылку в предшествующем тексте. Содержание в целом соответствует названию. В то же время формулировку заголовка желательно скорректировать, конкретизировав в ней предмет исследования - взаимосвязь достижений старшеклассников в предметных олимпиадах с их участием в тематических сообществах в социальной сети ВКонтакте. Следует отметить, что в тесте рассмотрен лишь один из аспектов образовательных достижений (результаты участия в предметных олимпиадах) и один в части цифрового следа - участие в тематических сообществах. Значительный массив собранных данных (тип профиля, наличие фотографии; наличие информации о дате рождения; пол; число друзей; среднее число просмотров постов на странице; число репостов; число собственных постов; коэффициент уникальности постов) не проанализирован. Также неясно, имеется ли корреляция между предметом, в котором ученик проявил высокие достижения, и тем или иным сообществом. Практическая ценность полученных результатов весьма относительна, поскольку победителя или призёра олимпиады оперативно и однозначно можно определить по наличию соответствующего диплома или спискам, которые публикуются в открытом доступе. Поиск таких учащихся для их вовлечения в олимпиадное движение также не составляет обычно особой проблемы -напротив, по месту обучения они обычно известны и зачастую страдают от излишнего к ним внимания и направления чуть ли не все без исключения известные их педагогам олимпиады. Обсуждение результатов практически отсутствует, что затрудняет определение их научной новизны. Библиография включает 29 источников отечественных и зарубежных авторов - научные статьи. Библиографические описания некоторых источников требуют корректировки в соответствии с ГОСТ и требованиями редакции, например: 1. Jacobsen W., Forste R. The wired generation: Academic and social outcomes of electronic media use among university students // Cyberpsychology, Behavior, And Social Networking. 2011. Vol. 14. № 5. P. 275-280. 6. Ainin S., Naqshbandi M., Moghavvemi S., Jaafar N. Facebook usage, socialization and academic performance// Computers & Education. 2015. № 83. P. 64-73. 16. Pasek J., More E., Hargittai E. Facebook and academic performance: Reconciling a media sensation with data// First Monday. 2009. Vol. 14. № 5. P. ???-???. 26. Поливанова К. Н., Смирнов И. Б. Что в профиле тебе моем ??? данные «ВКонтакте» как инструмент изучения интересов современных подростков // Вопросы образования. 2017. № 2. С. 134-152. Апелляция к оппонентам (Поливанова К. Н., Смирнов И. Б., Кабанова Т. В., Корепанов К. В., Мацута В. В., Можаева Г. В., Фещенко А. В., Степаненко А. А., Резанова З. И., Гойко В. Л., Jacobsen W., Forste R., Karpinski A., Kirschner P., Ozer I., Mellott J., Ochwo P., Rouis S., Limayem M., Salehi-Sangari E., Lee E.,Michikyan M., Subrahmanyam K., Dennis J., Ainin S., Naqshbandi M., Moghavvemi S., Jaafar N., Lambic D., Alwagait E., Shahzad B., Alim S., Kolek E., Saunders D., Rosen L., Carrier L., Cheever N., Bellur S., Nowak K., Hull K., Junco R., Cotten S., Jankovic B., Nikolic

M., Vukonjanski J., Terek E., Pasek J., More E., Hargittai E., Wohn D., LaRose R., Glass R., Li S., Pan R., Gosling S., Augustine A., Vazire S., Holtzman N., Gaddis S., Miller Z., Dickinson B., Hu W., Markovikj D., Gievska S., Kosinski M., Stillwell D., Schwartz A., Eichstaedt J., Kern M., Dziurzynski L., Ramones S., Kosinski M., Bachrach Y., Kohli P., Stillwell D., Graepel T., Arroju M., Hassan A., Farnadi G., Kiselev P. и др.) имеет место, в основном, в обзоре литературы. Обсуждение полученных результатов, их сопоставление с данными других авторов практически отсутствует, что желательно исправить. В целом материал представляет интерес для читательской аудитории и несмотря на несколько замечаний может рекомендован для публикации в журнале «Педагогика и просвещение».

i Надоели баннеры? Вы всегда можете отключить рекламу.