Научная статья на тему 'КРИТЕРИАЛЬНЫЙ ПОДХОД К ОЦЕНКЕ ЭФФЕКТИВНОСТИ РЕЗУЛЬТАТОВ РЕАЛИЗАЦИИ ПРОГРАММ ВОЛОНТЕРСКОЙ ДЕЯТЕЛЬНОСТИ КАК СРЕДСТВА ВОСПИТАНИЯ ОБУЧАЮЩИХСЯ'

КРИТЕРИАЛЬНЫЙ ПОДХОД К ОЦЕНКЕ ЭФФЕКТИВНОСТИ РЕЗУЛЬТАТОВ РЕАЛИЗАЦИИ ПРОГРАММ ВОЛОНТЕРСКОЙ ДЕЯТЕЛЬНОСТИ КАК СРЕДСТВА ВОСПИТАНИЯ ОБУЧАЮЩИХСЯ Текст научной статьи по специальности «Науки об образовании»

CC BY
422
55
i Надоели баннеры? Вы всегда можете отключить рекламу.
Ключевые слова
КРИТЕРИАЛЬНЫЙ ПОДХОД / ОЦЕНКА ЭФФЕКТИВНОСТИ / СТАНДАРТИЗАЦИЯ / ЕДИНЫЙ ПОДХОД / AGILE-МЕТОДОЛОГИЯ / РЕАЛИЗАЦИЯ ПРОГРАММ ВОЛОНТЕРСКОЙ ДЕЯТЕЛЬНОСТИ / СРЕДСТВО ВОСПИТАНИЯ

Аннотация научной статьи по наукам об образовании, автор научной работы — Бокова Ольга Александровна, Григоричева Ирина Викторовна, Мельникова Юлия Анатольевна

Авторами проведен анализ литературы, содержащей информацию о возможных критериях оценки образовательных технологий, воспитательных практик, и предложен инновационный способ оценки эффективности результатов реализации программ волонтерской деятельности, который заключается в критериальном подходе с разделением по следующим группам: волонтеры (разных возрастов и направлений деятельности), управленческое звено (непосредственные руководители), заказчик (государственные структуры власти), благополучатели (непосредственные адресаты волонтерской деятельности). Рассмотрена процедура валидизации инструментария для определения эффективности реализации программ волонтерской деятельности. Обоснованы следующие критерии оценивания: социальная значимость, удовлетворенность участием, качество результата, положительная динамика социально-психологических характеристик волонтера, формирование социального партнерства, соответствие результата волонтерской деятельности нормативной документации, раскрытие содержания каждого критерия, выделены индикаторы и намечен возможный инструментарий оценивания.

i Надоели баннеры? Вы всегда можете отключить рекламу.

Похожие темы научных работ по наукам об образовании , автор научной работы — Бокова Ольга Александровна, Григоричева Ирина Викторовна, Мельникова Юлия Анатольевна

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

CRITERION APPROACH FOR ASSESSING THE EFFECTIVENESS OF THE RESULTS OF THE IMPLEMENTATION OF VOLUNTEER PROGRAMS AS A MEANS OF EDUCATING LEARNERS

The authors analyzed the literature containing information on possible criteria for evaluating educational technologies, educational practices and proposed an innovative approach to evaluating the effectiveness of the results of the implementation of volunteer programs. It lies in a criteria-based approach divided into the following groups: volunteers (of different ages and activities), management (direct managers), customer (government authorities, beneficiaries (direct recipients of volunteer activities). The procedure of validating the tools for evaluating the effectiveness of the implementation of volunteer programs is considered. The following evaluation criteria are substantiated: social significance, satisfaction with participation, quality of the result, positive dynamics of socio-psychological characteristics of the volunteer, formation of social partnership, compliance of the result of volunteer activity with regulatory documentation, the content of each is disclosed. The indicators and possible assessment tools are outlined.

Текст научной работы на тему «КРИТЕРИАЛЬНЫЙ ПОДХОД К ОЦЕНКЕ ЭФФЕКТИВНОСТИ РЕЗУЛЬТАТОВ РЕАЛИЗАЦИИ ПРОГРАММ ВОЛОНТЕРСКОЙ ДЕЯТЕЛЬНОСТИ КАК СРЕДСТВА ВОСПИТАНИЯ ОБУЧАЮЩИХСЯ»

Общество: социология, психология, педагогика. 2021. № 11. С. 158-165. Society: Sociology, Psychology, Pedagogics. 2021. No. 11. P. 158-165.

Научная статья

УДК 37.013+37.015

https://doi.org/10.24158/spp.2021.11.25

Критериальный подход к оценке эффективности результатов реализации программ волонтерской деятельности как средства воспитания обучающихся

Ольга Александровна Бокова1, Ирина Викторовна Григоричева2, Юлия Анатольевна Мельникова3

12,3Алтайский государственный педагогический университет, Барнаул, Россия 1olgbokova7@mail.ru, http://orcid.org/0000-0001-7928-5536 2grigoritcheva@yandex.ru, http://orcid.org/0000-0002-4168-896X 3jamelnikova@list.ru, http://orcid.org/0000-0002-7012-3618

Аннотация. Авторами проведен анализ литературы, содержащей информацию о возможных критериях оценки образовательных технологий, воспитательных практик, и предложен инновационный способ оценки эффективности результатов реализации программ волонтерской деятельности, который заключается в критериальном подходе с разделением по следующим группам: волонтеры (разных возрастов и направлений деятельности), управленческое звено (непосредственные руководители), заказчик (государственные структуры власти), благополучатели (непосредственные адресаты волонтерской деятельности). Рассмотрена процедура валидизации инструментария для определения эффективности реализации программ волонтерской деятельности. Обоснованы следующие критерии оценивания: социальная значимость, удовлетворенность участием, качество результата, положительная динамика социально-психологических характеристик волонтера, формирование социального партнерства, соответствие результата волонтерской деятельности нормативной документации, раскрытие содержания каждого критерия, выделены индикаторы и намечен возможный инструментарий оценивания.

Ключевые слова: критериальный подход, оценка эффективности, стандартизация, единый подход, agile-методология, реализация программ волонтерской деятельности, средство воспитания

Для цитирования: Бокова О.А., Григоричева И.В., Мельникова Ю.А. Критериальный подход к оценке эффективности результатов реализации программ волонтерской деятельности как средства воспитания обучающихся // Общество: социология, психология, педагогика. 2021. № 11. С. 158-165. https://doi.org/10.24158/spp.2021.11.25.

Финансирование: статья подготовлена при финансовой поддержке Министерства просвещения России в рамках реализации государственного задания на выполнение прикладной НИР по теме «Исследование результатов реализации программ добровольческой (волонтерской) деятельности и разработка рекомендаций по практическому применению в едином воспитательном пространстве (педагогические вузы, школы, учреждения дополнительного образования)» (государственное задание № 073-00037-21-01 от 14 июля 2021 г.).

Original article

Criterion approach for assessing the effectiveness of the results of the implementation of volunteer programs as a means of educating learners

Olga A. Bokova1, Irina V. Grigoricheva2, Yulia A. Melnikova3

12 3Altai State Pedagogical University, Barnaul, Russia. 1olgbokova7@mail.ru, http://orcid.org/0000-0001-7928-5536 2grigoritcheva@yandex.ru, http://orcid.org/0000-0002-4168-896X 3jamelnikova@list.ru, http://orcid.org/0000-0002-7012-3618

Abstract. The authors analyzed the literature containing information on possible criteria for evaluating educational technologies, educational practices and proposed an innovative approach to evaluating the effectiveness of the results of the implementation of volunteer programs. It lies in a criteria-based approach divided into the following groups: volunteers (of different ages and activities), management (direct managers), customer (government authorities, beneficiaries (direct recipients of volunteer activities). The procedure of validating the tools for evaluating the effectiveness of the implementation of volunteer programs is considered. The following evaluation criteria are substantiated: social significance, satisfaction with participation, quality of the result, positive dynamics of socio-psychological characteristics of the volunteer, formation of social partnership, compliance of the result of volunteer activity with regulatory documentation, the content of each is disclosed. The indicators and possible assessment tools are outlined.

Keywords: criterion approach, efficiency assessment, standardization, unified approach, agile methodology, implementation of volunteer programs, means of education

For citation: Bokova O.A., Grigoricheva I.V., Melnikova Yu.A. Criterion approach for assessing the effectiveness of the results of the implementation of volunteer programs as a means of educating learners. Society: Sociology, Psychology, Pedagogics. (11), 158-165. Available from: doi:10.24158/spp.2021.11.25 (In Russian).

Founding: the article was prepared with the financial support of the Ministry of Education of Russia as part of the implementation of the state assignment for the implementation of applied research on the topic "Research of the results of the implementation of programs of volunteer activities and the development of recommendations for practical application in a single educational space (pedagogical universities, schools, institutions of additional education)" (State assignment No. 073-00037-21-01 of 07/14/2021).

Введение. В настоящее время накоплен большой опыт реализации волонтерской деятельности как в Российской Федерации, так и в мировом сообществе. Существует проработанная система организации подобной деятельности, сбора материалов о добровольчестве и презентации волонтерского опыта. В большинстве школ и вузов страны, отдельных организациях дополнительного образования имеются волонтерские отряды или центры. Государство регулирует данную деятельность на нормативном и организационном уровнях1. Существует федеральный проект «Социальная активность», в рамках которого реализуется собственно добровольческая деятельность2. В 2014 г. по инициативе президента В.В. Путина в целях развития добровольческого движения и гражданской активности создана Ассоциация волонтерских центров (далее - АВЦ), объединяющая и координирующая работу большинства волонтеров в России. Необходимо отметить, что по данным АВЦ большая часть добровольцев - это граждане до 25 лет, в основном -учащиеся общеобразовательных учебных заведений и студенты высшего и среднего профессионального образования3.

Несмотря на накопленный опыт реализации программ добровольческой деятельности, не существует однозначного мнения о том, каким образом оценивать эффективность работы добровольцев и организаций, которые они представляют. Особенную актуальность данная проблема приобретает в связи с тем, что в школах, учреждениях дополнительного образования, средних профессиональных учебных заведениях и университетах принято большое количество волонтерских программ, в них участвуют активные подростки и молодежь, но не всегда реализация этих практик совпадает с целями и задачами, которые ставит перед системой образования закон «Об образовании в Российской Федерации»4, в том числе в части воспитательной работы. На данный момент в литературных источниках, включая методические рекомендации, нами не обнаружен единый стандартизированный подход к оценке результативности добровольчества.

В связи с этим цель исследования заключается в попытке обоснования единого критериального подхода к оценке эффективности результатов реализации программ волонтерской деятельности. При разработке подходов к определению действенности таких программ необходимо понимать, что они являются значимым инструментом обучения и воспитания. Поэтому при их реализации следует придерживаться норм и правил, обозначенных в Федеральном законе «Об образовании в Российской Федерации» и федеральных образовательных стандартах для всех уровней образования, которыми регламентируется система образования в целом.

Оценивание эффективности программ и практик в образовательной среде, по нашему мнению, возможно с использованием процедур стандартизации и валидизации инструментария. Под стандартизацией в сфере образования понимают деятельность, направленную на установление и применение правил в целях организации эффективной системы обучения и воспитания, управления образованием и педагогической наукой (Полонский, 2004).

Валидность в общественных науках понимается как набор методов и процедур, а также полученных при их использовании результатов, адекватных поставленным в исследовании целям и задачам, способность инструментария измерять те характеристики, для которых он заявлен5. В ра-

1 Концепция развития добровольчества (волонтерства) в РФ до 2025 г. [Электронный ресурс] : распоряжение Правительства РФ от 27 дек. 2018 г. № 2950-р. Доступ из информ.-правового портала «Гарант».

2 Паспорт федерального проекта «Социальная активность» [Электронный ресурс] // Ассоциация межрегионального социально-экономического взаимодействия «Центральный федеральный округ» : официальный сайт. URL: http://new.avo.ru/documents/33446/1306658/Социальная+активность.pdf/bfefe55e-4a76-f9ba-9648-d9525eb17953 (дата обращения: 19.11.2021).

3 Методические рекомендации по формированию добровольческих (волонтерских) центров на базе образовательных организаций среднего профессионального и высшего образования / А.П. Метелев, Е.С. Белецкая, Р.Р. Валиуллина и др. М., 2019. 356 с.

4 О внесении изменений в Федеральный закон «Об образовании в РФ» [Электронный ресурс] : Федер. закон от 31 июля 2020 г. № 304-Ф3. Доступ из информ.-правового портала «Гарант».

5 Педагогический словарь : учеб. пособ. для студ. вузов / под ред. В.И. Загвязинского, А.Ф. Закировой. М., 2008. 352 с.

боте Д.Д. Пратта с соавторами обоснованно показано, что валидность в педагогике в первую очередь обусловливается теми педагогическими смыслами и ценностями, которые преподаватели вкладывают в процесс обучения, т. е. в то, чему в первую очередь они хотят научить (Pratt et al., 2019). Наличие авторских подходов к определению достоверности приводит к появлению различных подходов к сбору доказательств, а именно к проверке достоверности полученных результатов.

Начиная с 1950-х гг. можно выделить четыре подхода к валидации: критериальный, трехсторонний, единый (унифицированный) и аргументный (Lu et al., 2021). При унифицированном подходе считается, что существует только конструктивная валидность и она является унитарным понятием, объединяя рассмотрение содержания, критериев и последствий в конструктивную структуру для эмпирической проверки рациональных гипотез об оценке и теоретически значимых отношениях. Ее аспекты выделены как средство решения основных проблем, скрытых в содержании понятия валидности как единой концепции. К ним относятся собственно содержание, содержательные, структурные, обобщаемые и внешние аспекты. Фактически они функционируют как общие критерии или стандарты достоверности для всех образовательных и психологических измерений, включая оценки результатов деятельности (Messick, 1995; Oluwatayo, 2012).

Методы и методики исследования. Опираясь на изложенное, а также на план критериальной апробации, представленный в работе испанских авторов Development process of content validity of pedagogical knowledge assessment in swimming (2020), предлагаем придерживаться следующей процедуры валидизации инструментария для оценки эффективности реализации программ волонтерской деятельности:

1) обосновать применение критериального подхода для оценки волонтерской деятельности;

2) разработать систему критериев оценивания эффективности результатов реализации программ волонтерской деятельности с позиции каждого ее участника;

3) реализовать экспертную оценку критериев эффективности результатов реализации программ волонтерской деятельности.

При анализе литературы, содержащей информацию о возможных критериях оценки образовательных технологий, воспитательных практик, мы увидели, что количественные критерии в основном не несут в себе большого объема информации о сути и качестве практики, а также целесообразности ее применения в образовательно-воспитательном процессе (Ветинев, Круг-лова, 2016). Вместе с тем в работах других авторов приводятся иные принципы и подходы к оценке эффективности добровольческих команд, базирующиеся на системе студенческого порт-фолио, стандартах компетенций, определении экономической и социальной эффективности добровольческой деятельности, где применяются качественные критерии (Зленко, 2015), что позволяет рассматривать критериальный подход как возможный вариант оценивания результатов реализации программ волонтерской работы1.

Признавая необходимость количественных данных, считаем, что критериальный подход оптимален при оценивании результатов реализации волонтерской деятельности, поскольку она является социально значимой и, соответственно, обладающей смыслом и ценностью для ее участников. Объективность при критериальном оценивании подтверждается дескрипторами экспертного листа, в создании которых принимают участие организаторы волонтерской деятельности, эксперты, волонтеры и благополучатели, а также модерацией, обсуждением и сравнением оценок. Отдельно следует отметить его преимущество, заключающееся в получении эффективной обратной связи между участниками и качественном оценивании результата. Это дает возможность его осмысления путем выделения и оценивания компонентов выполненной работы, обозначающих конкретный уровень достижения, а также позволяет определить потенциал, служащий основанием для коллективной распределенной работы, и применить его к разным задачам и ситуациям.

По нашему мнению, именно критериальный подход обеспечивает эффективную обратную связь, делает оценивание максимально видимым и понятным для всех сторон добровольческой деятельности, формирует и поддерживает мотивацию самих волонтеров и заинтересованность благополучателей, организует преемственность на всех уровнях (учреждения общего, дополнительного и высшего образования).

Результаты исследования и их обсуждение. Критерии оценки волонтерской деятельности мы рассматривали в традиционном для отечественной педагогической науки направлении2: с точки зрения субъектов, в нее вовлеченных (Организация экспертизы..., 2006). В этом

1 Образовательный стандарт подготовки добровольца/волонтера : учеб.-метод. пособ. / Л.А. Веретен-никова, А.Л. Метелев, Е.В. Четошникова и др. Барнаул, 2018. 116 с. ; Оценка экономической и социальной эффективности добровольческой деятельности: методические подходы и проблемы реализации : учеб. пособ. / под ред. И.В. Мерсияновой. М., 2018. 197 с.

2 Колесникова И.А., Горчакова-Сибирская М.П. Педагогическое проектирование : учеб. пособ. для вузов. М., 2005. 288 с.

случае критерии можно распределить по следующим группам: волонтеры (разных возрастов и направлений деятельности), управленческое звено (организаторы волонтерской деятельности, непосредственные руководители), заказчик (государственные структуры власти), благополуча-тели (непосредственные адресаты волонтерской деятельности).

Специфика волонтерской деятельности, как указано ранее, заключается в том, что она обладает социально значимым характером, а обязательной средой для ее осуществления выступает социум. Данная особенность раскрывается через систему взаимосвязей субъектов добровольчества, выраженную в модели взаимодействия участников на разных уровнях организации и реализации. Кроме того, работа волонтерских объединений не только регулируется методологическими, нормативными и законодательными документами на разных уровнях власти, но и по содержанию отвечает заложенным в них требованиям, что также влияет на специфику ее оценки. Таким образом, критерии оценивания добровольческой деятельности охватывают уровни государства, социума, самих участников и результативности их труда. Отдельно следует отметить, что декомпозиция критериев может быть разной в зависимости уровня оценивания. Это связано с социальной важностью, указывающей на востребованность и актуальность в рамках направлений общественной практики.

Нами выделены следующие критерии.

- Критерий 1 (К1). Социальная значимость волонтерской деятельности.

- Критерий 2 (К2). Удовлетворенность участием в волонтерской деятельности.

- Критерий 3 (К3). Качество результата волонтерской деятельности.

- Критерий 4 (К4). Положительная динамика социально-психологических характеристик волонтера.

- Критерий 5 (К5). Формирование социального партнерства.

- Критерий 6 (К6). Соответствие результата волонтерской деятельности нормативной документации.

Далее указанные критерии подробно рассмотрены через призму их содержания и субъектов оценивания.

Содержание К1: степень влияния результата волонтерской деятельности на социально-экономическую, социально-психологическую, образовательную среду и возможности его экстраполирования на другие условия или среду. Субъекты оценивания К1: все субъекты волонтерской деятельности.

Содержание К2: субъективная оценка участниками своего опыта волонтерской деятельности и желания продолжать активность в добровольческом движении. Субъекты оценивания К2: волонтеры и руководитель волонтерской деятельности (организатор практики), благополучатели.

Содержание К3: степень соответствия результата выдвинутой цели волонтерской практики. Субъекты оценивания К3: волонтеры, руководитель (организатор волонтерской практики), заказчик.

Содержание К4: развитие таких личностных качеств, как коммуникативная компетентность, творческий потенциал, ответственность, благоприятный социально-психологический климат в коллективе волонтеров; синергийный эффект (сплочение команды в ходе реализации волонтерской деятельности), желание волонтеров продолжать дальнейшую благотворительную деятельность; формирование опыта волонтерской деятельности; духовно-нравственное, творческое совершенствование волонтеров. Субъекты оценивания К4: волонтеры, руководитель (организатор волонтерской практики).

Содержание К5: развитие у субъектов волонтерской деятельности умения устанавливать взаимоотношения и организовывать взаимодействие на разных уровнях. Субъекты оценивания К5: волонтеры, руководитель (организатор), заказчик продукта волонтерской деятельности.

Содержание К6: тождественность результата волонтерской деятельности концептуальным и методологическим аспектам нормативной документации, регламентирующей образование в РФ. Субъекты оценивания К6: руководитель волонтерской деятельности (организатор волонтерской практики), заказчик продукта волонтерской деятельности.

По нашему мнению, содержание критериев оценки добровольческой деятельности можно представить через индикаторы с разработкой инструментария для оценивания.

Реализация и эффективность добровольческой деятельности связаны с ее непосредственными участниками и организаторами, их удовлетворенностью как самим процессом, так и результатом своего труда. Содержание критериев оценки волонтерской деятельности для волонтеров, ее реализующих, представлено следующей декомпозицией.

Индикатор к критерию К1: понимание социальной значимости реализованных практик.

Индикатор к критерию К2: удовлетворенность процессом и результатом волонтерской деятельности, взаимоотношениями с другими участниками и руководством; сплоченность команды;

готовность продолжить совместную деятельность в других волонтерских практиках; удовлетворенность родителей / законных представителей молодых волонтеров деятельностью добровольцев.

Индикатор к критерию К3: степень соответствия результата выдвинутой цели волонтерской практики, умение гибко корректировать план действий согласно текущим изменениям в требованиях заказчика/благополучателя.

Индикатор к критерию К4: самоопределение и социализация обучаемых, формирование системы социокультурных, духовно-нравственных ценностей, развитие личностных качеств, повышение коммуникативной компетентности, творческого потенциала, ответственности; благоприятный социально-психологический климат в коллективе волонтеров; синергийный эффект (сплочение команды в ходе реализации волонтерских проектов), желание волонтеров продолжать дальнейшую благотворительную деятельность; формирование опыта волонтерской деятельности.

Индикатор к критерию К5: развитие у обучаемых умения устанавливать взаимоотношения и организовывать взаимодействие на разных уровнях.

Содержание критериев оценки волонтерской деятельности для руководителей добровольческой деятельности выражено следующей декомпозицией.

Индикатор к критерию К1: степень влияния результата волонтерской деятельности на социально-психологическую, образовательную среду; экстраполирование волонтерской практики на другие условия или среду.

Индикатор к критерию К2: удовлетворенность от руководства коллективом, взаимодействия с органами власти и благополучателями, результатов управленческой деятельности.

Индикатор к критерию К3: степень соответствия результата выдвинутой цели волонтерской практики.

Индикатор к критерию К4: развитие навыков управленческой деятельности; позитивные результаты воспитательной деятельности и выполнения функций руководителя волонтерского коллектива.

Индикатор к критерию К5: расширение сети социального взаимодействия на разных уровнях.

Индикатор к критерию К6: тождественность процесса и результата волонтерской деятельности содержанию концептуальных и методологических аспектов нормативной документации, регламентирующей образование в РФ, регионе, образовательном учреждении.

Содержание критериев оценки волонтерской деятельности для заказчика ее продукта также является актуальным, поскольку процесс реализации волонтерских практик оказывает влияние на динамику благополучия в целом и положительный имидж волонтерства в частности.

Индикатор к критерию К1: количество тиражирования конкретной практики (опыта) в социальной сфере; информированность населения о волонтерской деятельности; положительный образ волонтерства в конкретной местности; степень влияния результата волонтерской деятельности на социально-экономическую, социально-психологическую, образовательную среду.

Индикатор к критерию К2: степень соответствия результата выдвинутой цели волонтерской практики.

Индикатор к критерию К3: степень соответствия результата выдвинутой цели волонтерской практики.

Индикатор к критерию К4: развитие навыков управленческой деятельности; позитивные результаты воспитательной работы, а также деятельности по выполнению функций руководителя волонтерского коллектива.

Индикатор к критерию К5: расширение сети социального взаимодействия на разных уровнях; реализованность модели взаимодействия волонтеров на разных уровнях; обобщение и распространение опыта волонтерской деятельности на разных уровнях.

Индикатор к критерию К6: тождественность процесса и результата волонтерской деятельности содержанию концептуальных и методологических аспектов нормативной документации, регламентирующей образование в РФ, регионе, образовательном учреждении; сопоставимость целей и результатов волонтерской деятельности с календарным планом воспитательной работы, рабочей программой воспитания образовательной организации, федеральным законом РФ «Об образовании в Российской Федерации» и др.

Содержание критериев оценки волонтерской деятельности для благополучателей представлено через рассмотрение мультипликации пользы для конкретных людей и общества в целом.

Индикатор к критерию К1: значимость результатов волонтерской деятельности в обществе, положительные отзывы в социальных сетях, СМИ и т. д.

Индикатор к критерию К2: эмоционально положительная оценка результатов волонтерской деятельности, субъективного эмоционального эффекта для благополучателей.

При экспертной оценке предложенных нами критериев эффективности реализации программ волонтерской деятельности разработан экспертный лист для апробации и валидизации

полученных критериев. Было привлечено 15 специалистов Сибирского и Уральского федеральных округов из числа организаторов волонтерской деятельности, имеющих опыт осуществления волонтерских проектов, финансированных Федеральным агентством по делам молодежи или Фондом президентских грантов. Им было предложено оценить собственные практики с позиции разработанных критериев и добровольческие проекты, поступившие на конкурс «Волонтерские инициативы в системе образования». Каждый из них оценил не менее 10 проектов.

Таким образом, получено 150 экспертных оценочных листов, для которых определен коэффициент согласованности. По результатам расчета коэффициент конкордации оказался равным 0,81. Это позволяет говорить о согласованности экспертных оценок критериального аппарата для анализа программ реализации волонтерских проектов, на основании чего можно сделать вывод о применимости предложенных нами критериев.

Представители экспертного сообщества отмечают, что волонтерство как инструмент воспитательной работы в Российской Федерации развивается интенсивно, демонстрируя способность гибко, органично и своевременно реагировать на изменения, происходящие в социальной жизни. Добровольческие практики становятся все более сложными и содержательно значимыми. Поэтому для расширения критериального подхода предлагаем использовать элементы Agile-методологии (англ. Agile Software Development - гибкая методология разработки) для оценки эффективности волонтерских программ, так как она представляет собой систему гибкого управления проектами. В работе М.А. Манокина и соавторов детально проанализировано применение Agile-методологии для оценки образовательной среды (2018).

Методологический подход к управлению и оценке эффективности волонтерских программ с позиции Agile-манифеста можно представить в виде декомпозиционной схемы, в которой отражается взаимодействие волонтеров между собой, волонтеров и благополучателей, событийность при реализации проектов и продукта реализации волонтерской деятельности (рисунок 1).

Рисунок 1 - Схема декомпозиции оценки эффективности волонтерских программ

с позиции Agile-манифеста

Трансформация положений АдПв-манифеста в контексте добровольческих проектов и практик показывает, что особо значимым является взаимодействие добровольцев между собой, с благополучателями и организаторами, их способность к изменениям, сам продукт волонтерской деятельности и нормативная документация, ее регламентирующая. С нашей точки зрения, в контексте критериального подхода данные показатели призваны расширять практико-ориентирован-ность и повышать уровень социально-психологической полезности работы волонтеров.

Вывод. Обобщая изложенное, следует отметить, что критериальный подход позволяет не только оценивать качество реализации добровольческих программ, но и осуществлять системный мониторинг волонтерской деятельности при разработке соответствующего инструментария, который включает в себя методы оценки социальной эффективности волонтерской деятельности и достижения результата, собственную рефлексию волонтеров и организаторов практик, самооценивание, анкетирование, тестирование, ранжирование, неформализованное интервью, фокус-группу. Дополнением данного инструментария выступают аналитическая оценка документов, продукта и результатов деятельности, модели взаимодействия волонтеров. Разработка указанного инструментария является перспективой дальнейшего исследования.

Список источников:

Ветинев А.М., Круглова М.С. Управление организованной волонтерской деятельностью в вузах России: оценка эффективности и модель оптимального партнерства // Вопросы управления. 2016. № 5 (42). С. 88-98.

Зленко А.Н. Формирование документации и методик оценки эффективности работы студенческих добровольческих команд // Сборник статей, лекций, методических и аналитических материалов «Добровольцы младшему поколению» : в 3 т. / под общ. ред. В.А. Лукьянова, С.Р. Михайловой. Т. 3. Развитие социальной активности и добровольческой деятельности в студенческой среде. СПб., 2015. С. 189-230.

Манокин М.А., Ожегова А.Р., Шенкман Е.А. Методология Agile в образовательной среде // Университетское управление: практика и анализ. 2018. Т. 22, № 4. С. 83-96. https://doi.org/10.15826/umpa.2018.04.042.

Организация экспертизы в образовании: анализ практики и методические рекомендации (приоритетный национальный проект «Образование») / под ред. Г.Н. Прозументовой. Томск, 2006. 184 с.

Полонский В.М. Словарь по образованию и педагогике. М., 2004. 511 с.

Development process of content validity of pedagogical knowledge assessment in swimming / G.N. Monteiro, S. Ribas, F.J. Jiménez, T. Mazzardo, N.D. Araújo, L.M.C. Aburachid // Revista Brasileira de Cineantropometria & Desempenho Humano. 2020. Vol. 22. https://doi.org/10.1590/1980-0037.2020v22e72071.

Lu W., Zeng Y., Chen J. Proposing a Framework of Validity Evidence for a Score Report // Creative Education. 2021. Vol. 12, no. 8. P. 1912-1925. https://doi.org/10.4236/ce.2021.128146.

Messick S. Validity of psychological assessment: Validation of inferences from persons' responses and performances as scientific inquiry into score meaning // American Psychologist. 1995. Vol. 50, no. 9. P. 741-749. https://doi.org/10.1037/0003-066X.50.9.741.

Oluwatayo J.A. Validity and Reliability Issues in Educational Research // Journal of Educational and Social Research. 2012. Vol. 2, no. 2. P. 391-400. https://doi.org/10.5901/jesr.2012.v2n2.391.

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

Pratt D.D., Schrewe B., Pusic M.V. Pedagogical validity: The key to understanding different forms of 'good' teaching // Medical Teacher. 2019. Vol. 41, no. 6. P. 638-640. https://doi.org/10.1080/0142159X.2018.1533242.

References:

Lu, W., Zeng, Y. & Chen, J. (2021) Proposing a Framework of Validity Evidence for a Score Report. Creative Education, 12 (8), 1912-1925. Available from: doi:10.4236/ce.2021.128146.

Manokin, M.A., Ozhegova, A.R. & Shenkman, E.A. (2018) Agile Methodology in Education. Journal University Management: Practice and Analysis. 22 (4), 83-96. Available from: doi:10.15826/umpa.2018.04.042.

Messick, S. (1995) Validity of psychological assessment: Validation of inferences from persons' responses and performances as scientific inquiry into score meaning. American Psychologist. 50 (9), 741-749. Available from: doi:10.1037/0003-066X.50.9.741.

Monteiro, G.N., Ribas, S., Jiménez, F.J., Mazzardo, T., Araújo, N.D. & Aburachid, L.M.C. (2020) Development process of content validity of pedagogical knowledge assessment in swimming. Revista Brasileira de Cineantropometria & Desempenho Humano. 22. Available from: doi:10.1590/1980-0037.2020v22e72071.

Oluwatayo J.A. (2012) Validity and Reliability Issues in Educational Research. Journal of Educational and Social Research. 2 (2), 391-400. Available from: doi:10.5901/jesr.2012.v2n2.391.

Polonskii, V.M. (2004) Dictionary of Education and Pedagogy. Moscow, Vysshaya Shkola. (In Russian)

Pratt, D.D., Schrewe, B. & Pusic, M.V. (2019) Pedagogical validity: The key to understanding different forms of 'good' teaching. Medical Teacher. 41 (6), 638-640. Available from: doi:10.1080/0142159X.2018.1533242.

Prozumentova, G.N. (ed.) (2006) Organization of expertise in education: analysis of practice and methodological recommendations (priority national project "Education"). Tomsk, Izdatel'stvo Tomskogo gosudarstvennogo pedagogicheskogo universiteta. (In Russian)

Vetitnev, A.M. & Kruglova, M.S. (2016) Control of Organized Volunteer Work in the Russian Universities: Evaluation of the Effectiveness and Optimal Model of Partnership. Management Issues. (5), 88-98. (In Russian)

Zlenko, A.N. (2015) Formation of documentation and methods for assessing the effectiveness of student volunteer teams. In: Luk'yanov, V.A. & Mikhailova, S.R. (eds.) Collection of articles, lectures, methodological and analytical materials "Volunteers for the younger generation". Vol. 3. Development of social activity and volunteerism in the student environment. Saint Petersburg, IPTS SPGUTD, 189-230. (In Russian)

Информация об авторах О.А. Бокова - кандидат психологических наук, доцент, начальник отдела грантов и проектов, доцент кафедры специальной педагогики и психологии, Алтайский государственный педагогический университет, Барнаул, Россия.

https://elibrary.ru/author_items.asp?authorid=277440.

И.В. Григоричева - кандидат психологических наук, доцент, доцент кафедры психологии, Алтайский государственный педагогический университет, Барнаул, Россия. https://elibrary.ru/author_items.asp?authorid=303317.

Ю.А. Мельникова - кандидат психологических наук, доцент, начальник управления воспитательной деятельностью и молодежного развития, доцент кафедры психологии, Алтайский государственный педагогический университет, Барнаул, Россия. https://elibrary.ru/author_items.asp?authorid=622656.

Information about the authors

0.A. Bokova - PhD in Psychology, Associate Professor, Head of Grants and Projects Department, Associate Professor, Department of Special Pedagogy and Psychology, Altai State Pedagogical University, Barnaul, Russia.

https://elibrary.ru/author_items.asp?authorid=277440.

1.V. Grigoricheva - PhD in Psychology, Associate Professor, Department of Psychology, Altai State Pedagogical University, Barnaul, Russia.

https://elibrary.ru/author_items.asp?authorid=303317.

Yu.A. Melnikova - PhD in Psychology, Associate Professor, Head, Department of Educational Activities and Youth Development, Associate Professor, Department of Psychology, Altai State Pedagogical University, Barnaul, Russia.

https://elibrary.ru/author_items.asp?authorid=622656.

Статья поступила в редакцию / The article was submitted 15.10.2021 ; Одобрена после рецензирования / Approved after reviewing 28.10.2021 ; Принята к публикации / Accepted for publication 25.11.2021.

i Надоели баннеры? Вы всегда можете отключить рекламу.