Оценка качества методического обеспечения образовательных программ в вузе Текст научной статьи по специальности «Науки об образовании»

УДК 378

Н.В. Соловова, СВ. Лексика

ОЦЕНКА КАЧЕСТВА МЕТОДИЧЕСКОГО ОБЕСПЕЧЕНИЯ ОБРАЗОВАТЕЛЬНЫХ ПРОГРАММ В ВУЗЕ

В статье рассматривается методика оценки качества объектов мониторинга подпроцесса методического обеспечения образовательных программ в вузе. Выделяются критерии и показатели качества методического обеспечения, предлагаются квалиметрические шкалы, дается алгоритм получения оценки качества методического обеспечения учебной дисциплины на примере показателя «методы обучения и контроля».

Ключевые слова и фразы: оценка качества, методическая работа, процессный подход, показатели и критерии методического обеспечения.

В показателях деятельности и критериях государственной аккредитации высших учебных заведений (приказ Рособрнадзора № 1938 от 30 сентября 2005 года) отдельными пунктами выделены показатели «Качество подготовки» (п. 1.2) и «Методическая работа» (п. 2.4). Качество в ГОСТ Р ИСО 9000 -2001 определяется как степень соответствия присущих объекту характеристик установленным требованиям [1]. Повышению качества профессиональной подготовки студентов способствует методическая работа в вузе, представляющая комплекс мероприятий по разработке средств методического обеспечения и сопровождения образовательных программ, внедрению инновационных методов обучения, формированию методической компетентности преподавателей вуза [2, 3]. В ряде научных работ обсуждается проблема управления методической работой в современных образовательных условиях [4-7], однако отсутствует понимание методических дефиниций.

В Самарском государственном университете управление методической работой в вузе осуществляется на основе процессного подхода [8, 9].

* © Соловова Н.В.б 2008

Соловова Наталья Валентиновна (solovova@ssu.samara.ru), кафедра теории и методики профессионального образования

Лексина Светлана Валентиновна (lesveta@rambler.ru), кафедра математики, информатики и ма тематических методов в экономике Самарского государственного университета. 443011, г. С а

мара. ул. Акад. Павлова, 1.

I [роцессный подход предполагает последовательную реализацию логине-ски взаимосвязанных управленческих видов деятельности (постановка цели планирование, организация, создание условий, мониторинг, анализ, контроль корректировка), которые взаимосвязаны друг с другом в едином цикле управления методической работой в вузе. Все управленческие решения опираются на объективные факты мониторинга и анализа. Под мониторингом методической работы в вузе понимаем систематическое непрерывное наблюдение за всеми показателями подпроцессов методической работы. Процесс методической работы в вузе может быть подвергнут декомпозиции и представлен подпроцессами: методическое обеспечение образовательных программ; методическое сопровождение образовательных программ; повышение методической компетентности преподавателей вуза; внедрение инновационных методов обучения.

Внутривузовская система управления качеством в соответствии с ГОСТ Р ИСО 9000 - 2001 [1 ] должна включать разработку квалиметрических шкал для измерения заданных видов деятельности и измерения качества деятельности отдельных объектов управления. Допустим, необходимо оценить качество методического обеспечения образовательной программы в целом и каждой дисциплины в отдельности, тогда возникает необходимость разработки объективных показателей и критериев измерения качества методического обеспечения учебных дисциплин и образовательных программ. За показатели (объекты мониторинга) подпроцесса методического обеспечения образовательных программ принимаются индикаторы - характеристики, которые, во-первых, могут быть объективно оценены каждая в отдельности; во-вторых, должны быть управляемы, то есть целенаправленно изменяемы путем совершенствования. Определять и формировать данные показатели каждый вуз может самостоятельно [10]. Предлагаемый в настоящем исследовании метод может быть использован при организации контроля качества методического обеспечения и сопровождения образовательных программ различного уровня.

Каждый объект управления подпроцессом методической работы должен иметь свою квалиметрическую шкалу, которая формируется с учетом требований ученого совета вуза, Минобрнауки [11], лицензионных и аккредитацион-ных показателей. Показатели, характеризующие объекты управления подпроцессов методической работы, порой несоизмеримы между собой, так как отображают разные виды методической деятельности и имеют различные значения. Достаточно объективным способом оценки таких объектов и видов методической деятельности является установление между ними отношения порядка. Введем некоторые обозначения.

Шкалы порядка (ранговые шкалы), относящиеся к классу квалиметрических шкал, подобны тем, которые применяются в вузе для оценки успеваемости студентов, и представляют собой множество упорядоченных оценок. Исткала для оценивания >го показателя деятельности, В оощем случае

шкалы Ну дискретны и имеют различную размерность кГ1,р. Деятельность

/-го компонента оценивается по шкалам IV,, ЦТ*..... \Уп. Таким образом, каждо-

му^ компоненту ставится в соответствие оценка со,=(со1пи со2т, ... соШ1) где И'-И) х \У2х ...х \¥п - множество допустимых векторных оценок ¡-ого компонента (декартово произведение), щт - оценка у показателя деятельности по шкале Щ т=1, Щк

(7 -множество допустимых значений комплексного показателя деятельности (/? Для реализации отображения / т. е. для сравнения альтернативных действий и их оценивания, можно использовать решающее правило, которое представляет собой принцип сравнения векторных оценок и предпочтительности одних из них по отношению к другим.

Другое решающее правило, реализующее отображение у/, позволяет перейти к получению итоговой (комплексной, результирующей) оценки за всю совокупную деятельность объекта управления качеством. Комплексный показатель С является основой для получения итоговой (результирующей) шкалы /, тогда I - множество итоговых оценок (у/: <7^>/). Следует отметить, что для получения итоговой оценки / основой служит комплексный показатель деятельности О.

Рассмотрим порядок формирования шкал видов деятельности - V/,, шкалы векторных оценок - IV, комплексного показателя - С и итоговой оценки по шкале I на конкретном примере оценки качества методического обеспечения.

Подпроцесс «методическое обеспечение образовательных программ» представляет комплекс мероприятий направленных на обеспечение образовательных программ учебной литературой и учебно-методической документацией, отбор методик и технологий обучения и средств контроля качества обученно-сти студентов в соответствии с лицензионными и аккредитационными показателями для высшего учебного заведения. Предложим следующие показатели качества методического обеспечения учебной дисциплины:

МО = РП+КО+УМК+МОиК, (1)

где МО - методическое обеспечение учебной дисциплины,

• РП - рабочая программа содержит 4 компонента: РП = {статус, структура, нормы времени; трудоемкость дисциплины; содержание дисциплины};

• КО - книгообеспечение содержит 4 компонента: КО = {коэффициент книгообеспеченности; грифованная литература; книгообеспечение самостоятельной работы, дополнительная литература; новизна};

• УМК- учебно-методический комплекс содержит 6 компонентов: УЖ = {структура и статус УМК; промежуточный контроль; средства диагностики знаний; рекомендации студенту; рекомендации преподавателю; методическая документация; образцы оформления работ};

• МОиК методы обучения и контроля содержат 3 компонента: МОиК = {методики и технологии обучения; методы организации самостоятельной работы; методы контроля результатов обучения}.

Общее число компонентов методического обеспечения составляет 17 (обозначим через п). Определим для каждой составляющей методического обеспечения числовую характеристику - вес (К) .

т

"--7. (2)

где т - число компонентов, удовлетворяющих определенной составляющей методического обеспечения.

Составляющие методического обеспечения РП КО УМК МОиК

Веса 0,235 0,235 0,353 0,177

Веса опорных точек определяются экспертным методом и позволяют соотнести между собой важность, ценность различных видов деятельности, учесть требования нормативных документов. Отметим, что

1^=1- . (3)

I*

Рассмотрим критерии оценки каждого компонента.

I. Рабочая программа

\У\ - Статус

оценка суц-'Г' - программа дисциплины регионального или вузовского компонента;

оценка со]2="2" - программа дисциплины федерального компонента.

УУг -Трудоемкость дисциплины

оценка со2\="\" - программа реализуется в течение одного или двух семестров;

оценка со22-'2" - программа реализуется более двух семестров.

И^з-Структура, нормы времени

оценка - структура программы не соответствует нормам; много

существенных недостатков (разделы программы представлены не в полном объеме, нормы времени в программе не соответствуют учебному плану);

оценка со}2="2" - структура программы соответствует нормам, разделы программы представлены в полном объеме; имеются незначительные недостатки, нормы времени в программе не соответствуют учебному плану;

оценка <у3з-"3" - структура, разделы и нормы времени представлены в строгом соответствии с нормативными документами; недостатков нет. \\г4- Содержание дисциплины

оценка й>4|="Г - содержание дисциплины не полностью соответствует ГОС; представлены не все дидактические единицы ГОС; содержание учебного материала не соответствует принципам научности, системности; междисцип-линарности и профессиональной направленности;

оценка со42="2" - содержание дисциплины полностью соответствует ГОС; представлены все дидактические единицы ГОС; содержание учебного материала частично не соответствует принципам научности, системности; междис-циплинарности и профессиональной направленности;

оценка <у4з="3" - содержание дисциплины полностью соответствует ГОС; представлены все дидактические единицы ГОС; содержание учебного материала полностью соответствует принципам научности, системности; междис-циплинарности и профессиональной направленности.

II. Кпигообеспечеиие

{2\ - Коэффициент книгообеспечепности

оценка g\|=и 1" - коэффициент книгообеспечепности до 0,5; оценка ^1з="2" - коэффициент книгообеспечепности 0,5 и выше. &-Новизна

оценка g4\="l^^ - срок издания основной учебной литературы более 5 лет; оценка £42="2" - срок издания основной учебной литературы не более 5 лет. Оъ - Грифоваиная литература

оценка g2\="l" - процент грифованной литературы в списке основной литературы ниже 60 %;

оценка £22=''2" - процент грифованной литературы в списке основной литературы 60 % и выше;

оценка gгy="У^ - процент грифованной литературы в списке основной литературы 60 % и выше; присутствует внутривузовская учебная литература с грифом УМО, Минобрнауки и других органов федеральной власти.

& - Обеспечение самостоятельной работы, дополнительная литература

оценка ^зг5"!" - отсутствует учебная литература и методическая документация для самостоятельной работы студентов; отсутствует список дополнительной литературы;

оценка - присутствует учебная литература и методическая докумен-

тация для самостоятельной работы студентов;

оценка £„-"3" _ присутствует учебная литература и методическая документация для самостоятельной работы студентов; присутствует список дополни-

тельной литепятагнл*

тельной литературы;

оценка g>4="4" - присутствует учебная литература и методическая документация для самостоятельной работы студентов; список дополнительной литера-туры; внутривузовская учебная литература и учебно-методическая документация для самостоятельной работы студентов.

III. Учебно-методический комплекс U\ - Структура н статус УМК

оценка !/,,=" Г - структура УМК не соответствует требованиям; отсутствуют отдельные элементы УМК;

оценка и|2="2" - структура УМК соответствует требованиям; присутствуют все элементы УМК;

оценка wl3="3M - структура УМК соответствует требованиям, присутствуют все элементы УМК; весь УМК или его отдельные элементы являются изданными;

оценка Mi4="4" - структура УМК соответствует требованиям, присутствуют все элементы УМК; весь УМК или его отдельные элементы являются изданными; УМК или его элементы имеют гриф. f/2- Промежуточный контроль

оценка W2i=,,!M - требования к промежуточному контролю по дисциплине не представлены или представлены не в полном объеме;

оценка и22-,2" - требования к промежуточному контролю по дисциплине представлены в полном объеме;

оценка z/2J="3" - требования к промежуточному контролю по дисциплине представлены в полном объеме; имеются альтернативные формы промежуточного контроля (рейтинговая система и т. д.). С/3 - Средства диагностики знании

оценка 1/31=" 1" - средства диагностики знаний студентов по дисциплине не представлены или представлены не в полном объеме;

оценка м32="2" - средства диагностики знаний студентов представлены в

полном объеме;

оценка изз-'З" - средства диагностики знаний студентов представлены в полном объеме; имеются современные формы контроля обученности студентов (тестовые задания; компьютерные тесты и т. д.).

i/4- Рекомендации по организации самостоятельной работы оценка и4|-'Iм - методические рекомендации студенту по освоению программы учебной дисциплины и организации самостоятельной работы не представлены или представлены не в полном объеме;

оценка м42-"2» - методические рекомендации студенту по освоению про-

граммы учебной дисциплины и организации самостоятельной работы пред-

ставлены в полном объеме.

С/5 Рекомендации преподавателю

оценка г/5,=мГ - методические рекомендации преподавателю не представлены или представлены не в полном объеме;

оценка и52="2" - методические рекомендации преподавателю представлены в полном объеме.

С/6 - Методические указания

оценка г/61="Г - методические указания к практическим, семинарским и лабораторным занятиям не представлены или представлены не в полном объеме;

оценка ияг'2" - методические указания к практическим, семинарским и лабораторным занятиям представлены в полном объеме. С/7 - Образцы оформления работ

оценка 1/71=" 1" - образцы оформления рабочих тетрадей и отчетов о выполнении различных видов расчетных работ, примеры использования электронных информационных ресурсов не представлены; представлены не в полном

объеме;

оценка щ2="2" - образцы оформления рабочих тетрадей и отчетов о выполнении различных видов расчетных работ, примеры использования электронных информационных ресурсов представлены в полном объеме.

IV. Методы обучения и контроля

М\ - Методики и технологии обучения

оценка л/ц="2й - отсутствуют нетрадиционные и активные методы обучения; представленные методы неадекватны планируемым результатам обуче-

ния; Н

оценка л#|з="3" - присутствуют инновационные методы обучения; представленные методы адекватны планируемым результатам обучения;

оценка л/ц-''4й - присутствуют инновационные методы обучения, адекватные планируемым результатам обучения; представленные методы адекватны планируемым результатам обучения; представлены позитивные результаты их

использования;

оценка л/15=,,5" - присутствуют инновационные методы обучения, адекватные планируемым результатам обучения; представленные методы адекватны планируемым результатам обучения; представлены позитивные результаты их использования в том числе при реализации компетентностного подхода обучения студентов.

М2 - Методы организации самостоятельной работы студентов

оценка м1Х=пТ - отсутствуют формы организации аудиторной и внеаудиторной самостоятельной работы студентов или представлены не полностью, отсутствует комплексная организация самостоятельной работы;

оценка л#2зв,,3" - присутствуют разнообразные формы комплексной организации аудиторной и внеаудиторной самостоятельной работы студентов; представленные формы соответствуют планируемым результатам обучения и оптимально соответствуют ¡рафику учебного процесса;

оценка л/24="4м - присутствуют разнообразные формы комплексной организации аудиторной и внеаудиторной самостоятельной работы студентов; оптимально соответствуют графику учебного процесса; представленные формы соответствуют планируемым результатам обучения и направлены на формирование профессиональных и личностных компетенций студентов.

Л/з - Методы контроля результатов обучения

оценка лц\-%2" - отсутствуют адекватные традиционные формы контроля промежуточных и итоговых результатов обучения;

оценка .1/44="3м - присутствуют адекватные традиционные и инновационные формы контроля промежуточных и итоговых результатов обучения и самостоятельной работы студентов;

оценка л/45="4" - присутствуют адекватные традиционные и инновационные формы контроля промежуточных и итоговых результатов обучения и самостоятельной работы студентов; формируемые профессиональные и личностные компетенции студентов.

Предложенные показатели универсальны, то есть применимы для оценки качества образовательной деятельности любых вузов на уровне всей системы высшего профессионального образования, факультетов на уровне вуза, кафедр на уровне факультета, преподавателей на уровне кафедры; они всесторонние и измеряемые (для их измерения введены критерии - признаки, на основании

которых производится оценка).

Рассмотрим общее возможное количество К комбинаций оценок (векторных оценок по шкале М), в данном случае оно равно произведению Ш\*пъ*ш3=4*3*2=24, где т, - количество опорных точек в М, шкале. Проведем оценку методов обучения и контроля. Так как составляющая методов обучения и контроля содержит три компоненты, оцениваемые соответственно по 4-х, 3-балльной системам, общее количество комбинаций оценок составит

л: = 4-з-з = зб

Заполним таблицу, содержащую все комбинации оценок по составляющей методов обучения и контроля (МОиК).

^ - Таблица

Комбинации оценок по МОиК

Весовые значения ил

Суммы весов опорных точек

№ комби нации оценок

Столбцы 2, 3, 4 содержат комбинации оценок (многомерную векторную оценку), столбцы 5, 6, 7 содержат веса мл, , / = 1,36, 7 = 1,3 соответствующих оценок. В столбце 7 просуммированы веса отдельно для каждой комбинации

оценок

4-1

Wj, .

У' (4)

У=1

Для перехода к итоговой шкале оценок последний столбец таблицы 1 от-сортировали по убыванию.

Выделим четыре диапазона для 4-балльной системы оценок:

1. (0,5;0,63] - соответствует оценке «отлично»;

2. (0,4;0,5] - соответствует оценке «хорошо»;

3. (0,3; 0,4] - соответствует оценке «удовлетворительно»;

4. [0; 0,3] - соответствует оценке «неудовлетворительно».

Аналогичным методом можно оценить все составляющие методического обеспечения учебной дисциплины и перейти к его общей оценке. Например /-я учебная дисциплина получила оценку «хорошо» для «РП», «три» для «УМК», «отлично» по «КН», «хорошо» для «МОиК», тогда аналогично методике, представленной в таблице используя отображении /; W-X}, получаем комплексный показатель методического обеспечения /-й учебной дисциплины, а затем определим итоговую оценку методического обеспечения учебной дисциплины по шкале I с помощью отображения у: G->I.

Используя предложенный метод оценки качества методического обеспечения учебных дисциплин, при необходимости несложно оценить качество методического обеспечения образовательной программы в целом и соответственно установить лидирующие образовательные программы.

Для итоговой оценки I«*,,, методического обеспечения образовательной программы в целом необходимо провести аналогичные рассуждения. Учитывая, что общее число допустимых векторных оценок составит 4", где п - это число учебных дисциплин, входящих в учебный план образовательной программы, а каждая учебная дисциплина оценивается по 4-балыюй квалиметрической шкале («отлично» - 5; «хорошо» - 4; «удовлетворительно» - 3; «неудовлетворительно» - 2).

По мере изменения лицензионных и аккредитационных показателей деятельности вузов появляется необходимость вносить в систему оценки методического обеспечения и других подпроцессов методической работы коррективы [9, 12]. Для этого в алгоритме оценивания объектов подпроцессов методической работы предусматриваются «точки регулирования» системы оценок с помощью весовых коэффициентов, которые позволяют вузу гибко менять оценки качественных характеристик с целью акцентирования внимания на том

или ином виде методической деятельности.

Данные мониторинга показателей методического обеспечения образовательных программ являются информационной базой для принятия управленческого решения по оптимизации качественного методического обеспечения учебных дисциплин и образовательных программ. Если мониторинг включает

в себя постоянное измерение показателей, то контроль - соизмерение фактически достигнутых результатов с запланированными. Контроль проводится не только путем оценки показателей, но и в виде анкетирования, тестирования, наблюдения, собеседования, проверки документации, отчетов.

Реализация вышеизложенного метода оценки качества методического обеспечения образовательных программ возможна с использованием информационных технологий, так, например, нами были использованы табличные редакторы Excel. Были разработаны таблицы, содержащие блоки множества допустимых векторных оценок; веса опорных точек wif ; значения комплексного

з

показателя di = wfJ , отсортированные в порядке убывания и используемые

для определения границ итоговых оценок. Изменяя исходные данные и используя заложенный в электронных таблицах алгоритм вычислений, можно оценить другие объекты мониторинга подпроцессов методической работы в вузе, например методическое сопровождение.

Реализация предложенного метода оценки качества объектов мониторинга подпроцессов методической работы в вузе при административном сопровождении позволяет оперативно получать информацию и является одним из этапов процессного подхода к управлению методической работой в рамках внут-ривузовской системы управления качеством образования.

Библиографический список

I. ГОСТ Р ИСО 9000 - 2001. Государственный стандарт Российской Федерации. Системы менеджмента качества. Основные положения и словарь. - М.: Госстандарт России: Изд-во стандартов, 2001. - 160 с.

2 Соловова, Н.В. Методическая работа в вузе: историко-педагогический аспект / Н.В. Соловова . - Самара: «Универс групп», 2007. - 202 с.

3. Ситник. А.П. Методическая работа как фактор развития способности учителя к самоанализу профессиональной деятельности: методические рекомендации / А.П. Ситник, Е.В. Перенкова. - М.: ACADEMIA, 2005. - 22 с.

4. Симонов, В.П. Управление социальными (педагогическими) системами / В.П. Симонов. - М., 2005.-198 с.

5. Новиков, A.M. Проектирование педагогических систем / A.M. Новиков // Специалист. - 1998. -№ 5. - С.22-28.

6. Огвоздии, В.Ю. Управление качеством. Основы теории и практики / В.Ю. Огвоз-

дин . - М.: Дело и сервис, 2007. - 302 с.

7. Шамова. Т.Н. Управление образовательными системами / Т.Н. Шамова, Т.М. Да-

выденко, Г.Н. Шибанова. - М.: ACADEMIA, 2007. - 384 с.

8. Корольков, В. Процессный подход к управлению организацией / В. Корольков, В.

Брагин //Стандарты и качество. - 2001, №9. - С. 80-82.

9. Соловова, Н.В. Процессный подход к управлению методической работой в вузе

Н.В. Соловова // Сибирский педагогический журнал. - 2008. - № 14. - С.384-394.

10. Ерунов, В.П. Оценочно-критериальная система учебного процесса в вузе / В П. Ерунов. - Оренбург: Изд-во ОГУ, 2002. - 237 с.

11. Васенев, Ю.Б. К вопросу о проблемах контроля качества учебного процесса: Тезисы Всероссийской конференции «Университетское образование в России: проблемы и перспективы» / Ю.Б. Васенев. - СПб.: Изд-во СПбГУ, 2001. - С.62-65.

12. Васенев, Ю.Б. Организация и управление учебным процессом вуза при переходе на ФГОС ВПО нового поколения / Ю.Б. Васенев. - СПб.: Изд-во СПбГУ, 2007. - 242 с.

N.V. Solovova, S.V. Leksina

QUALITY OF METHODICAL MAINTENANCE ESTIMATION OF EDUCATION PROGRAMS IN HIGH SCHOOL

In the paper the technique of an estimation of quality of methodical maintenance of education programs in high school is examined. Some criteria and parameters of quality of methodical maintenance are allocated, qualimetrical scales are offered, the algorithm of reception of an estimation of quality of methodical maintenance of a subject matter on an example of a parameter «methods of training and the control» is given.

Key words and phrases: an estimation of quality, methodical work, the process approach, parameters and criteria of methodical maintenance.

Статья принята в печать в окончательном варианте 04.12.08 г.