Научная статья на тему 'Измерение латентной переменной "качество профессиональной деятельности преподавателя" на основе модели Раша'

Измерение латентной переменной "качество профессиональной деятельности преподавателя" на основе модели Раша Текст научной статьи по специальности «Науки об образовании»

CC BY
228
65
i Надоели баннеры? Вы всегда можете отключить рекламу.
Ключевые слова
КАЧЕСТВО ПРОФЕССИОНАЛЬНОЙ ДЕЯТЕЛЬНОСТИ / МОДЕЛЬ ИЗМЕРЕНИЯ ЛАТЕНТНОЙ ПЕРЕМЕННОЙ / МОДЕЛЬ РАША

Аннотация научной статьи по наукам об образовании, автор научной работы — Анисимова Татьяна Семеновна, Летова Линара Васильевна, Маслак Анатолий Андреевич

Авторы статьи обобщают опыт Омского государственного технического университета по построению и использованию модели Раша при измерении латентной переменной «Качество профессиональной деятельности преподавателя»

i Надоели баннеры? Вы всегда можете отключить рекламу.
iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

Текст научной работы на тему «Измерение латентной переменной "качество профессиональной деятельности преподавателя" на основе модели Раша»

2. Семь раз отмерь, один - отрежь? URL: http:// www.akvobr.ru/problemy_podgotovki_nauchnyh_ kadrov.html

3. Олейникова О. Н. Болонский процесс и сопоставимость программ, дипломов и квалификаций высшего образования // Вестник МГОУ. Сер.: Психологические науки. М., 2009. С. 13-25.

4. Макареня Т. А. и др. Пути совершенствования и модернизации образовательной деятельности Южного федерального университета. М., 2010. С. 132.

5. Рубинштейн С. Л. Основы общей психологии. СПб., 1999. С. 156.

6. Эльконин Д. Б. Понятие компетентности с позиций развивающего обучения // Современные подходы к компетентностно-ориентированному образованию. Самара, 2001. С. 4-8.

a. a. podlesnov. subjective approach то the training of scientific manpower and teaching staff: problems and prospects

The author of the article characterizes the subjective approach as one of the principles of teaching staff formation in the context of higher and post-graduate professional education reorganization.

Key words: training of scientific manpower and teaching staff, subjective approach, person's professional orientation.

Т. С. АНИСИМОВА, Л. В. ЛЕТОВА, А. А. МАСЛАК

ИЗМЕРЕНИЕ ЛАТЕНТНОЙ ПЕРЕМЕННОЙ «КАЧЕСТВО ПРОФЕССИОНАЛЬНОЙ ДЕЯТЕЛЬНОСТИ ПРЕПОДАВАТЕЛЯ» НА ОСНОВЕ МОДЕЛИ РАША

- классификация форм профессиональной направленности субъектов профессионального образования, а также обозначение ее динамики, механизмов становления с учетом типических черт и мотивации к преподавательской, научной деятельности.

Личностно ориентированное разрешение обозначенных проблем, безусловно, послужит методологической основой трансформации высшего профессионального образования, будет способствовать повышению качества подготовки научных и научно-педагогических кадров.

Литература

1. Проект федерального закона «Об образовании в Российской Федерации». иЯЪ: http://www. lexed.ru/obr/2012/?proekt305.html

Авторы статьи обобщают опыт Омского государственного технического университета по построению и использованию модели Раша при измерении латентной переменной «Качество профессиональной деятельности преподавателя».

Ключевые слова: качество профессиональной деятельности, модель измерения латентной переменной, модель Раша.

Происходящие ныне изменения в образовании повысили требования к качеству управления образовательным процессом (обоснованность принятия управленческих решений в рамках системы менеджмента качества, прогнозирование и предупреждение возможных несоответствий), в частности, к оценке и управлению качеством профессиональной деятельности преподавателей (КПДП).

Характерная особенность образования как социальной системы состоит в том, что большинство переменных в этой области деятельности являются латентными (непосредственно не измеряемыми), их определяют через набор индикаторов, которые можно непосредственно оценить или измерить. Набор индикаторов фактически является операциональным определением латентной переменной. В нашем случае КПДП - латентная переменная, представленная набором индикаторов (видами деятельности, системно и полно отражающими КПДП).

Модель как образ оцениваемой латентной переменной нуждается в математическом описании на базе известных и хорошо изученных функций.

Какой метод тестологии (науки о создании научно обоснованных измерительных методик) дает объективные и точные знания об исследуемом объекте? Имеется две теории: классическая и современная [1]. Достоинства классической теории тестирования (КТТ), разработанной в первой половине XX века, заключаются в простоте обработки и интерпретации результатов. Итоговый балл испытуемого представляет собой дискретную величину и рассчитывается как сумма баллов, полученных за тестовые задания (как правило, с учетом весовых коэффициентов трудности этих заданий). Однако, обладая существенными недостатками - субъективность весовых коэффициентов (они определяются экспертами), возможность несовпадений между уровнем подготовки испытуемых и трудностью теста, нелинейность шкалы оценивания - КТТ не дает объективных знаний об испытуемых и требующейся для управления точной картины состояния процесса, устойчивых объективных знаний об объекте исследования [2].

Альтернативой КТТ, разрешившей изложенные проблемы, явилась теория Item Response Theory

Табл. 2. Матрица результатов измерения латентной переменной

Испытуемые Индикаторы Уровень подготовленности испытуемого

1 2 ... ... L

1 Р11 Р12 Р1.1 Р1к Р1

2 Р21 Р22 Р2.1 Р2к Р2

I PH Р12 РЧ Р& В1

N Рп1 Рп2 Рп1 Рпк Рп

Трудность задания 51 52 5.1 5к

(ШТ), появившаяся в середине XX столетия, - принципиально новый подход к теории тестирования: латентная величина стала рассматриваться как одномерный континуум на линейной шкале. Этот подход применим к различным моделям. Мировой опыт в теории и практике измерения латентных переменных (ИЛ11) преимущественно диктует необходимость использования модели, предложенной Рашем [3].

Рассмотрим теоретические основы этой модели на примере измерения уровня подготовленности испытуемых в случае дихотомических тестовых заданий (тестовое задание может быть выполнено правильно или неправильно). Параметрами выступают уровень измеряемой латентной переменной >го испытуемого pi и уровень трудности j-го тестового задания Зу. Акцент сделан не на тестовом балле (как в классической теории): «противоборствуют» уровень испытуемого р. и трудность тестового задания Зу.

Если испытуемый имеет более чем достаточную подготовку для решения очередного задания, то он станет «победителем противоборства» [4]. Модель Раша, описывающая результат этого взаимодействия, имеет следующий вид:

вРг- З.1 1 + еР1 - д]

где:

Ру - вероятность того, что 7-й испытуемый выполнит у-е задание. Логистическая функция обеспечивает варьирование Р в интервале (0; 1);

р. - латентный параметр, определяющий уровень подготовлености 7-го испытуемого;

Зу - латентный параметр, определяющий уровень трудности j-го задания теста.

Очевидно, что вероятность успеха Р 7-го испытуемого по у-му тестовому заданию варьируется следующим образом (табл. 1).

Табл. 1. Значения Р] в зависимости от соотношения pi и 3]

Условие Значение Рц

Р1 > 5 0,5 < Ру < 1

Р1 = 51 ,5 0, II Р

Р1 < 5 0 < Ру < 0,5

Модель Раша описывает вероятность успеха испытуемого Ру как функцию одного параметра

(в - ЗД в связи с чем иногда ее называют однопараметрической моделью Ш.Т (IPL). Итогом измерения латентных величин р. и Зу является матрица, отражающая Р7, р., З] (табл. 2).

Число испытуемых (К) может быть очень большим, поэтому для удобства представления приводятся результаты для 1-го, 2-го, >го и К-го испытуемых, результаты остальных обозначены многоточием. Аналогично представлены результаты и по индикаторам.

Из логистической функции видно, что Раш трансформировал исходные значения тестовых баллов в шкалу натуральных логарифмов: ввел общую логарифмическую меру уровня подготовленности испытуемого р и трудности тестового задания З/, названную им логитом. Таким образом, модель предназначена для установления взаимосвязи между двумя множествами р7 и Зу и для распределения их на одной линейной шкале логитов. Наиболее популярным программным обеспечением для обработки результатов тестирования на основе модели Раша является диалоговая система RUMM2020 [5].

В качестве примера представим структуру результатов измерения (рис. 1). Верхняя гистограмма показывает частотное распределение уровней подготовленности испытуемых, нижняя - частотное распределение трудностей тестовых заданий на одной линейной шкале логитов.

Для удобства в качестве точки отсчета (нуль) рассматривается среднее значение трудности тестовых заданий. Если, например, уровень подготовленности испытуемого равен 0,52 логита, это выше среднего уровня трудности теста на 0,52 логита. При этом можно сказать, что тестовые задания с их вычисленными «трудностями» Зу являются линейкой, которая используется для измерения уровня подготовленности испытуемых. Из рис. 1 видно, что уровень подготовки испытуемых в целом выше трудности теста на 0,99 логита. Такой показатель свидетельствует об общем успехе всей выборки испытуемых.

Важную информацию при измерении латентных переменных на основе модели Раша дают характеристические кривые уровня подготовленности испытуемых и трудности тестовых заданий. В качестве иллюстрации рассмотрим характеристическую кривую, >го испытуемого. На оси абсцисс отражена трудность тестового задания Зу, на оси ординат - вероятность выполнения этих

Рис. 1. Распределение уровня подготовленности испытуемых (верхняя гистограмма)и трудности тестовых заданий (нижняя гистограмма)

испытуемые

15 -Г

10

13,3%

0 0

5 ~

10

тестовые задания

N0. Меап SD ТЛа! [113] 0,99 0,92

4

латентная переменная 0,0%

5

тестовых заданий /-м испытуемым Р] (рис. 2). Результатом измерения уровня подготовленности /-го испытуемого является числовая характеристика на линейной шкале 8], соответствующая вероятности 0,5. Приведем как пример графические характеристики трех испытуемых с уровнями подготовленности в, в в3. Испытуемому с наибольшим уровнем подготовленности присвоено значение в3 = 83, с наименьшим - значение в1 = 8 Характеристическая кривая для испытуемого с уровнем подготовленности в2 занимает промежуточное положение (рис. 2).

На характеристической кривой ]-го тестового задания (рис. 3) отмечены значения измеряемой латентной переменной (ось абсцисс) и вероятность выполнения этого ]-го тестового задания испытуемыми Р (ось ординат). Трудность]-го тестового задания 8 - это числовая характеристика на линейной шкале в,, соответствующая вероятности 0,5.

В Омском государственном техническом университете разработана процедура измерения качества профессиональной деятельности преподавателей на основе модели Раша [6]. Ее цели: обеспечение и улучшение качества профессиональной деятельности преподавателей; управление информацией о КПДП; обеспечение объективности при принятии управленческих решений в области оптимизации КПДП. Основой структуры и содержательного наполнения данной разработки послужил мировой и отечественный опыт в области компетентностного подхода [7], выделены следующие компетенции преподавателя:

- научно-исследовательская (способность осуществлять научную деятельность в области фундаментальных и прикладных исследований);

- научно-воспитательная (способность использовать свой интеллектуальный потенциал,

направленный на формирование научных кадров, на научную профессионализацию магистров, аспирантов, соискателей - повышение активности и результативности их научно-исследовательской деятельности);

- учебно-методическая (владение методологией создания учебных, учебно-методических материалов, способность формировать методическую базу учебного процесса);

- информационно-технологическая (способность решать профессиональные задачи с использованием современных средств и методов информатики и ИКТ);

- социально-организационная (способность решать организационные, управленческие, интеллектуальные задачи общекафедрального, общефакультетского, общеуниверситетского характера) [8].

Содержательное наполнение компетенций - 61 индикатор (пункт опросника). Здесь при использовании модели Раша аналогом тестового задания является индикатор, аналогом уровня подготовленности - качество профессиональной деятельности преподавателя.

Обоснование вывода о качестве опросника и о пригодности предлагаемого набора индикаторов для измерения качества профессиональной деятельности преподавателей нуждалось в эмпирической проверке. Результаты такой проверки опубликованы Л. В. Летовой [9].

Визуальный анализ качества разработанного опросника как измерительного инструмента отображен на рис. 4.

В данном случае показателями являются распределение индикаторных переменных и симметричность диаграмм. Из рис. 4 видны:

- широкий диапазон варьирования индикаторов (6 логитов - это приемлемая мера размаха);

- наличие незначительной неоднородности в

№ 4 (47), 2012

‘Культурная жизнь Юга России”

------- 65

Рис. 2. Характеристические кривые трех испытуемых с уровнями подготовленности р1, р2 и р3

Вероятность правильного ответа

Рис. 3. Характеристическая кривая]-го тестового задания

распределении индикаторов, отвечающей условию достаточной плотности;

- сдвиг среднего уровня КПДП относительно среднего значения индикаторов на 2,3 логита, являющийся неприемлемой мерой.

Важная характеристика качества опросника -совместимость индикаторов, являющаяся мерой соответствия набора индикаторов модели. Показателем совместимости отдельного задания и общей совместимости всех заданий, образующих тест как систему заданий возрастающей трудности, является уровень значимости статистики Хи-квадрат. В нашем случае показатель равен 0,87. По установившейся практике он считается более чем удовлетворительным и свидетельствует о высокой точности измерения. Следующим показателем качества теста является надежность (устойчивость результатов измерения по отношению к погрешностям измерения). В нашем случае индексы надежности (индекс сепарабельности и альфа Кронбаха) равны 0,71 и

0,73 соответственно (рис. 5).

Полученные данные подтвердили пригодность опросника как измерительного инструмента; единственным недостатком явился сильный сдвиг среднего значения КПДП относительно среднего значения индикаторов, означающий, что представленный набор индикаторов предъявляет завышенные требования к преподавателям. Для устранения этого недочета необходимо включить в опросник индикаторы, системно и полно отражающие КПДП (соответствующие ее уровню, с более низким уровнем трудности, более доступные для преподавателей).

Необходимо подчеркнуть, что качественное измерение возможно только при подборе такого содержания опросника, которое четко выражает концепцию измеряемого свойства.

Несмотря на достоинства модели Раша, в России она слабо востребована. Причины тому - слабая информированность о сути и возможностях теории, отсутствие приемлемого языка ЖТ, а также популярных изданий, доступных широкому кругу читателей (тексты написаны математиками для

Рис. 4. Соотношение между КПДП и индикаторами

Распределение объектов и индикаторов

Индикаторы

Рис. 3. Суммарная статистика качества опросника

математиков с использованием языка теории вероятности и статистики). В целом затронутые нами проблемы будут решены с началом действительной модернизации образовательной деятельности.

Литература

1. Анисимова Т. С. Измерение латентных переменных в образовании. М., 2004.

2. Маслак А. А. Измерение латентных переменных в образовании и других социально-экономических системах: теория и практика. Славянск-на-Кубани, 2007.

3. Rasch G. Probabilistic models for some intelligence and attainment tests. Chicago, І980.

4. Аванесов В. С. Понятие и методы математической теории педагогических измерений (Item Response Theory) // Педагогические Измерения. 2009. № 4. С. 3.

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

3. Andrich D., Sheridan B. S., Luo G. Rumm2020: Rasch Unidimensional Measurement Models. Perth (Western Australia), 2003.

6. Маслак А. А., Леус О. В., Данилов А. А. Методика измерения качества профессиональной деятельности учителя. Славянск-на-Кубани, 2009.

7. Зимняя И. А. Ключевые компетенции - новая парадигма результата современного образования. URL: http://eidos.ru/journal

8. Летова Л. В., Шамец С. П. Компетентност-ный подход в образовательном процессе и проблемы его реализации // Реализация компетентност-ного подхода в теории и практике педагогической деятельности: материалы межрегиональн. науч.-практ. интернет-конф. URL: http://tm.infmo.ru/ tm2010/2010_oglav.pdf

9. Летова Л. В. Опыт построения модели оценки профессиональной компетентности преподавательского состава // Теория и практика измерения компетенций и других латентных переменных в образовании. Славянск-на-Кубани, 20ІІ. С. І32-І33.

t. s. anisimova, l. v. letova, a. a. maslak. measurement of a latent variable «quality of a university teacher's professional activity» based on RASCH'S model

The authors of the article generalize the experience of Omsk state technical university in construction and use of Rasch's model for measurement of a latent variable «Quality of a university teacher's professional activity».

Key words: quality of professional activity, measurement model of a latent variable, Rasch's model.

Н. А. ГАНГУР, Л. Ю. БРЫЛОВА

К ВОПРОСУ О МЕТОДИКЕ ПРЕПОДАВАНИЯ ОСНОВ ПРИКЛАДНОЙ КОМПОЗИЦИИ В ВЫСШЕЙ ШКОЛЕ (Взаимосвязь народного и профессионального)

Авторы статьи рассматривают узловые вопросы преподавания прикладной композиции в художественных учреждениях высшего профессионального образования на современном этапе, но с экскурсами в художественную практику конца XIX - середины XX века. В центр исследовательской оптики поставлена проблема взаимосвязи профессионального / народного в теории и практике изучения студентами базовых принципов орнаментальной композиции.

Ключевые слова: декоративно-прикладное искусство, теория орнамента, орнаментальная композиция, профессиональное искусство, народное творчество.

Декоративно-прикладное искусство - одна из важнейших областей современной художественной культуры, обширный раздел искусства, охватывающий различные виды творчества, ориентированные на создание изделий бытового назначения. В последнее время в связи с развитием дизайна, который сродни декоративно-прикладному искусству, в образовательных художественных учреждениях Краснодарского края возникла необходимость в более глубоком, систематическом изучении основ прикладной композиции и как следствие - обновлении форм и методов ее преподавания.

Рост национального самосознания, стремление глубже понять историю и культуру своего народа активизировали обращение к традиционному народному искусству в учебно-воспитательном процессе образовательных учреждений разного уровня. Народное творчество - накопленный поколениями продукт многовекового опыта, хранимый мастерами, в нем наглядно воплощены такие базовые принципы, как стилизация, трансформация, плоскостность, декоративность, орна-ментальность целого и его частей, отказ от всего случайного, малозначительного, акцентирование наиболее выразительного. Еще в конце XIX века С. Ноаковский под впечатлением от выставки в рисовальных школах настоятельно призывал вернуться к природе, представляющей, по его словам, «неисчерпаемый клад для орнаментали-стики» и рекомендовал учащимся тщательно изучать растения, а затем стилизовать их, превращая в орнамент [1]. В это же время в Строгановском училище был введен новый предмет «стилизация цветов», в основу преподавания которого положен декоративный метод [2].

Е. Д. Поленова в письме к В. Стасову выделяет в качестве одной из существенных черт русского народного орнамента использование природных мотивов, «стилизацию растений и животных» [3]. В целом под стилизацией в декоративно-прикладном искусстве понимают подчинение художественного изображения условным, упрощенным формам; при этом анализ и обобщение выступают как взаимообусловленные звенья единого творческого процесса, связанного с абстрагирующей работой мышления, фантазии, воображения. По-

этому стилизацию рассматривают как творческий метод, особенно в той области, где требуется декоративность как способ художественного мышления, проявляющийся во время работы с натуры. Австрийский искусствовед Алоиз Ригль в своей известной работе «Вопросы стиля. Основы истории орнаментики» (1893) подчеркивает: художественная ценность растительного орнамента не есть воспроизведение растения в его реальных чувственных формах, это преобразование, трансформация в соответствии с особыми закономерностями [4].

В изобразительном искусстве орнамент проявляется в двух ипостасях: на предметной плоскости и как способ организации композиции. Не случайно «орнаментальное искусство» часто служит синонимом понятия «прикладное искусство». Орнамент соединяет в себе различные художественные планы: эстетический, архитектонический, семантический. В плане архитектоники он выступает самостоятельной художественной структурой и когда находится на поверхности украшаемого предмета, и когда является самостоятельным произведением искусства [5]. М. С. Каган характеризует художественный язык орнамента как архитектонический, «который лишь вобрал в себя в той или иной степени элементы изобразительности и переработал их согласно своим потребностям» [6]. В орнаменте свободно совмещаются предметы, в действительности не связанные друг с другом; они изображены условно (стилизованы, схематизированы) и включены в орнаментальную композицию согласно законам ритма, симметрии, повторяемости.

Принцип опоры на народную традицию при изучении принципов построения орнамента не является новым. В середине XX века специалист по русскому художественному металлу искусствовед А. Е. Горпенко читал в Научно-исследовательском институте художественной промышленности курс орнаментальной композиции. Подготовленные им наглядные пособия - фотоматериалы, графические схемы, рисунки народных орнаментов - иллюстрируют такие базовые принципы, как ритм, метр, симметрия, асимметрия (см. архивный сб. «Неопубликованные труды НИИХП». М., 1955; 1959; 1960). «В народе настолько остро было

i Надоели баннеры? Вы всегда можете отключить рекламу.