Учитель, школа, система образования в зеркале ЕГЭ Текст научной статьи по специальности «Науки об образовании»

УЧИТЕЛЬ, ШКОЛА, СИСТЕМА ОБРАЗОВАНИЯ В ЗЕРКАЛЕ ЕГЭ

TEACHER, SCHOOL, EDUCATIONAL SYSTEM THROUGH THE PRISM OF EGE

Боченков С.А.

Эксперт Независимого агентства оценки качества образования «Лидер», г. Чебоксары E-mail: s [email protected]

Bochenkov S.A.

Expert of the “Leader” independent agency of education quality assessment, Cheboksary. E-mail: s [email protected]

Аннотация. В рамках данной статьи обсуждается проблема корректного использования результатов ЕГЭ для принятия управленческих решений на разных уровнях. Одно из возможных решений предполагает адресную интерпретацию результатов ЕГЭ. В зависимости от уровня принятия управленческих решений (учитель, школа, система образования) различаются представления о результатах ЕГЭ для каждой из групп, указываются возможные информационные запросы, приводятся системы ключевых показателей и основные форматы представления аналитики, которые позволяют выделить для каждого уровня управления особенности в результатах ЕГЭ в зоне принятия управленческих решений.

Annotation. This article discusses the problem of proper use of EGE results in managerial decision making on all levels. One of the possible solutions is an address-based interpretation of the results. Depending on the level of managerial decision making (teacher, school, educational system), the interpretation of EGE results differs for each group, the possible information queries are shown and the systems of key indicators and the main analytical presentation formats are declared, all of which allow to emphasize particular features of the EGE results in a specific region for each level of managerial decision making.

Ключевые слова: анализ и интерпретация результатов ЕГЭ, оценка качества образования, образовательные результаты, ключевые показатели, управление образованием, результаты ЕГЭ для учителя, результаты ЕГЭ для школы, результаты ЕГЭ для системы образования.

Keywords: analysis and interpretation of EGE results, education quality assessment, education results, key indicators, education management, EGE results for the teacher,

EGE results for the school, EGE results for the educational system.

Можно ли использовать результаты ЕГЭ для принятия управленческих решений в системе образования? ЕГЭ, согласно принятой на международном уровне классификации оценочных процедур, относится к государственным экзаменам и совмещает в себе выпускной экзамен из средней общеобразовательной школы и вступительный - в учреждения профессионального образования. Это экзамен с очень высокими ставками, очень значимый для выпускников школы и их родителей. Прямое назначение ЕГЭ - сертификация учащихся на освоение образовательного стандарта среднего полного образования и селекция (отбор) для получения профессионального образования. По сути своей результаты ЕГЭ - это только оценка уровня индивидуальных образовательных достижений выпускника средней школы, и не более.

Здесь на использовании результатов ЕГЭ нужно было бы поставить точку и закрыть список возможных областей их использования, но существующая практика не позволяет нам сделать этого. Дело в том, что с момента своего введения ЕГЭ позиционируется как оценочная процедура, которая позволяет получить информацию о состоянии образования в стране, в регионе, в отдельных образовательных учреждениях, судить о тенденциях в образовании, управлять качеством образования на разных уровнях. В мировой практике эту функцию выполняют национальные мониторинги, результаты которых не имеют значения для самих учащихся, но позволяют принимать решения по отношению к образовательным учреждениям и системам.

Однако в системе образования Российской Федерации еще только появляются проекты национальных мониторингов, а вот практика использования результатов ЕГЭ в данном контексте имеет уже многолетнюю историю, и, к сожалению, уже накоплено достаточно кейсов, когда анализ и интерпретация результатов ЕГЭ выполняются некорректно, что приводит к ложным заключениям и неадекватным управленческим решениям. Поэтому, на наш взгляд, на данном этапе актуальным является обсуждение вопроса о корректной интерпретации результатов единого государственного экзамена как основной формы итоговой аттестации выпускников средней школы с точки зрения отдельных характеристик качества образования на уровне учителя (учебного предмета), на уровне образовательного учреждения, на уровне образовательных систем.

Данная статья подготовлена на основе материалов выступления автора по проблеме интерпретации результатов ЕГЭ в рамках учебного курса Российского тренингового центра Института управления образованием РАО «Система оценки качества и образовательная политика: ключевые проблемы и направления развития», проведённого совместно с Национальным центром тестирования Министерства образования и науки Республики Кыргызстан и при поддержке Всемирного банка 27-30 июня 2012 г. в Республике Кыргызстан (с более подробной информацией о курсе и учебными материалами можно ознакомиться здесь http://www.rtc-edu.ru/trainings/study/111).

ЕГЭ как оценочная процедура, или что собой представляют результаты ЕГЭ

Для корректной интерпретации результатов ЕГЭ необходимо понимание некоторых особенностей этой оценочной процедуры. Что и каким образом она оценивает? Како-

вы последствия получения тех или иных результатов для выпускника школы? Что из себя представляют результаты ЕГЭ?

Общий алгоритм итоговой аттестации выпускников средней школы в форме ЕГЭ показан на схеме 1.

Понятно, что результаты экзаменов по обязательным предметам и экзаменов по предметам по выбору имеют разные последствия для выпускника и что значимой является

Обязательные экзамены -русский язык и математика

I гЧ I

Пересдача

4 * * 4

Балл выставляется в свидетельство

СВИДЕТЕЛЬСТВО

о результатах

ЕДИНОГО

ГОСУДАРСТВЕННОГО

ЭКЗАМЕНА

I

Участие в конкурсе в учреждения профобразования

Схема 1. Общий алгоритм государственной итоговой аттестации выпускников 11 (12) классов школ в форме ЕГЭ

Проблемы современного образования | №3 | 2013 | http://www.pmedu.ru

й1

Ч

П)

43

43

5»

00

и>

ю

ю

и

ь-*

о

о

£

к

о

о

ч

43

5»

К

к

Ёч

го

и

оо

о

Ю

о

и ь-* о о

£

к

о

43

£

5»

Ч

Я

5»

ОО

и

о

о

и

ь-*

о

о

г?

о

ч

43

5»

и

01

"оз

и ь-* о о

СП

о

Й

о

ч

"VI

и

"о5

и

ь-*

о

о

Г

§

Я

4^

Я

и)

0\

СЛ

"оо

0\

я

из

м

о

о

е

и

я

5»

Ю

и

01

ы

V©

и ь-* о о

£

ч

о

43

ы

и

01

оо

"о5

ю

и

ь-*

о

о

8

I

о

ч

а

о

и

К

5»

К

0)

01

и

01

V©

"о5

и

ь-*

о

о

0)

£

5»

ч

Я

5»

01

и

ы

ю

и

ь-*

о

о

43

о

Я

Й

и

о4

и

"о5

и

ь-*

о

о

Я

го

Й

§

го

н

ПБ1 - наименьший первичный балл, получение которого свидетельствует об усвоении участником экзамена основных понятий и методов по соответствующему общеобразовательному предмету (в скобках ТБ1 - балл по 100-балльной шкале)

и

в

&

в

го

В

5

*

И

0

4

№

В

5 Л В

Е

X

И

го

01 5 В В

Е

х

Й

н

го

п

Н

0

01

Е

X

О!

№

В

В

о

а

а

к»

о

м

к»

ч

о

Й

г

ю

оо

"VI

оо

ы

ю

о

'ю

о

I—*

ю

г

ы 3 '

^ 43

о 8

2 я ч о м 43 Ы Й

о N

0)

• К

0)

г

оо

Ю К ел 3 чо " 43 ^ Й

о я н ^ о Й

СЛ 1

г

оо ы О '

■ '> 43 Й Я о

г

ю

01

к>

ю

о

'ю

о

ь-*

ю

8

0)

К

0)

о о

н ^ ю 43 К> Й о N

^ И Ю Й о 3

I—* 0)

ю

"VI

'оЗ

■ч

43

Й

Я

о

г

ю

ы

"Я

ы

0 "З

01 Й О ^

а)

к> Я о Я

Й *

43 о №

° Я Н О

I—* 43

ы Й о *

0)

ю Я о Я

Й Й

Ч М

О '

к> ю4

3 N5

М »

Ы

г

ип ^3 Й >В

о ' ^ 43

о 8 я

, о ° ^ Й ^ о ^

^ и Ю Й о Я

• 0)

01

о

ч

г

оо ^3

00 4 ьЬ ’П

О Й о Я ч о К» ^

о «

^ И

го ^ о

г

01

"VI

оо ^ ^ ' ^ 43 ё ^ ? я О О Ч ТЗ Ы Й

ю

ю

0)

о

о

оо

к)

о

8

0)

Я

Я

0)

г

“ а

Ы ' ^ 43

о Й

2 я ч о ы ^ О Й

о N

р° а

Ю Й о Я

М 0)

Минимальный балл ЕГЭ, установленный Распоряжением Рособрнадзора и подтверждающий освоение выпускником основных общеобразовательных программ среднего (полного) общего образования по предмету (в скобках - балл по 100-бал-льной шкале), далее - реквизиты распоряжения

ы

Я

и

ю

ы

Я

и

о

о

01

Я

и

оо

о

3

ю

Я

и

ь-* о о

ы

01

Я

и

о

3

Я

и

о

о

Я

и

(л

V©

Я

и

ь-* о о

о

Я

и

5

м

о

о

СЛ

00

я

из

СЛ

3

о

я

из

м

о

о

оо

оо

я

из

СЛ

Оч

ы

я

из

м

о

о

4^

04

я

из

СЛ

00

Й

5

о

о

00

я

и

01 V©

ю

я

и

I—*

о

о

01

я

и

ы

ю

ы

Я

и

о

о

01

Я

и

ы

Я

и

ь-* о о

ПБ2 - наименьший первичный балл, получение которого свидетельствует о высоком уровне подготовки участника экзамена, а именно, о наличии системных знаний, овладении комплексными умениями, способности выполнять творческие задания по соответствующему общеобразовательному предмету (в скобках ТБ2 - балл по 100-балльной шкале)

Боченков С.А. | Учитель, школа, система образования в зеркале ЕГЭ

не только балл по 100-балльной шкале, но и величина минимального порога по каждому учебному предмету, которая свидетельствует об освоении выпускником основных общеобразовательных программ среднего (полного) общего образования по предмету. Этот порог устанавливается распоряжением Рособрнадзора по каждому предмету ежегодно.

Необходимо также понимать, что, выполняя задания контрольно-измерительных материалов ЕГЭ (далее - КИМы), выпускник набирает определённое количество первичных баллов. Например, успешное выполнение задания базового уровня из части А (выбор одного правильного ответа из четырёх) как правило оценивается одним первичным баллом, задания части В (повышенный уровень) и С (высокий уровень сложности), как правило, позволяют получить несколько первичных баллов. Набранная выпускником сумма первичных баллов после процедуры шкалирования1 переводится в балл по 100-балльной шкале и выставляется в свидетельство о результатах ЕГЭ. Этот показатель чаще всего и берётся за основу при расчётах в существующих сегодня моделях анализа и интерпретации результатов ЕГЭ, что является ошибочным.

В таблице приведены пороговые значения первичных баллов и баллов по 100-балльной шкале из методики шкалирования. Величины ПБ1 и ПБ2 устанавливаются разработчиками, а минимальный порог - распоряжением Рособрнадзора (он, как правило, совпадает с ПБ12).

Отметим, что величина ПБ1 (наименьший первичный балл, получение которого свидетельствует об усвоении участником экзамена основных понятий и методов по соответствующему общеобразовательному предмету) в первичных баллах у разных предметов не совпадает (и это нормально, так как по каждому учебному предмету можно набрать разное максимальное число первичных баллов), не совпадают и значения ПБ1 по 100-балльной шкале. А это значит, что для преодоления минимального порога по математике нужно набрать 24 балла, а по информатике - 40 баллов из 100 возможных. Аналогичная ситуация наблюдается и при сравнении величин ТБ2 (рис. 1).

Использование подхода, основанного на сравнении процентильных групп участников по результатам ЕГЭ-2012 по Российской Федерации, и соответствующие им тестовые баллы по 100-балльной шкале по учебным предметам также позволяют выявить несовпадение шкал. Например, чтобы попасть в группу 10% лучших результатов ЕГЭ в 2012 году по РФ, по математике нужно было набрать 66, по русскому языку - 82, по английскому языку - 88 баллов. А это значит, что 70 баллов по математике не равны 70 баллам по русскому языку и, вероятно, 70 баллов по математике ЕГЭ-2012 не равны 70 баллам по математике ЕГЭ-2011.

Таким образом, при интерпретации данных важно понимать, что 100-балльные шкалы по разным учебным предметам по сути своей не совпадают и баллы (максимальные, минимальные, средние и т.д.) нельзя сравнивать как между предметами, так и в пределах одного предмета в динамике по годам.

1 Подробнее о методике шкалирования можно посмотреть здесь http://www.ege.edu.ru/ru/main/legal-documents/index.php?id_4=17904

2 В 2011 году минимальный балл, установленный Рособрнадзором, был снижен относительно ПБ1 по математике, физике, химии, информатике и ИКТ и истории, в 2012 году - только по физике.

Соотношение 100-балльной шкалы Соотношение 100-балльной шкалы

и уровней процентильной шкалы и уровней освоения образовательного

(ЕГЭ-2012) стандарта (РФ, ЕГЭ-2012)

70 баллов 73

63

62

80 79

36 36 36 ^7 39

69

84

72

72

32 32

73

82

□ отличный (10% лучших)

□ хороший (25% лучших)

О удовлетворительный (50%)

П низкий (25% худших)

П минимальный О ниже минимального порога

□ ТБ2 и выше

П выше минимального порога О ниже минимального порога

Рис. 1

В этой ситуации при интерпретации результатов ЕГЭ имеет смысл использовать либо относительные показатели 100-балльной шкалы (или пересчитанные приведённые значения), либо показатели доли выпускников, успешно справившихся с минимальными требованиями стандарта по предмету (преодолевших минимальный порог), и доли выпускников, успешно преодолевших порог ПБ2, - показавших высокий уровень подготовки и наличие системных знаний, овладение комплексными умениями, способность выполнять творческие задания по соответствующему общеобразовательному предмету.

Рамка для интерпретации результатов ЕГЭ

Анализ и интерпретация результатов ЕГЭ представляют собой подготовку разных информационных продуктов, которые адресованы соответствующим группам пользователей. Формат этих продуктов зависит от особенностей запросов каждой группы. Здесь важно точно понять, на какие вопросы через призму результатов ЕГЭ желает получить ответы сам выпускник, учитель, администрация школы, руководитель территориальной системы образования (регион, муниципалитет), методическая служба и другие заинтересованные пользователи.

Источники данных о результатах оценочной процедуры и об условиях организации образовательного процесса

• Протоколы результатов ЕГЭ (ГИА)

• Регламент оценочной процедуры

• Спецификации и кодификаторы КИМов

• Кодификатор школ региона

• Программа развития школы (региона)

• Данные других оценочных процедур и мониторингов

Информационные продукты, содержащие интерпретацию результатов оценочной процедуры

• Свидетельство о результатах ЕГЭ

• Региональный отчёт по итогам оценки

• Специализированный отчёт (по предмету, по группе учащихся, по школе, по группе школ)

• Аналитическая записка для министра

• Информационный буклет для родителей

• Пресс-релиз

Схема 2

Интерпретация результатов определяется, с одной стороны, запросами группы пользователей, с другой - источниками данных.

Каждая группа пользователей должна получить адресный ответ на имеющиеся у неё запросы в понятном для неё виде. Здесь важна и используемая модель интерпретации, и система показателей, и форма предъявления результата: язык, наглядность, степень детализации. Правильно поданная информация позволяет делать точные заключения и принимать адекватные управленческие решения на каждом уровне. Рассмотрим некоторые примеры интерпретации результатов ЕГЭ для разных групп пользователей.

Анализ и интерпретация индивидуальных результатов ЕГЭ: оценка индивидуальных результатов учащегося

По своему прямому назначению ЕГЭ, оценивая индивидуальный уровень обученности, адресует полученные в ходе этой оценки результаты именно выпускникам и их родителям - в виде свидетельства. Здесь специальной интерпретации результатов практически не требуется. На схеме 3 видно, какие информационные запросы могут возникнуть у выпускника в связи с результатами ЕГЭ и в каких источниках можно найти на них ответы.

Так, получая оперативные данные о собственных результатах ЕГЭ по предмету в форме протокола (каждый выпускник получает эти результаты в своей школе), выпускник видит свой индивидуальный результат в баллах и позадачную решаемость и прини-

Запросы разных групп пользователей о результатах оценочной процедуры

• Выпускники и их родители

• Учителя

• Администрация школы

• Органы управления образованием

• Методические службы

• Родители, выбирающие школу

• СМИ, местное сообщество

Анализ и интерпретация индивидуальных результатов ЕГЭ - ответ на запрос учащегося и его родителей

ling is the Road To Change

' RUSSIAN TRAINING „ CENTER

Достаточно ли набранных баллов для получения аттестата (обязательные предметы) и наличия балла в свидетельстве (для участия в конкурсе)?

Достаточно ли набранных баллов для успешного участия в конкурсе на выбранную специальность?

ИЛИ

Хватит ли суммы набранных баллов для зачисления?

Позадачная решаемость - для принятия решение о подаче апелляции

Распоряжение Рособрнадзора от 30.08.2011 № 2844-10 «Об установлении в 2012 году минимального количества баллов ЕГЭ по математике, подтверждающего освоение выпускником основных общеобразовательных программ среднего (полного) общего образования в соответствии с требованиями федерального государственного образовательного стандарта среднего (полного) общего образования»

Качество приёма в вузы - 2011 РИД НОВОСТИ

www.ria.ru

http://ria.ru/ratings/20110914/437081876.html Данные о конкурсе на соответствующую специальность

Протокол проверки результатов ЕГЭ

Фамилия Имя Отчество С <£*»Г документа Номер документа Задания типа А Задания типа В Задания типа С Первичный балл Балл

Иванов Иван Иванович 9700 777777 +++++++-++++ 1(2)2(2)1(3)0(3)0(4)00 15 66

Схема 3

мает решение, идти ему на апелляцию или нет. На основе информации о минимальном балле, данных о конкурсе он также в состоянии оценить успешность прохождения аттестации и свои возможности для конкурсного зачисления на выбранную специальность в учреждения профессионального образования.

Анализ и интерпретация результатов ЕГЭ: оценка результатов работы учителя

Результаты ЕГЭ, поступающие в школу в виде протоколов, требуют специальной процедуры анализа и интерпретации, которая позволяет ответить на информационные запросы учителя и помогает понять, насколько хорошо подготовлена к ЕГЭ группа его учащихся. На какие же вопросы может и должен получить ответ учитель, проанализировав результаты ЕГЭ своих учащихся, и как наиболее наглядно представить ему эти ответы?

Во-первых, учитель должен получить представление об уровне требований контрольно-измерительных материалов ЕГЭ по предмету. Источниками информации здесь, кроме собственно результатов ЕГЭ, являются кодификатор, спецификация и демоверсия ЕГЭ, открытый сегмент банка заданий по предмету и др. Напомним, что контрольноизмерительные материалы ЕГЭ имеют единую структуру, которая определена спецификацией. Задания, занимающие в работе одинаковую позицию (например, А1 или В5)

проверяют одни и те же элементы содержания и виды деятельности во всех вариантах в рамках предмета. Это позволяет сформировать представление об уровне требований по предмету. Ниже приведены примеры интерпретации данных об уровне требований ЕГЭ. На диаграмме видно, что более 60 процентов первичных баллов по физике учащийся может получить, успешно решив задания базового и повышенного уровня сложности (части А и В), а наибольший упор делается на учебном материале по электродинамике и основам СТО.

Чем точнее учитель будет через фрейм теста представлять уровень требований ЕГЭ, тем успешнее он сможет организовать подготовку своих учащихся. Чем жёстче учителя-предметники ориентированы на требования ЕГЭ, тем легче транслировать новые требования образовательного стандарта по предмету, изменяя содержание КИМов.

Во-вторых, для учителя важны данные об успешности освоения как отдельных дидактических единиц (позадачная решаемость), так и указанных выше содержательных блоков, сформированности умений и видов деятельности у своих учащихся. Графическим выражением успешности выполнения теста группой учеников является профиль решаемости, где видны результаты выполнения каждого задания. При сравнении с «коридором» ожидаемой решаемости видно, какие темы отработаны лучше, какие хуже, а какие вообще оказались провальными.

Пример интерпретации результатов ЕГЭ для учителя. Уровень требований ЕГЭ-2012.

RUSSIAN

TRAINING

CENTER

Распределение заданий КИМов ЕГЭ-2012 по содержательным блокам курса физики

Методы научного познания; 3,92%

Квантовая физика; 11,76%

Электродинамика и основы СТО; 21,57%

Молекулярная физика (МКТ, термодинамика); 13,73%

Задания высокого уровня сложности.

Механика; 11,76%

Задания высокого уровня сложности. Молекулярная физика; 5,88%

Задания высокого уровня сложности. Электродинамика и основы СТО; 11,76%

Задания высокого уровня сложности. Квантовая физика; 5,88%

Механика; 13,73%

ПРОВЕРЯЕМЫЕ ТЕМЫ НОМЕРА ЗАДАНИЙ В РАБОТЕ ЕГЭ-2012

Механика (кинематика, динамика, статика, законы сохранения в механике, механические колебания и волны) А1, А2, А3, А4, А5, А6, А22

Молекулярная физика (молекулярнокинетическая теория, термодинамика) А7, А8, А9, А10, А24, В1

Электродинамика и основы СТО (электрическое поле, постоянный ток, магнитное поле, электромагнитная индукция, электромагнитные колебания и волны, оптика, основы СТО) А11, А12, А13, А14, А15, А16, А23, В3, В4

Квантовая физика (корпускулярно-волновой дуализм, физика атома, физика атомного ядра) А17, А18, А19, А25, В2

Методы научного познания А20, А21

Задания высокого уровня сложности. Механика С1, С2

Задания высокого уровня сложности. Молекулярная физика С3

Задания высокого уровня сложности. Электродинамика и основы СТО С4, С5

Задания высокого уровня сложности. Квантовая физика С6

Рис. 2. Пример интерпретации результатов ЕГЭ для учителя. Уровень требований ЕГЭ-2012 по физике

Если сравнить успешность подготовки этой же группы учащихся в разрезе содержательных блоков, то становится понятно, что учащиеся успешно решают на базовом и повышенном уровне задачи по механике, наблюдаются проблемы в решении задач по квантовой физике. Эти и другие данные позволяют учителю выявить проблемы подготовки группы учащихся, понять собственные сильные и слабые стороны, скорректировать свою деятельность в перспективе.

В-третьих, результаты ЕГЭ позволяют учителю оценить востребованность учебного предмета как экзамена в форме ЕГЭ среди его учеников - это касается предметов по выбору. Ясно, что она диктуется как внешними факторами (престижность будущей специальности и т.д.), так и внутренними (связанными со школой и учителем), поэтому популярность предметов как экзаменов в форме ЕГЭ разная. Но если учащиеся на старшей ступени (10-11 класс) выбрали определённый предмет для изучения на профильном уровне, то большая их часть должна сдавать экзамен по этому предмету. Тогда можно говорить об эффективности затраченных ресурсов, об эффективности работы учителя-предметника.

В-четвёртых, учитель получает данные об усвоении его учениками образовательного стандарта на минимальном уровне - о доле учащихся, преодолевших минимальный установленный порог, из числа сдававших предмет. Учитель должен быть ориентирован на достижение максимальных величин этого показателя. Достижение всеми выпускника-

Пример интерпретации результатов ЕГЭ для учителя. Позадачная решаемость.

Решаемость заданий КИМов по физике по школе в сравнении с коридором ожидаемой решаемости

Графическим выражением успешности, результата выполнения теста группой учеников является профиль решаемости, где видна успешность выполнения каждого задания. При сравнении с коридором ожидаемой решаемости видно, какие темы отработаны лучше, какие хуже, а какие вообще оказались провальными.

Практика анализа результатов экзамена в разрезе отдельной школы, класса и учителя даёт разные профили по решаемости заданий.

Рис. 3. Пример интерпретации результатов ЕГЭ для учителя. Позадачная решаемость

ФИЗИКА

-100% -50% 0% 50% 100%

Рис. 4. Пример интерпретации результатов ЕГЭ для учителя. Результаты освоения содержательных блоков курса и сформированность основных умений

Пример интерпретации результатов ЕГЭ для учителя. Группы учащихся по уровню готовности к ЕГЭ-2012 по физике.

RUSSIAN

TRAINING

CENTER

90

80

70

60

50

40

30

20

10

Доля выпускников, успешно сдавших ЕГЭ по предмету от общего числа выпускников, сдававших данный предмет - 100%

Доля выпускников, сдавших ЕГЭ по предмету с результатом, соответствующим повышенному уровню и выше от общего числа выпускников, изучавших предмет на профильном уровне - 81,25%

О “

О О

О О

-----Граница высокого уровня подготовки

> • • • Граница повышенного уровня подготовки ■ — — Граница базового уровня подготовки О МОУ "школа для примера г. Чебоксары"

Высокий уровень подготовки к ЕГЭ: знаний и умений достаточно для полноценного продолжения образования в профильном вузе с достаточно высоким конкурсом.

Повышенный уровень подготовки к ЕГЭ: знаний и умений достаточно для продолжения образования по профильным специальностям в вузах со средним уровнем требований.

Базовый уровень подготовки к ЕГЭ: знания, умения и способы деятельности соответствуют требованиям стандарта на минимально

возможном уровне. В группу с базовымуровнем подготовки входят учащиеся, которые могут продолжать образование по профильным специальностям в НПО и СПО или выбрать направление обучения в вузе, где данный предмет не является профильным.

Низкий уровень подготовки к ЕГЭ: группа риска, так как бессистемность и отрывочность знаний учащихся не позволяет преодолеть минимальный порог для получения свидетельства о результатах ЕГЭ.

Рис. 5. Пример интерпретации результатов ЕГЭ для учителя. Группы учащихся по уровню готовности к ЕГЭ-2012 по физике

ми, допущенными к ЕГЭ, результатов, превышающих минимальный порог, - это прямая ответственность учителя и основной показатель качества его работы.

В-пятых, учитель может получить данные об освоении учениками образовательного стандарта на профильном уровне. Пороговым баллом освоения предмета на профильном уровне следует считать значение ПБ2. И задача учителя - обеспечить преодоление этого порога как можно большим числом учащихся, из изучавших его предмет на профильном уровне.

Каждая точка на диаграмме - это индивидуальный результат участника ЕГЭ. Положение точки на графике определяет величина балла по 100-балльной шкале. На графике выделены группы учащихся с различным уровнем готовности к ЕГЭ. В приведённом примере видно, что все учащиеся группы успешно преодолели минимальный порог требований образовательного стандарта и 7 из 16 (более 40%) успешно преодолели порог высоких результатов ПБ2.

И, наконец, процедура ЕГЭ позволяет учителю корректировать применяемую им систему текущего оценивания с учетом требований внешней оценки. Выставляемые учителем четвертные, полугодовые, годовые оценки по предмету должны коррелировать с баллами ЕГЭ.

Критерии качества работы учителя в зеркале результатов ЕГЭ

Общие критерии:

Учитель обеспечивает освоение образовательного стандарта на минимальном уровне -доля учащихся, успешно преодолевших минимальный порог требований образовательного стандарта, из числа сдававших предмет стремится к 100%; Система текущего оценивания адекватна результатам внешней оценке. Наблюдается положительная динамика или стабильность в высоких результатах по каждой из значимых позиций.

Предмет изучается на базовом уровне Предмет изучается на профильном уровне

Все учащиеся из числа слабоуспевающих (но допущенных к итоговой аттестации) успешно выполняют определённый набор заданий, что позволяет им преодолеть минимальный порог Доля учащихся, сдававших экзамен по предмету в форме ЕГЭ, из числа изучавших предмет на профильном уровне выше, чем среднее значение для данной территории и в аналогичных образовательных учреждениях. Учитель обеспечивает освоение образовательного стандарта на профильном уровне - доля учащихся, успешно преодолевших порог требований профильного уровня, из числа выпускников, изучавших предмет на профильном уровне и сдававших его, выше, чем среднее значение для данной территории и в аналогичных образовательных учреждениях

Приведённые выше рассуждения позволяют определить рамку требований к качеству работы учителя через призму ЕГЭ.

Применяя данную систему показателей качества в интерпретации результатов ЕГЭ для учителя, мы даём учителю адекватную обратную связь, чтобы он мог организовать адресную работу над собственными ошибками и спланировать свою деятельность, направленную на достижение более высоких результатов, при подготовке следующей группы выпускников. Ресурсы, которыми располагает учитель, и область его деятельности соответствуют предъявляемой рамке требований.

Анализ и интерпретация результатов ЕГЭ: оценка деятельности школы

ЕГЭ является основной формой итоговой аттестации выпускников 11 (12) классов, поэтому результаты ЕГЭ широко используются в оценке деятельности школ. Однако необходимо учитывать следующее. Во-первых, ЕГЭ позволяет судить лишь об отдельных характеристиках качества образования и не является единственным и всеобъемлющим показателем качества работы школы. Во-вторых, надо достаточно точно понимать, какие именно результаты ЕГЭ могут отражать работу школы и какие контекстные данные нужны для интерпретации этих результатов. Так, использование линейных рейтингов школ и сравнение результатов разных школ напрямую между собой не отражают реальной ситуации и часто приводят к ложным выводам и неверным управленческим решениям. Поэтому показатели по школе надо интерпретировать относительно показателей группы аналогичных школ, расположенных на территории со сходными социально-экономическими условиями. Не менее важным условием, которое влияет на результаты ЕГЭ, является наличие или отсутствие фильтров на этапе отбора учащихся в школу. Кроме того, необходимо учитывать такие факторы, как образовательный ценз родителей, социальный и экономический статус семей, образовательные ресурсы семей и т.д.

Помимо этих контекстных и фоновых условий важно понимание того, что собственно представляет собой результат ЕГЭ для школы: за что в результатах ЕГЭ школа отвечает, на какие показатели может и должна оказывать влияние. На наш взгляд важными являются следующие характеристики школы, выявляемые по результатам ЕГЭ.

Соответствует ли заявленный профиль старшей ступени школы спектру предметов, выбираемых выпускниками 11 (12) классов для сдачи в форме ЕГЭ? Хорошая школа по результатам ЕГЭ - это школа, выпускники которой активно выбирают экзамены в форме ЕГЭ из числа предметов профиля школы (предметы, необходимые им для продолжения образования и изучаемые в 10-11 классах на профильном уровне).

Каковы показатели освоения образовательного стандарта на минимальном уровне (доля выпускников, успешно сдавших два обязательных экзамена, и доля выпускников, успешно сдавших все экзамены в форме ЕГЭ)? Хорошая школа по результатам ЕГЭ - это школа, все выпускники которой успешно справляются с двумя обязательными экзаменами в форме ЕГЭ (русский язык и математика), что необходимо для получения

аттестата о среднем (полном) образовании, и успешно сдали все экзамены в форме ЕГЭ (обязательные и по выбору выше минимального порога), то есть получили полноценное свидетельство о результатах ЕГЭ для конкурса при поступлении на выбранную ими специальность.

Каковы показатели освоения образовательного стандарта на профильном уровне (доля выпускников, успешно сдавших все предметы, из числа изучавшихся на профильном уровне с результатом, соответствующим повышенному уровню (ПБ2) и выше)? Хорошая школа по результатам ЕГЭ - это школа, в которой значительная часть выпускников

Пример комплекса показателей для оценки деятельности школы

по результатам ЕГЭ

Линия оценки Показатель Пояснения и примеры

УРОВЕНЬ ОСВОЕНИЯ ОБРАЗОВАТЕЛЬНОГО СТАНДАРТА

Уровень освоения образовательного стандарта для получения аттестата о среднем образовании Доля выпускников школы, успешно сдавших два обязательных экзамена (русский язык и математику) в форме ЕГЭ, из числа выпускников, допущенных к итоговой аттестации Для получения аттестата выпускнику достаточно сдать только два обязательных экзамена с результатом не ниже установленного минимального порога

Уровень освоения образовательного стандарта для получения профессионального образования - получение свидетельства о результатах ЕГЭ с баллами по всем предметам, необходимым для поступления в выбранное учреждение профессионального образования Доля выпускников, успешно сдавших все экзамены (обязательные и по выбору) в форме ЕГЭ, из общего числа допущенных к итоговой аттестации выпускников школы Допустим, выпускник школы выбрал и сдал в форме ЕГЭ четыре экзамена: два обязательных и два для поступления на выбранную специальность. Если учащийся не справился с обязательным (-ми) экзаменом (-ами), он не получит аттестат, если выпускник не справился с одним экзаменом по выбору, то в свидетельстве о результатах ЕГЭ по данному предмету не будет выставлен балл и он не сможет участвовать в конкурсе на выбранную специальность. Только если результаты всех экзаменов выше установленного минимального порога, выпускник сможет участвовать в конкурсе на зачисление на ту специальность и в то образовательное учреждение, в которое планировал. Таким образом, школа обеспечила ему достижение минимального уровня стандарта для получения профессионального образования

Линия оценки Показатель Пояснения и примеры

КАЧЕСТВО ПРОФИЛЬНОЙ ПОДГОТОВКИ

Соответствие заявленного профиля школы спектру предметов, выбираемых выпускниками для сдачи в форме ЕГЭ Доля выпускников, выбравших все экзамены (учитываются только экзамены по выбору) для сдачи в форме ЕГЭ из числа предметов, изучавшихся на профильном уровне Например, в школе заявлен естественно-научный профиль с изучением таких предметов, как биология, химия и физика на профильном уровне. Значит, в идеале, каждый выпускник профильного класса в качестве предметов по выбору должен выбрать предметы из этого перечня. Для поступления нужно сдать русский язык и два из трёх предметов, которые он изучал на профильном уровне

Качество заявленной профильной подготовки Доля выпускников, сдавших все предметы из изучавшихся на профильном уровне, с результатом не ниже порога профильной подготовки (ПБ2) Например, одна школа обеспечила высокий уровень профильной подготовки 20% выпускников, другая - 35%. Показатель отражает качество профильной подготовки на единицу получателя бюджетной услуги - ученика и оказывается сравнимым независимо от профиля школы

преодолевает порог профильного уровня по всем предметам, изучавшимся на профильном уровне.

Соответствует ли применяемая учителями школы система текущего оценивания результатам внешней оценки?

Каковы позиции школы в рейтинге по вышеназванным показателям среди школ города (района) и среди аналогичных (кластер) школ региона и какова динамика значений ключевых показателей? Хорошая школа по результатам ЕГЭ - это школа, показывающая положительную динамику или стабильность в высоких результатах по каждой из указанных позиций.

Задавая такую рамку требований к школе в результатах ЕГЭ мы, с одной стороны, акцентируем внимание на тех позициях качества результатов, за которые может и должна нести ответственность школа, а с другой - транслируем необходимость оказания качественной образовательной услуги каждому ученику на минимальном уровне требований образовательного стандарта и на профильном уровне в зависимости от потребностей учащегося. Эти требования в большей степени зависят от ресурсов школы, чем пресловутый средний балл, и соответствуют приоритетным задачам развития образования.

Сравнение результатов школ и построение различных рейтингов имеет смысл проводить в пределах кластера. Для снятия напряжённости в ситуации сравнения выделяется несколько групп школ - кластеров по ряду контекстных характеристик. При кластеризации образовательных учреждений могут быть учтены такие характеристики, как тип и вид образовательного учреждения, тип местности, размер населённого пункта, размер

Кластеры общеобразовательных учреждений республики

(для снятия напряжённости в ситуации сравнения выделено несколько групп школ по ряду контекстных характеристик):

ling is the Road To Change

' RUSSIAN TRAINING „ CENTER

+Тип образовательного учреждения

4Вид образовательного учреждения

+Тип местности, размер населённого пункта

^Размер образовательного учреждения по числу

выпускников (наличие условий для профильной

подготовки)

Общеобразовательные учреждения Чувашской Республики

Кластер № 8 Вечерние (сменные) общеобразовательные учреждения

Городские учреждения

Сельские учреждения

Общеобразовательные школы, обеспечивающие углубленную подготовку по одному или нескольким предметам: лицеи, гимназии, школы с углубленным изучением отдельных предметов

Общеобразовательные школы, реализующие программы начального общего, основного общего и среднего (полного) общего образования

Кластер № 1 Городские инновационные ОУ лицеи, гимназии, школы с углубленным изучением отдельных предметов ■

Кластер № 2 Городские общеобразовательные школы (более 50 выпускников 11 классов)

Городские общеобразовательные школы (менее 50 выпускников 11 классов)

Общеобразовательные школы, обеспечивающие углубленную подготовку по одному или нескольким предметам: лицеи, гимназии, школы с углубленным изучением отдельных предметов

Кластер № 4 Сельские инновационные ОУ: лицеи, гимназии, школы с углубленным изучением отдельных предметов, ресурсные центры

Фоном для сравнения результатов ЕГЭ школы являются показатели по городу (району) - территория и показатели группы аналогичных школ (кластер).

Общеобразовательные школы, реализующие программы начального общего, основного общего и среднего (полного) общего образования

Кластер № 5 Сельская общеобразовательная школа (25 и более выпускников 11 классов)

Кластер № 6 Сельская общеобразовательная школа (от 15 до 25 выпускников 11 классов)

Кластер № 7

Малочисленные сельские общеобразовательные школы (менее 15 выпускников 11 классов)

Кластер № 3

Рис. 6. Система общеобразовательных учреждений Чувашской Республики

образовательного учреждения по числу выпускников (наличие условий для профильной подготовки). Эти данные по школам есть в региональной базе ЕГЭ. Кроме того, целесообраз -но учитывать и ряд других характеристик, так как они в значительной степени связаны с образовательными результатами, но для сбора этих данных необходима дополнительная работа. Это данные об уровне образования родителей, образовательных ресурсов семьи, материальной обеспеченности семей, языке общения в семье и величине фильтра при поступлении в школу. В качестве примера на рисунке 6 приведена система общеобразовательных учреждений Чувашии, на которой можно увидеть выделяемые в регионе группы школ:

Анализ и интерпретация результатов ЕГЭ: оценка деятельности системы образования

На основе результатов ЕГЭ и ГИА можно выполнить оценку деятельности региональных образовательных систем по следующим ключевым позициям.

1. Каков уровень освоения образовательного стандарта основного общего (по результатам ГИА) и полного среднего (по результатам ЕГЭ) образования (общее состояние, динамика, корреляции между результатами ЕГЭ и ГИА)?

2. Каково качество предпрофильной (по результатам ГИА) и профильной (по результатам ЕГЭ) подготовки (общее состояние, динамика, корреляции между результатами

ЕГЭ и ГИА)? Каковы возможности сети и охвата предпрофильной и профильной подготовкой?

3. Что можно сказать о равенстве доступа к образованию соответствующего качества (каковы различия между городом и селом, между муниципалитетами, между разными кластерами школ, обнаруживаются ли депрессивные территории и группы риска среди контингента выпускников)?

4. Каков уровень объективности процедур ЕГЭ и ГИА? Какова система контроля и надзора за проведением процедуры, каковы основные выявленные нарушения, имеются ли аномальные результаты и необъяснённые всплески?

5. Сравнение муниципальных образовательных систем.

6. Сравнение (рейтинг) образовательных учреждений.

Для сравнения муниципальных систем образования имеет смысл исходить из следующих критериев хорошей (результативной, эффективной) системы образования по результатам ЕГЭ (аналогично - ГИА):

• Процедура проведения ЕГЭ защищена, в результатах ЕГЭ не наблюдается аномальных результатов. Работает система контроля и надзора за процедурой.

• Все выпускники, допущенные до итоговой аттестации, успешно сдают обязательные экзамены и получают документы об образовании. Это один из показателей того, насколько эффективно учреждения системы охватывают учащихся соответствующего возраста средним (полным) образованием.

• Учреждения сети обеспечивают удовлетворение потребности учащихся в изучении предметов на профильном уровне. На территории муниципалитета есть школы, обеспечивающие стабильный высокий результат по каждому из учебных предметов. Заявленный профиль школ подтверждается результатами ЕГЭ как по спектру выбираемых предметов, так и по полученным результатам (достижение профильного уровня подготовки по всем предметам, изучаемым на профильном уровне).

• Обеспечивается равенство доступа к образованию соответствующего качества. Различия в результатах ЕГЭ между школами сети менее очевидны, чем между результатами учащихся внутри школы.

• Выявлены группы риска в контингенте обучающихся, определена степень депрес-сивности каждого элемента территории, имеются данные об условиях работы каждой из школ. Выявлены школы, работающие в трудных условиях, и им оказывается соответствующая поддержка.

• Ресурсы сети используются эффективно. Оценка деятельности школ ведётся с учётом условий организации образовательного процесса и контингента обучающихся.

Как видно из приведённых позиций, при оценке муниципалитета важно, чтобы система образования предоставляла населению образовательные услуги, адекватные потребностям. Минимальная планка качества при этом -показатели охвата и достижения каждым выпускником минимальных требований образовательного стандарта по обязательным предметам и предметам по выбору.

Например, из 500 выпускников 11 (12) классов школ №ского муниципалитета к итоговой аттестации было допущено 496 выпускников. 490 учащихся успешно сдали два обязательных экзамена (уровень освоения образовательного стандарта среднего (полного) образования составляет 98,79%), из них 420 успешно сдали все экзамены в форме ЕГЭ - и обязательные, и по выбору (уровень освоения образовательного стандарта для получения профессионального образования составляет 84,68%). Это два ключевых показателя, которые требуют постоянного контроля и важны как в абсолютных величинах, так и в динамике по годам.

Второй блок ключевых показателей касается предоставления образовательных услуг профильного уровня. Здесь важны показатели охвата системой образования изучения предметов на профильном уровне. Например, в муниципалитете г. №ска было организовано изучение ряда предметов на профильном уровне, и каждый из 500 выпускников 11 классов имел возможность выстроить свою образовательную траекторию. Муниципальная сеть с учётом имеющихся в её распоряжении кадровых и других ресурсов максимально подстраивалась под запросы учащихся старших классов и их родителей. В течение двух лет на изучение этих предметов были выделены дополнительные учебные часы, организовано сетевое взаимодействие школ муниципалитета, задействованы другие ресурсы сети. Поэтому по результатам ЕГЭ важно оценить эффективность вложенных ресурсов. Такая оценка возможна на основе данных таблицы.

Данные, приведенные в таблице, позволяют сделать вывод, что наиболее массово профильной подготовкой по муниципалитету были охвачены русский язык, математика и обществознание. Результаты же ЕГЭ показали недостаточный охват профильной подготовкой обществознания и биологии, несоответствие между теми, кто готовился, и теми, кто вышел на экзамен, - по информатике и по химии, низкую востребованность профильной подготовки по английскому языку и наиболее высокую корреляцию между программой подготовки и выбором выпускников - по физике. Наиболее высокое качество профильной подготовки учащиеся продемонстрировали по русскому языку, обществознанию, биологии и физике. Итоговые показатели приводят предметные результаты к единице получателя бюджетной услуги - выпускнику. Так, из данных вышеприведённой таблицы следует, что охват профильным образованием составил 87,6% выпускников города, профильная подготовка в старших классах и последующий выбор предметов для сдачи ЕГЭ совпали у 65,2% выпускников, а высокое качество показали 11,6% выпускников.

Для оценки муниципальных образовательных систем важно распределение высоких и низких результатов между школами. Это позволяет не только оценить равенство доступа к образованию соответствующего качества, но и выявить среди школ муниципалитета группу школ риска и организовать целенаправленную работу.

Заключение

Результаты ЕГЭ как формы основной итоговой аттестации выпускников 11 классов могут быть базой для управления качеством образования только при корректной и адресной их интерпретации, которая складывается из следующих ключевых позиций.

Качество профильной подготовки выпускников 11 классов образовательных учреждений города ^ска по результатам ЕГЭ-2012

Охват профильной подготовкой -число выпускников, изучавших предмет на профильном уровне Соответствие профиля и выбора учащимися экзамена в форме ЕГЭ - число выпускников, выбравших предмет для сдачи в форме ЕГЭ Число выпускников, сдавших экзамен с результатом не ниже профильного уровня (ПБ2)

из числа изучавших на профильном уровне из числа не изучавших предмет на профильном уровне

чел % от общего числа выпускников чел % от числа выпускников, изучавших предмет на профильном уровне чел чел % от числа выпускников, изучавших предмет на профильном уровне и сдававших в форме ЕГЭ

английский язык 80 16,0 12 15,0 1 2 16,7%

русский язык 258 51,6 258 обязательный экзамен 210 81,4%

общест- вознание 150 30,0 145 96,7 55 100 70,0%

история 23 4,6 12 37,5 - 2 16,7%

биология 54 10,8 52 96,3 16 22 42,3%

химия 19 3,8 3 15,8 8 0 0,0%

физика 48 9,6 45 93,8 5 12 26,7%

информа- тика 48 9,6 24 50 30 5 20,8%

математи- ка 325 65,0 325 обязательный экзамен 52 16,0%

Итого Доля выпускников, изучавших один или несколько предметов на профильном уровне - 87,6% Доля выпускников, сдававших экзамены в форме ЕГЭ только из числа предметов, изучавшихся на профильном уровне - 65,2% Доля выпускников, показавших результат не ниже профильного порога по всем предметам из числа изучавшихся ими на профильном уровне - 11,6%

Анализ и интерпретация результатов ЕГЭ определяется, с одной стороны, запросами группы потенциальных пользователей, с другой - доступными источниками данных. Запросы на аналитические материалы по результатам оценочной процедуры разные и зависят от точки принятия управленческих решений, то есть понимание результата оценочной процедуры на каждом уровне управления и под каждый запрос должно быть различно.

Чтобы результаты анализа оказались адресными, необходимо максимально точное понимание того, на какие именно вопросы хотят получить ответы представители данной группы пользователей и каковы критерии качества объекта оценки.

Для каждой группы пользователей необходимо применять особую модель анализа и интерпретации результатов оценочной процедуры и свою систему ключевых показателей. Показатели должны отражать состояние того участка и в таком ракурсе, в котором работает управленец, так как, ориентируясь на эти показатели, он не только выстраивает свою деятельность, но и использует все имеющиеся в его распоряжении ресурсы.

Ошибки в использовании результатов оценочной процедуры связаны, прежде всего, с отсутствием соответствующих рекомендаций (в том числе отсутствием ограничений на использование отдельных показателей, чётко определенных границ возможного их применения и т.д.), которые должны были быть подготовлены ещё в период апробации инструментария.

Список литературы:

1. Модель анализа и интерпретации результатов ЕГЭ и ГИА на региональном уровне: опыт Чувашской Республики // Тенденции развития образования: Проблемы управления и оценки качества образования: Материалы восьмой международной научно-практической конференции Центра изучения образовательной политики : сб. ст. - М.: РАНХиГС, ИД «Дело», 2012. - 466 с.

2. Управление качеством образования на основе результатов независимого оценивания учащихся 9-х и 11-х классов : в 2 ч. / О. Ф. Батрова, В. И. Блинов, С. А. Боченков [и др.]. - М.: Аспект Пресс, 2007.

3. Болотов, В. А. Условия использования результатов оценки учебных достижений школьников [Электронный ресурс] / В. А. Болотов, И. А. Вальдман // Проблемы современного образования : электрон. журнал. - 2012. - № 4. - Режим доступа: http://www.pmedu.ru, свободный.

4. Российская система оценки качества образования: чему мы научились за 10 лет? / В. А. Болотов, И. А. Вальдман, Г. С. Ковалёва // Тенденции развития образования: проблемы управления и оценки качества образования. Материалы VIII Международной научно-практической конференции. - М.: Университетская книга, 2012. - С. 22-31.

5. Боченков, С. А. Анализ и интерпретация результатов ЕГЭ-2012 [Электронный ресурс] / С. А. Боченков // Управление образованием: теория и практика : электрон. журнал / ФГНУ ИУО РАО. - 2012. - № 3. - С. 9-34. Режим доступа: http:// www.iuorao.ru/2010-01-01-18, свободный.

6. Боченков, С. А. Анализ результатов ЕГЭ-2011 по Чувашской Республике. Сводные таблицы и диаграммы по республике, муниципалитетам, образовательным уч-

реждениям. / С. А. Боченков. - Чебоксары: Чувашек. республик. центр новых образоват. технологий, 2011. - 188 с.

7. Анализ результатов единого государственного экзамена по Ханты-Мансийскому автономному округу - Югре в 2011 году. Вып. 1. - Ханты-Мансийск: Технополис, 2011. - (По результатам ЕГЭ-2011). - 182 с.

Spisok literatury:

1. Model' analiza i interpretatsii rezul'tatov EGE i GIA na regional'nom urovne: opyt Chuvashskoi Respubliki // Tendentsii razvitiia obrazovaniia: Problemy upravleni-ia i otsenki kachestva obrazovaniia: Materialy vos'moi mezhdunarodnoi nauchno-prakticheskoi konferentsii Tsentra izucheniia obrazovatel'noi politiki : sb. st. -M.: RANKhiGS, ID «Delo», 2012. - 466 s.

2. Upravlenie kachestvom obrazovaniia na osnove rezul'tatov nezavisimogo otseniva-niia uchashchikhsia 9-kh i 11-kh klassov : v 2 ch. / O. F. Batrova, V. I. Blinov, S. A. Bo-chenkov [i dr.]. - M.: Aspekt Press, 2007.

3. Bolotov, V. A. Usloviia ispol'zovaniia rezul'tatov otsenki uchebnykh dostizhenii shkol'nikov [Elektronnyi resurs] / V. A. Bolotov, I. A. Val'dman // Problemy sovre-mennogo obrazovaniia : elektron. zhurnal. - 2012. - № 4. - Rezhim dostupa: http:// www.pmedu.ru, svobodnyi.

4. Rossiiskaia sistema otsenki kachestva obrazovaniia: chemu my nauchilis' za 10 let? / V. A. Bolotov, I. A. Val'dman, G. S. Kovaleva // Tendentsii razvitiia obrazovaniia: prob -lemy upravleniia i otsenki kachestva obrazovaniia. Materialy VIII Mezhdunarodnoi nauchno-prakticheskoi konferentsii. - M.: Universitetskaia kniga, 2012. - S. 22-31.

5. Bochenkov, S. A. Analiz i interpretatsiia rezul'tatov EGE-2012 [Elektronnyi resurs] /

S. A. Bochenkov // Upravlenie obrazovaniem: teoriia i praktika : elektron. zhur-nal / FGNU IUO RAO. - 2012. - № 3. - S. 9-34. Rezhim dostupa: http://www.iuorao. ru/2010-01-01-18, svobodnyi.

6. Bochenkov, S. A. Analiz rezul'tatov EGE-2011 po Chuvashskoi Respublike. Svodnye tablitsy i diagrammy po respublike, munitsipalitetam, obrazovatel'nym uchrezhde-niiam. / S. A. Bochenkov. - Cheboksary: Chuvashsk. respublik. tsentr novykh obra-zovat. tekhnologii, 2011. - 188 s.

7. Analiz rezul'tatov edinogo gosudarstvennogo ekzamena po Khanty-Mansiiskomu avtonomnomu okrugu - Iugre v 2011 godu. Vyp. 1. - Khanty-Mansiisk: Tekhnopolis, 2011. - (Po rezul'tatam EGE-2011). - 182 s.

Интернет-журнал «Проблемы современного образования» 2013, № 3