CC BY
45О НОВЫХ ЭКЗАМЕНАЦИОННЫХ МОДЕЛЯХ КИМ ОГЭ
Решетникова Оксана Александровна,
кандидат педагогических наук, директор ФГБНУ «Федеральный институт педагогических измерений», e-mail: fipi@fipi.ru
ОСНОВНЫЕ ПОДХОДЫ К РАЗРАБОТКЕ НОВЫХ ЭКЗАМЕНАЦИОННЫХ МОДЕЛЕЙ ОСНОВНОГО ГОСУДАРСТВЕННОГО ЭКЗАМЕНА, ОТВЕЧАЮЩИХ ТРЕБОВАНИЯМ ФГОС. СТРУКТУРА НОВЫХ КОДИФИКАТОРОВ ПРЕДМЕТНЫХ РЕЗУЛЬТАТОВ И ОБЩИЕ НАПРАВЛЕНИЯ ОПЕРАЦИОНАЛИЗАЦИИ ПРЕДМЕТНЫХ РЕЗУЛЬТАТОВ; ТРЕБОВАНИЯ К ОТБОРУ СТРУКТУРЫ И СОДЕРЖАНИЯ ЭКЗАМЕНАЦИОННОЙ РАБОТЫ, ПРИОРИТЕТНЫЕ НАПРАВЛЕНИЯ ДЛЯ РАЗРАБОТКИ НОВЫХ МОДЕЛЕЙ ЗАДАНИЙ.
• государственная итоговая аттестация • основной государственный экзамен • контрольные измерительные материалы • экзаменационная модель • деятельностный подход
Введение Федерального государственного образовательного стандарта основного общего образования включает и переход на новые экзаменационные модели контрольных измерительных материалов основного государственного экзамена (КИМ ОГЭ). Введение ОГЭ на базе экзаменационных моделей, отвечающих требованиям ФГОС ООО, запланировано на 2020 год. Очевидно, что создание экзаменационных моделей, их обсуждение и последующая разработка КИМ ОГЭ занимает очень длительное время. Поэтому в 2018-2019 гг. одним из ведущих направлений научной деятельности ФГБНУ «ФИПИ» становится разработка новых экзаменационных моделей, создание новых моделей заданий и обновлённых банков заданий для формирования КИМ ОГЭ.
В предыдущие годы мы уже знакомили специалистов системы образования с основными концептуальными подходами к разработке контрольных измерительных материалов ОГЭ. в соответствии с требованиями ФГОС, которые были разработаны в рамках соответствующего проекта Федеральной целевой программы развития образования при активном участии всех ведущих специалистов ФИПИ1. В текущем году ФИПИ разрабатывает проекты экзаменационных моделей ОГЭ по 7 учебным предметам: история, обществознание, география, биология,
физика, химия, информатика и ИКТ. В следующем году запланирована разработка модели ещё по 7 предметам: русский язык, математика, литература, английский, немецкий, французский и испанский языки. Каждый проект экзаменационной модели включает кодификатор проверяемых элементов содержания и предметных результатов освоения обучающимися основной образовательной программы основного общего образования, спецификацию и демонстрационный вариант КИМ.
Проекты документов по каждому учебному предмету имеют свои особенности и отражают принятую в предмете систему оценки учебных достижений. Однако разработка новых экзаменационных моделей по всем предметам базируется на единых подходах, определяемых методологией ФГОС.
Как известно, в основе ФГОС лежит сис-темно-деятельностный подход, который распространяется и на систему оценки образовательных результатов. Это означает, что содержанием оценки выступают предметные результаты, выраженные в де-ятельностной форме. Текст ФГОС содержит
требования к пред- _
метным результатам, которые, по сути, являются целевыми установками
1 Решетникова О.А., Демидова М.Ю. Новые подходы к разработке контрольных измерительных материалов. // Народное образование. - 2015. - №9. - С. 91-104.
и отражают те способы действий, на формирование которых направлено обучение предмету. На основе этих требований формируется содержание предметного курса и предметные результаты, т. е. перечень умений и способов действий, которые должны быть достигнуты на данном этапе обучения.
Экзаменационная модель, отвечающая требованиям ФГОС к оценке образовательных результатов, должная быть валидна по отношению к предметным результатам обучения и, соответственно, обеспечивать полноту их проверки. Те предметные результаты и элементы содержания, которые подлежат оценке в рамках экзамена, отражаются в кодификаторе требований к результатам обучения для проведения ОГЭ. В кодификаторах большинства предметов сохраняется два раздела. Первый раздел содержит предметные результаты обучения и опера-ционализированные умения, второй раздел - элементы содержания, проверяемые заданиями КИМ.
Серьёзной научно-методической проработки по каждому предмету требует процесс создания первой части кодификатора. На первом этапе анализируется возможность проверки каждого из предметных результатов в рамках массового письменного контроля, которым и является ГИА. Большинство предметных результатов можно эффективно оценить в рамках массового письменного контроля или устной формы оценки (как это делается при проверке говорения в иностранных языках или в русском языке в процедуре допуска к ГИА). Но есть те результаты, для оценки которых необходимы другие формы.
Например, во всех естественнонаучных предметах есть требование ФГОС к формированию умений планировать и проводить учебное исследование или проектную работу и соответствующие предметные результаты. Проектная и учебно-исследовательская деятельность должны быть ведущими методами обучения в рамках сис-темно-деятельностного подхода. Но полноценная оценка уровня овладения проектной деятельностью возможна только в процессе специально организованного наблюдения за выполнением учащимися конкрет-
ного проектного задания. В рамках письменной экзаменационной работы могут косвенно оцениваться лишь отдельные умения этого предметного результата - например, составление плана проектной работы или интерпретация результатов исследования. Таким образом, в кодификатор включаются те предметные результаты, проверка которых возможна в рамках процедуры экзамена.
Второй этап - это операционализация предметных результатов, которая представляет собой разбиение результата на отдельные умения. Операционализация проводится с учётом специфики предмета и, как правило, двумя способами. Первый способ базируется на выделении структуры деятельности, которая положена в основу предметного результата. Например, если предметный результат - это умение проводить наблюдение, то в этом случае операционализация базируется на структуре этого научного метода познания с учётом его адаптации к учебному познанию и к соответствующей возрастной категории обучающихся. Для предметного результата «Умение проводить наблюдения» это могут быть выделенные отдельные умения формулировать гипотезу наблюдения, составлять план, выбирать оборудование и т. п. Для экзаменационных материалов могут выбираться, например, задания базового уровня, проверяющие лишь одно из перечисленных умений, а могут использоваться комплексные задания, оценивающие сразу всю совокупность перечисленных умений.
Второй способ базируется на выделении в предметном результате разных уровней его освоения. Так, для результата «Объяснять процессы или явления» это могут быть следующие умения: выявлять причинно-следственные связи, необходимые для объяснения; находить верное объяснение процесса в ряду предложенных; находить ошибки в объяснении процесса; самостоятельно строить объяснение из двух-трёх логических шагов и т. п. Здесь в экзаменационную модель могут включаться, например, два задания, проверяющих данный предметный результат, которые позволят оценить разные уровни овладения этим способом действий: на базовом уровне будет проверяться умение находить верное
ДАНИЛОВА Л.Н. ТЕОРЕТИЧЕСКИЕ АСПЕКТЫ РЕАЛИЗАЦИИ РЕФОРМИРОВАНИЯ В ОБЩЕМ ОБРАЗОВАНИИ
ЙМЖ.......У.......ПРА-И.ТИ-Н.А
объяснение, а на повышенном - умение самостоятельно объяснять явления или процессы.
Спецификации новых экзаменационных моделей включают традиционные разделы (назначение КИМ ОГЭ; документы, определяющие содержание КИМ; подходы к выбору структуры и содержания КИМ ОГЭ по предмету; структура КИМ ОГЭ и т. д.), которые наполнены новым содержанием и отражают новые подходы, специфичные для КИМ в соответствии с требованиями ФГОС. Так, в разделе «Подходы к выбору структуры и содержания КИМ ОГЭ» описывается структура экзаменационной работы, исходя из необходимости оценки достижения всех предметных результатов обучения. Как правило, выделяется несколько групп предметных результатов и приводится описание блока заданий, оценивающих данную группу результатов. Например, в спецификации по физике выделены пять групп предметных результатов:
- освоение понятийного аппарата курса физики основной школы;
- овладение методологическими умениями (проводить измерения, исследования и ставить опыты);
- понимание принципов действия технических объектов;
- умение по работе с текстами физического содержания;
- умение решать расчётные задачи и применять полученные знания для объяснения физических процессов.
Эти группы охватывают все предметные результаты, в чём можно убедиться, ознакомившись с кодификатором предметных результатов по физике.
Для каждой группы предметных результатов приведено описание блока заданий, которое показывает валидность предлагаемого блока по отношению к проверке данной группы результатов. Приведём пример. Для второй группы в спецификации по физике сказано: «Овладение методологическими умениями проверяется группой из 5 заданий». Здесь предлагаются как теоретические задания на снятие показаний измерительных приборов, на анализ результатов опытов по их описанию и планирование на-
блюдений и опытов, так и экспериментальное задание с использованием реального оборудования на проведение косвенных измерений, проверка закономерностей или исследований зависимостей физических величин. Блок включает задания, направленные на проверку умений из всех пяти предметных результатов этой группы. Проверка соблюдения правил безопасного труда осуществляется в процессе наблюдения за выполнением обучающимися задания на реальном лабораторном оборудовании.
В разделе «Структура КИМ ОГЭ» наиболее значимым является описание распределения заданий по проверяемым предметным результатам. Здесь число заданий, оценивающих сформированность того или иного предметного результата, пропорционально значимости этого результата в общеобразовательной подготовке обучающихся по предмету. В целом экзаменационная работа проверяет все предметные результаты и, значит, обеспечивает валидность по отношению к требованиям ФГОС.
Несмотря на то что для КИМ ГИА, построенных на деятельностном подходе к оценке учебных достижений, не стоит задача обеспечения валидности по содержанию, наши экзаменационные модели по-прежнему включают задания по всем разделам предметного курса. Задания могут базироваться на содержании всех элементов, включённых во второй раздел нового кодификатора ОГЭ. Распределение заданий по содержательным разделам также отражено в спецификации, в разделе о структуре КИМ. В качестве примера приведём данные из спецификации по биологии:
«Разделы курса биологии, включённые в экзаменационную работу:
- Биология как наука. Методы биологии -7-8 заданий.
- Система, многообразие и эволюция живой природы - 7-8 заданий.
- Организм человека и его здоровье -11-12 заданий».
Важным элементом разработки модели КИМ является распределение заданий по уровням сложности. Целью ОГЭ является не только оценка уровня общеобразователь-
ной подготовки выпускников 9-х классов по предмету в целях их государственной итоговой аттестации, но и использование результатов экзамена при приёме учащихся в классы с углублённым изучением предмета средней школы или учреждения среднего профессионального образования. Поэтому в экзаменационную работу включаются задания разных уровней сложности: базового, повышенного и высокого. Для каждой группы предметных результатов в экзаменационной работе предлагаются задания не менее чем двух уровней сложности.
Для экзаменов по выбору (к их числу относятся все 7 предметов, новые модели КИМ ОГЭ для которых разрабатываются в этом году) задания разного уровня сложности включаются в работу в таком соотношении, чтобы примерно 50 % от максимального балла составляли баллы за задания базового уровня и 50 % от максимального балла составляли баллы за задания повышенного и высокого уровней. В качестве иллюстрации этого положения приведём данные из спецификации по биологии. Здесь при максимальном первичном балле равного 48 за задания базового уровня можно получить 23 балла (48 % от максимального балла), за задания повышенного уровня - 16 баллов (33 %) и высокого уровня - 9 баллов (19 %).
При разработке заданий разного уровня сложности учитывается не только сложность проверяемых умений, но и особенности того содержания, которое необходимо для выполнения заданий. Так, задания базового уровня конструируются на системе наиболее значимых элементов курса и трактуются как обязательные и доступные для выполнения всеми обучающимися. А задания высокого уровня конструируются на базе всех содержательных элементов предметного курса и ориентированы на выполнение наиболее мотивированными обучающимися.
Важнейшим этапом создания экзаменационной работы является разработка новых моделей заданий. Переориентация КИМ на новые стандарты не означает полной замены открытых банков заданий ОГЭ. Существующие в настоящее время модели КИМ ОГЭ ежегодно совершенствуются: добавля-
ются новые группы заданий, постепенно изменяются формы заданий, совершенствуются критерии оценивания заданий с развёрнутым ответом. Кроме того, за последние годы использования банка заданий ОГЭ каждое задание обрело важные статистические характеристики, подтверждающие их качество и надёжность, соответствующие целям экзамена. Поэтому в открытом банке ОГЭ по каждому предмету можно выделить «ядро» качественных заданий, которые оценивают важные для предмета способы действий и вполне отвечают предметным требованиям нового стандарта. Эти группы заданий находят своё место в новых экзаменационных моделях КИМ ОГЭ.
Разработка новых моделей заданий идёт с учётом нескольких приоритетных направлений:
1. Комплексные задания. Эти задания представляют собой, как правило, задания с развёрнутым ответом и позволяют оценивать сформированность целой группы различных умений или одновременно нескольких предметных результатов. При использовании комплексных заданий повышенного и высокого уровней сложности в них выделяются части, верное выполнение которых может быть интерпретировано как достижение предметного результата (или умения) на базовом уровне сложности. Это позволяет повысить диагностическую ценность комплексных заданий.
2. Компетентностно-ориентированные задания. Эти задания базируются на контексте ситуаций «жизненного» характера и имеют большое значение в географии, биологии, физике и химии, где они направлены на оценку основных составляющих естественнонаучной грамотности выпускников основной школы.
3. Задания по решению разнообразных учебно-практических и учебно-познавательных задач. Здесь предполагается введение заданий, содержащих, например, избыточные для решения проблемы данные или, наоборот, предлагающихся с недостающими данными; заданий, предполагающих вариативные пути решения проблемы и т. п.
ЙМЖ.......У.......nPfl-H.TU-H.fl
4. Формы заданий с кратким и развёрнутым ответом. В новых экзаменационных моделях по большинству предметов не будут использоваться задания с выбором одного верного ответа из четырёх предложенных, такие задания будут исключены из банков ОГЭ. В новых экзаменационных моделях существенно расширен блок заданий с развёрнутым ответом. Это означает, что повышается роль региональных предметных комиссий по проверке заданий с развёрнутым ответом и необходимо будет усилить работу по согласованию подходов к оцениванию работ выпускников перед проведением государственной итоговой аттестации по программам основного общего образования.
Для проведения ОГЭ в условиях девяти часовых поясов должно формироваться достаточно большое число вариантов. Поэтому при отборе моделей заданий учитывается возможность создания достаточно большого числа фасетных заданий в открытом банке заданий, откуда происходит формирование вариантов КИМ. Эти задания, как и модель, по которой они сконструированы, проверяют один и тот же предметный результат (умение или группу умений), имеют одинаковую сложность, но разрабатываются на различных элементах содержания или разных контекстах. В процессе использования фасетные задания демонстрируют и близкие статистические характеристики. Такой подход обеспечивает равные возможности для индивидуальной оценки учащихся.
На этапе разработки экзаменационной модели закладываются и подходы к интерпретации результатов экзаменов. Как процедура государственной аттестации ОГЭ направлено на индивидуальную оценку качества учебной подготовки обучающихся, а как процедура отбора в классы разного профиля и в учреждения среднего профессионального образования ОГЭ должно дифференцировать выпускников основной школы, выделяя группу наиболее подготовленных и мотивированных к изучению предмета обучающихся. Исходя из этого, выделяются минимальный тестовый балл, который фиксирует достижение требований ФГОС к предметным результатам обучения
на базовом уровне, и четыре уровня достижения требований ФГОС. Минимальный тестовый балл для ОГЭ соответствует границе «тройки», его достижение означает выполнение заданий базового уровня сложности, проверяющих наиболее значимые предметные результаты с опорой на наиболее важные элементы содержания. Каждый последующий уровень определяется выполнением группы заданий более высокого уровня, направленных на оценку более сложных способов действий, отражённых в предметных результатах.
Оценка качества образования по каждому предмету в образовательной организации или группе образовательных организаций (в муниципалитете, в регионе) может осуществляться при условии участия в экзамене статистически значимой выборки обучающихся.
Новые модели обеспечивают анализ результатов выполнения экзаменационных работ - при фиксируемых показателях предметных результатов и всей выборке участников - по следующим направлениям:
- Достижение предметных результатов обучения. Анализируются результаты выполнения групп заданий, проверяющих каждый предметный результат.
- Характеристика учебных достижений обучающихся с различным уровнем подготовки. Для каждого уровня подготовки выделяются типичные задания, успешность выполнения которых отличает данный уровень от предыдущего. Составляется перечень освоенных умений для каждого из уровней подготовки.
- Динамика достижения предметных результатов. Динамику достижения предметных результатов можно оценить на основании сравнения результатов выполнения одинаковых моделей заданий, использовавшихся в течение нескольких лет.
При условии участия в экзамене статистически значимой выборки обучающихся и сбора дополнительной контекстной информации об условиях обучения на уровне групп образовательных организаций (регионов, муниципалитетов и т. п.) возможен
анализ не только по указанным выше направлением, но и кластеризация образовательных организаций по уровню подготовки обучающихся с учётом особенностей процесса обучения (тип образовательной организации, их местоположение, используемый учебно-методический комплект, квалификация педагогов и т. п.). При наличии соответствующей контекстной информации проводится корреляционный анализ по каждому из пунктов.
Подводя итог, отметим, что в рамках работы над созданием новых экзаменационных моделей определены общие подходы к отбору содержания для проведения ОГЭ, сформулированы подходы к формированию кодификаторов предметных результатов освоения обучающимися основных образовательных программ, описаны объекты контроля, созданы новые модели заданий и проекты новых моделей КИМ по семи предметам. □
