CC BY
61распространение и использование информации по оценке достижений учащихся в чили*
МАРИЯ-ХОСЕ РАМИРЕС
Специалист по образованию Сети развития человеческого потенциала Всемирного банка
E-mail: mramirez2@worldbank.org
Вашингтон, Округ Колумбия, США
АННОТАЦИЯ. Оценка достижений учащихся играет ключевую роль в повышении качества образования. Однако немногие страны распространяют и эффективно используют информацию по оценке достижений учащихся. В данной работе рассматривается чилийский опыт эффективного использования информации по оценке и приводятся уроки для других стран. Основной урок чилийского опыта заключается в том, что эффективное использование информации по оценке представляет собой трудную задачу, решение которой требует времени, сил и средств. Другой урок заключается в том, что выполнение такой задачи требует эффективного руководства, долгосрочного планирования и согласованности действий. Страны, которые смогут извлечь уроки из чилийского опыта, окажутся в лучшем положении, чтобы эффективно использовать свои программы оценивания учащихся и в конечном итоге положительно воздействовать на качество образования и обучения.
КЛЮЧЕВЫЕ СЛОВА: SIMCE, оценка достижений учащихся, качество образования, образование в Чили.
* Материалы статьи впервые опубликованы в: Рамирес, М.-Х. Распространение и использование информации по оценке достижений учащихся в Чили / М.-Х. Рамирес // Системный подход к улучшению результатов образования (SABER) - оценка достижений учащихся. - Вашингтон: Всемирный Банк, 2012. - № 3.
DissEMiNATiNG AND UsiNG sTUDENT assessment ínformatíon iN CHÍLE
MARIA-JOSE RAMIREZ
Education Specialist in the Human Development Network at the World Bank E-mail: mramirez2@worldbank.org Washington, D.C., USA
ABsTRAd. Student assessment plays a key role in improving education. However, many countries do not disseminate and make effective use of their student assessment information. This paper discusses Chile's effective use of its assessment information and draws lessons for other countries. A key lesson from the Chilean experience is that effective use of assessment information is a challenging task that takes time, effort, and resources. Another lesson is that the task requires leadership, long-term planning, and consensus building. Countries able to learn from Chile's lessons will be in a better position to make effective use of their student assessments and, ultimately, to contribute to education quality and learning.
Keywords: SIMCE, student assessment, education quality, education in Chile.
введение
Эффективное использование информации по оценке достижений учащихся остается основной проблемой для развивающихся стран. Страны, которые смогли запустить свои крупномасштабные программы оценки, все еще могут сталкиваться со значительными преградами на пути эффективного распространения и использования информации по оценке достижений учащихся. Например, заинтересованные лица могут иметь отрицательное отношение к оценке; информация может собираться, но не распространяться; или информация может распространяться, но не пониматься или не использоваться заинтересованными лицами. Во всех таких случаях оценка не сможет оказать какого-либо содействия в достижении ее конечной цели — повышения качества обучения и образования. Каким образом страны могут более эффективно использовать информацию по оценке достижений учащихся и чему могут научиться у других стран, имеющих больший опыт в использовании информации по оценке учебных достижений?
Чилийская программа оценки SIMCE предлагает важные уроки другим странам, целью которых является повышение качества использования своей информации по оценке. Программа SIMCE была первой программой оценки национального масштаба в Латинской Америке, которая проводится ежегодно начиная с 1998 года. Программа имеет хорошо развитую организационную инфраструктуру и с 1990 года является обязательной по закону. Программа SIMCE характеризуется всеобъемлющей стратегией распространения, которая преследует следующие цели: информирование лиц, ответственных за политику образования, предоставление педагогической поддержки работникам системы образования и укрепление подотчетности и ответственности школ. Для каждой из этих целей SIMCE располагает одним или несколькими механизмами распространения информации. Каждый из них направлен на то, чтобы донести до конкретной аудитории именно ей предназначенную информацию. Чили систематически использует оценку в качестве источника информации для принятия решений на различных уровнях образовательной системы.
Учебные достижения учащихся в Чили постоянно растут. Программа SIMCE показывает, что с 2000 года происходит повышение уровня среднего балла достижений учащихся, а Международная программа оценки достижений учащихся (PISA) ОЭСР выделила Чили как страну, которая добилась наиболее заметного улучшения показателей в чтении между 2000 и 2009 годами. Доклад МакКинзи (McKinsey) за 2010 год подтвердил за Чили положение «перспективной звезды» ввиду устойчивого роста качества обучения учащихся. Этот рост является в определенной степени следствием правильных решений, принятых на основе информации, полученной из программы оценки SIMCE1.
1 Все данные получены из доклада ОЭСР «Education at a Glance» и программы PISA (http://www. oecd.org/edu/), чилийской национальной программы оценки (www.simce.cl) и от «МакКинзи и компания» (McKinsey & Co.) (2010) .
Извлекая уроки из этого конкретного примера, страны должны иметь представление о той среде, в которой формировался этот опыт. Чили — политически и экономически стабильная страна с доходом выше среднего, перед которой по-прежнему стоит задача снижения уровня бедности и неравенства. Возвращение страны к демократии в 1990 году дало необходимую политическую стабильность для социального и экономического роста. Чили занимает лидирующее положение в Латинской Америке по своему экономическому развитию (валовой национальный продукт на душу населения — 9950 долларов США), экономическому росту (4,1% годового роста на душу населения с 1991 по 2005 гг.) и по «очень высокому» индексу развития человеческого потенциала. За период с 2000 по 2009 годы бедность снижена с 20% до 15%. Однако Чили отстает с распределением благосостояния: коэффициент Джини (52) — худший среди стран ОЭСР2.
Система образования в Чили относительно сильная, если сравнивать с другими латиноамериканскими странами, но все еще слаба по сравнению с более богатыми странами. Начальное образование общедоступно, а среднее широкодоступно (показатель количества учащихся, зачисленных в учебные заведения, равен 96%). Около 3,5 миллионов учащихся обучаются примерно в 9 тысячах школ, большинство из которых (57%) являются частными. Финансирование школ осуществляется на основе национальной ваучерной системы, при которой государство выплачивает фиксированную сумму школе (неважно, частной или государственной) исходя из количества посещающих школу учащихся. Инвестиции в образование находятся на очень высоком уровне, если рассматривать частные и государственные затраты совокупно (7,1% ВВП), но если рассматривать только государственные инвестиции, то их уровень низок (4,2% ВВП). Данные национальных и международных программ оценок показывают, что успеваемость учащихся в Чили медленно повышается. Однако общая успеваемость остается на низком уровне по сравнению с более богатыми странами ОЭСР и очень неравномерно распределяется между социальными классами3.
Данный документ преследует двойную цель. Во-первых, его задача — описать, как в Чили используется информация по оценке достижений учащихся, выделив цели, аудиторию и механизмы распространения информации, а также факторы, которые способствовали использованию этой информации. Во-вторых, его цель — извлечь уроки из чилийского опыта для предоставления информации другим странам, ищущим способы совершенствования своих программ оценивания. Чилийский опыт показывает, что формирование
Все данные получены из Всемирного банка (www.worldbank.org), Программы развития ООН (http://hdr.undp.org/en/statistics), Центрального банка Чили (www.bcentral.cl), министерства социального развития Чили (www.ministeriodesarrollosocial.gob.cl), из доклада «Развитие человеческого потенциала» Программы развития ООН (http://hdr.undp.org/en/) .
3 Все данные получены из отчета ОЭСР «Education at a Glance» и программы PISA (www.oecd.org/ edu), министерства образования Чили (www.mineduc.cl) и чилийской национальной программы оценки (www.simce.cl) .
эффективного использования информации по оценке достижений — очень трудная задача, требующая много времени, сил и средств. Жизнеспособная и устойчивая стратегия распространения должна создаваться постепенно, при этом необходимо обеспечивать условия для использования распространенной информации.
Документ имеет следующую структуру. После вступления идет раздел, в котором приводятся некоторые исторические факты и описывается текущее состояние чилийской программы оценки. В последующих разделах затрагиваются текущие цели и механизмы распространения; анализируются факторы, которые способствовали осуществлению существующей стратегии распространения; также рассматриваются доказательства воздействия оценки. В последнем разделе представлены основные уроки, извлеченные из чилийского опыта.
чилийская программа всеобщей оценки
история
Политические факторы в Чили определили постановку цели, использование и последствия программы оценки. Поэтому важно подчеркнуть эти факторы, для того чтобы понять, как информация по оценке использовалась для повышения качества образования и каким образом наращивалось использование информации за эти годы.
Крупномасштабная программа оценки в Чили была создана во времена диктатуры правого толка, правившей страной с 1973 по 1990 годы. Апробация программы оценки проводилась в 1980-е годы с целью укрепления подотчетности и ответственности школ путем информирования родителей о качестве учебного заведения. Подразумевалось, что родители выбирали бы лучшую школу для своих детей, учитывая результаты школы, вне зависимости от того, частная она или государственная. Таким образом, программа оценки разрабатывалась в качестве информационного механизма в контексте национальной ваучерной системы финансирования образования. В соответствии с такой политикой государство выплачивало субсидии государственным и частным школам в зависимости от количества посещающих школу учащихся. Задачей программы оценки являлось повышение эффективности, которая должна была достигаться, заставляя школы бороться за более высокие результаты экзаменов, выбор родителей и финансирование [11].
Программа оценки также создавалась с целью отслеживания эффективности образовательной политики и обеспечения педагогической поддержки. Эффективность должна была оцениваться с помощью отслеживания количества учащихся, достигающих уровней успеваемости, установленных национальным планом обучения. Педагогическая поддержка осуществлялась распространением педагогических инструкций школьным инспекторам и учителям [10, 11] .
С возвращением к демократии в 1990-е годы приоритеты образования сдвинулись в сторону качества и равенства, и началась грандиозная реформа образования. Был разработан новый учебный план, в котором большее внимание уделялось обучению навыкам более высокого порядка и способности учащихся применять свои знания и умения в реальных жизненных ситуациях. Внедрение нового учебного плана подтолкнуло к пересмотру других компонентов системы школьного образования, включая оценивание. Такой пересмотр включал доработку тестов, чтобы они оценивали достижения учащихся, ожидаемые от них в соответствии с учебным планом. Это также касалось представления результатов учителям в более понятной для них форме. Программа SIMCE начала показывать процентное соотношение учащихся, достигших разных уровней успеваемости, а также дала представление о том, что учащиеся знают и могут сделать на каждом нормативном уровне.
текущее состояние
SIMCE — технически сложная программа оценивания. Основные предметные области включают математику, испанский язык, социальные и естественные науки. За последние годы были добавлены новые направления учебного плана на основе выборки (письмо, английский язык, компьютерные навыки и физическое воспитание). Тестовые задания в основном представлены в виде вопросов с вариантами ответов, но постепенно вводятся задания со свободными ответами и сочинения. Все школы и учащиеся целевых лет обучения (4-е, 8-е и 10-е классы) участвуют в оценке (по переписи). В 2010 году около 500 тысяч учащихся почти из 9 тысяч школ отвечали на вопросы тестов программы SIMCE. Учащиеся, их родители и учителя предоставили дополнительную информацию с помощью анкет (например, о социальном и экономическом положении, возможности обучаться в школе, квалификации учителей). Около 22 500 экзаменационных инспекторов и внешних администраторов участвуют непосредственно в работе на местах, для успешной деятельности которых требуется высокий уровень знаний и умений.
Программа SIMCE соответствует большинству технических норм педагогических оценок, обеспечивая тем самым достоверность и надежность результатов оценки. Тесты составляются, следуя строгой процедуре, при которой обеспечивается точное соответствие тестов содержанию учебного плана. Результаты тестов за несколько лет подряд приводятся таким образом, чтобы обеспечить сопоставимость показателей. Проведение тестов стандартизируется для обеспечения всем учащимся одинаковых условий тестирования. Постепенно создаются условия для учащихся с ограниченными возможностями. Результаты тестов и относящиеся к ним данные широко распространяются среди различных аудиторий и заинтересованных лиц. Программа SIMCE характеризуется высокой степенью достоверности и никогда не имела проблем с крупной утечкой информации.
Программа SIMCE основное внимание уделяет обучению учащихся, и ее данные систематически используются в качестве источника информации для принятия решений. Результаты SIMCE широко освещаются средствами массовой информации, обычно на первых страницах газет или в новостных сюжетах по телевидению. Результаты оценивания постоянно используются для формирования образовательной политики, ее анализа и оценки. По результатам оценки поощряются школы и преподавательский состав. Хотя и в меньшей степени, но школы и учителя также анализируют результаты своих учащихся и принимают соответствующие педагогические решения.
Несмотря на достигнутые результаты, остается необходимость дальнейшей работы над программой SIMCE для приведения ее в соответствие с некоторыми важными нормами по оценке достижений учащихся. Во-первых, программа SIMCE не имеет постоянного механизма отслеживания последствий оценки. А именно, программа не проводит регулярных исследований для проверки того, как результаты тестов понимаются, ценятся и используются педагогами, родителями, политическими деятелями и как эти результаты в конечном счете воздействуют на обучение учащихся. Информация, имеющаяся о последствиях оценки, в основном поступает от эпизодических, специально организованных исследований. Во-вторых, программа SIMCE не публикует полных технических отчетов и не предоставляет каких-либо файлов данных, что могло бы позволить независимым исследователям воспроизводить результаты.
цели и механизмы распространения
В следующем разделе описывается, как в Чили используется информация по оценке для достижения трех основных целей: информирование ответственных за образовательную политику лиц, обеспечение педагогической поддержки и укрепление подотчетности школ.
информирование ответственных за образовательную политику лиц
Основной целью использования информации по оценке является формирование доказательной базы для уровня принятия решений об образовательной политике. Политическое требование улучшения качества образования привело к тому, что важнейшие решения в этой сфере, особенно на уровне министерства образования, все чаще принимаются на основе информации, полученной из оценки. Программа SIMCE используется для отслеживания показателей качества и равенства в образовании, создания и анализа коррекционных программ и выделения ресурсов школам с худ-
шей успеваемостью. Например, данные программы SIMCE используются для отслеживания качества образования на уровне всей страны (рис. 1). Эти данные также использовались для оценивания воздействия программы подотчетности (SNED), рассматриваемой далее в настоящем докладе [6, 17] .
275 270 3 265 ю 260 255
(Г X
(и
и 250
245
240
2005
2006
2007 2008
Годы
271
2009
2010
Национальные результаты
Образцовые результаты
Рисунок 1. Тенденции в изменении среднего балла учащихся по чтению:
SIMCE, 4-й класс.
Показатели качества и равенства используются для информирования политических деятелей и ответственных лиц, принимающих решения в области образования. Наиболее широко используемым показателем для информирования ответственных за образовательную политику лиц (и самым мощным по воздействию в средствах массовой информации) является изменение общенационального среднего балла на протяжении нескольких лет. Пристальное внимание также уделяется изменениям среднего балла в частных и государственных школах, а также в школах со смешанным социально-экономическим контингентом. Влияние образовательной политики на показатели равенства в обучении оценивается в основном по разнице в достижениях учащихся с высоким и низким уровнем дохода семьи.
Информация, полученная от программы SIMCE, распространяется на уровне министерства образования с целью ее гарантированного использования при принятии решений. До публикации результатов программы SIMCE стратегия распространения информации детально обсуждается с министром
и его/ее советниками, чтобы эти лица получили объяснения всех результатов из первых рук. После публикации информации основные результаты предоставляются более широкому кругу сотрудников министерства образования. В качестве механизмов для информирования ответственных за образовательную политику лиц используется национальный доклад программы SIMCE, пресс-релизы, файлы данных и интернет-сайт (таблица 1) .
Таблица 1. стратегия распространения SIMCE: механизмы, цель, аудитория и содержание.
инструкции по оцениванию (с 1988 г.)
цель: Обеспечить педагогическую поддержку. Аудитория: Директор школы, педагогические координаторы и учителя. содержание: (а) Структура оценки и ее отношение к национальному учебному плану. (Ь) Примеры тестовых заданий с анализом содержания и умений, необходимых для правильного ответа на них. Прочее: Распределяется по всем школам до проведения оценки (обычно в середине учебного года). Также доступно по Интернету. Материал высоко ценится учителями
отчеты для школ (с 1988 г.)
цель: Обеспечить педагогическую поддержку. аудитория: Директор школы, педагогические координаторы и учителя. содержание: (а) Средние баллы по оцениваемым предметам и годам обучения на уровне страны, школы и класса. (Ь) Отличие среднего балла школы и среднего балла предыдущей оценки от национального среднего балла и от среднего балла школ из той же социальной группы. (с) Процентное соотношение учащихся по уровню обучения - углубленный, средний, начальный. ^) Примеры тестовых заданий с анализом содержания и умений, необходимых для правильного ответа на них. (е) Практическое руководство по проведению семинаров в школах для анализа результатов оценки и составления плана по повышению успеваемости (см. рис. 2). Прочее: Раздается всем принимавшим участие в оценке школам после публикации результатов оценки (обычно в начале следующего учебного года).
национальный отчет (с 2006 г.)
цель: Информирование ответственных за политику образования лиц. аудитория: Лица и структуры, ответственные за принятие решений, широкая общественность. содержание: (а) Национальные и региональные средние баллы по оцениваемым предметам и годам обучения. (Ь) Процентное соотношение учащихся по уровню обучения - углубленный, средний, начальный. (с) Средний балл успеваемости по социально-экономическим группам, гендерной принадлежности, по частным и государственным школам. ^) Изменения средних баллов на протяжении ряда лет. Прочее: Распределяется в центральные, региональные и периферийные отделы министерства образования, а также лицам, которые могут принимать участие в обсуждении в средствах массовой информации (например, преподаватели университетов).
Приложение к печатным изданиям (с 1995 г.)
цель: Укрепить подотчетность школ. аудитория: Родители, общественность. содержание: (а) Средние баллы школ и средние баллы по оцениваемым предметам и годам обучения. (Ь) Отличие средних баллов школы и средних баллов предыдущей оценки от общенационального среднего балла и средних баллов школ из той же социальной группы. Прочее: Публикуется в центральных и региональных газетах, обычно вместе с рейтингами школ.
отчет перед родителями (с 2005 г.)
цель: Укрепить подотчетность школ и вовлечь родителей в школьный процесс. Аудитория: Родители.
содержание: (a) Средние баллы школы, средние баллы по оцениваемым предметам и году обучения учащихся. (b) Отличие средних баллов школы и средних баллов школ по предметам/году обучения из той же социально-экономической группы. (с) Процентное отношение учащихся с разными уровнями успеваемости. (d) Рекомендации по улучшению успеваемости учащихся (рис. 4). Прочее: Раздается родителям через школы после публикации результатов оценки (обычно в начале года). Данные материалы также доступны по Интернету.
интернет-банк тестовых заданий (с 2007 г.)
цель: Педагогическая поддержка. аудитория: Учителя. содержание: Предлагаются опубликованные тестовые задания по всем предметам и за все оцениваемые годы обучения, включая задания из национальных и международных программ оценок. Прочее: Учителя могут осуществлять поиск тестовых заданий по предмету, по периоду обучения и по типу задания (выбор из вариантов ответа или с ответами в свободной форме).
Пресс-релиз (с 2006 г.)
цель: Информировать ответственных за образовательную политику лиц. аудитория: Журналисты и региональные отделы образования. содержание: Основные результаты в виде презентации PowerPoint. Прочее: Сообщается журналистам после объявления результатов во время пресс-релиза или до объявления результатов, но с обязательством о неразглашении.
файлы данных (с 2005 г.)
цель: Информировать ответственных за образовательную политику лиц, обеспечивать педагогическую поддержку, укреплять подотчетность (зависит от направления исследования). аудитория: Научные работники. содержание: Файлы данных с результатами на уровне школы. Прочее: Файлы данных с результатами учащихся предоставляются по запросу после подтверждения научного проекта и отказа от использования результатов для установления личности учащихся или учителей.
инструмент анализа данных (с 2007 г.)
цель: В зависимости от темы исследования информировать ответственных за образовательную политику лиц, обеспечивать педагогическую поддержку и укрепление подотчетности. аудитория: Научные деятели и лица, ответственные за принятие решений. содержание: Вычисляются средние баллы, разница между средними баллами, процентное отношение учащихся, достигших разных уровней обучения. Вычисляются средние баллы за разные периоды, по каждому году обучения, для частных и государственных школ, по предметам обучения, по гендерному признаку, по социально-экономическому положению и другим признакам. Прочее: Файлы данных с результатами учащихся предоставляются по запросу, после подтверждения научного проекта и отказа от использования результатов для установления личности учащихся или учителей.
Географическая информационная система (с 2010 г.)
цель: Укрепление подотчетности школ. аудитория: Родители. содержание: Карты Google с географическим положением школ и их средними баллами (рис. 5). Прочее: Родители могут сравнивать результаты оценки школ из одного географического района.
интернет-сайт: www.simce.cl (с 2001 г.)
цель: Информировать ответственных за образовательную политику лиц, обеспечивать педагогическую поддержку, укреплять подотчетность школ. аудитория: Общественность. содержание: Все вышеописанные механизмы, а также цели оценки, организационная структура программы SIMCE, техническая документация и перечень публикаций с данными программы оценки SIMCE.
обеспечение педагогической ПОДДЕРЖКИ
Информация по оценке также используется в целях оказания педагогической поддержки школам. Однако ее применение в этих целях вторично по важности, если сравнивать ее использование для информирования лиц, ответственных за формирование образовательной политики. Основными двумя факторами, оказывающими влияние на такое положение вещей, являются слабая культура оценки в школах и публикация результатов оценки, не имеющих большого педагогического значения для учителей.
Существует несколько механизмов, которые позволяют использовать информацию по оценке для педагогической поддержки.
Два наиболее важных из них — это инструкции по оценке и отчеты для школ. В качестве вспомогательных механизмов используются: интернет-банк тестовых заданий, файлы данных программы оценки, инструмент анализа данных и интернет-сайт (таблица 1). Отчет для школ (рис. 2) распространяется по всем участвующим школам и содержит подробную информацию по всем школьным результатам, сравнивая с результатами за предыдущий год, национальным средним показателем и средним показателем школ сучащимися из похожих социальных групп. В отчете приводятся Рисунок 2. Отчет по школе примеры тестовых заданий, распределе- срезультатами для
ние ответов учащихся на вопросы с вари- учителей и директора. антами ответов, примеры ответов в свободной форме, а также критерии начисления баллов. Вопросы и ответы учащихся анализируются на предмет содержания и умений. С 2000 года результаты указывают в виде процентного соотношения учащихся, достигших различных уровней обучения. Это был очень важный шаг, цель которого — придать результатам оценки педагогическое значение. Тем не менее наблюдаются слабые институциональные и стимулирующие факторы для использования результатов программы SIMCE в школе. Министерство образования уделяет пристальное внимание данной проблеме, организовывая симпозиумы и семинары для школ, на которых анализируются их результаты. Инструкции для семинаров предоставляются в отчетах для школ. В 2004-2008 годах по распоряжению министерства образования школы проводили однодневные семинары по программе SIMCE для анализа результатов и планирования повышения качества обучения. Однако такие мероприятия подразумевали отмену занятий для всех учащихся. Сейчас ожидается, что школы будут проводить такие семинары во внеучебные часы без отмены занятий. Для многих школ
Resultados para в
Docentes у Directivos 2010
SIMCE
ч
не имеет практического смысла собирать всех учителей для анализа результатов оценки. Еще одна проблема — это отсутствие отчетности школ перед внешними органами (например, муниципалитетами) по своим планам повышения качества обучения.
Новый закон, утвержденный в 2011 году (но еще не принятый на момент публикации данного документа), должен улучшить институциональные и стимулирующие условия для использования результатов программы SIMCE в школе [9]. Ожидается, что новый закон потребует от школ создания планов повышения качества обучения (на основе результатов SIMCE и прочих показателей) и подотчетности внешним органам за повышение качества образования. По всей видимости, для повышения качества образования недостаточно просто обеспечить школы и учителей полезной информацией по оценке. Для положительного воздействия информации по оценке необходимо также наличие правильно сформированной организационной инфраструктуры и стимулирующих факторов4.
Кроме того, программа SIMCE не всегда информирует педагогические учебные заведения с целью обучения будущих педагогов «оценочной грамотности». Программы по начальной педагогической подготовке и по повышению квалификации недостаточно охватывают тему оценивания. Вследствие чего педагоги имеют слабое представление о том, как анализировать ответы студентов и как использовать такую информацию для повышения качества преподавания.
укрепление отчетности и ответственности школ
Третьим важным аспектом использования информации по оценке является требование отчетности и ответственности школ за успеваемость учащихся. Использование информации достигается комбинированием стратегий, направленных на информирование общественности о результатах, и распределением стимулов (экономических и нематериальных) по школам. Такие стратегии включают: (I) публикацию результатов школ, (II) сообщение информации родителям и (III) программы подотчетности школ. Все приведенные стратегии рассматриваются в нижеследующих параграфах.
ПУБЛИКАцИЯ РЕЗУЛЬТАТОВ ШКОЛ. Публикация результатов школ является обязательной по закону с 1990 года [7, 8, 9]. Однако закон вступил в силу только с 1995 года, когда результаты школ были впервые опубликованы в приложении к газете (с 2011 года результаты школ также доступны в Интернете). Публикуемые материалы включают средние результаты школ, а так-
4 Доказательства в пользу данного утверждения можно обнаружить, сравнивая воздействие оценочной информации на школу с наличием и отсутствием мотивации (см. Муралидхаран and Сандарараман 2010) .
же разницу между средними результатами школ и средними результатами из предыдущей оценки, а также национальным средним баллом, и различия между школами из одной социально-экономической группы5. Публикация школьных результатов имеет широкомасштабное воздействие, причем как с положительными, так и с отрицательными последствиями. Результаты программы SIMCE публикуются на первых страницах газет, и образованию уделяется первостепенное внимание общественности (рис. 3). Отрицательное последствие выражается в том, что информация ведет к стигматизации школ с низкими результатами, в которых обучаются учащиеся из самых неимущих слоев населения. И действительно, около 80% расхождений в средних результатах школ можно спрогнозировать по социально-экономическому положению обучаемого в школах контингента [14] .
COLEGIOS SUBVENCIONADOS COLEGIOS MUNICIPALES
Cotejo Comuna RegMn Ptfe Coteflto Comuna Región
1 Oratorio Don Bosco Santiago RM 3S7 1 Carmela Carvajal de Prat Providencia RM 362
2 Almondale Lomas Concepción VIII 356 1 Instituto Nacional Santiago RM 362
3 Centenario Temuco IX 3S4 3 República de S*u (Ex 0-191) NuiNoa RM 349
4 MXttAfUMOQK Paine RM 3S1 4 Augusto D'Maimar Nui\oa RM 340
4 San Maleo Osorno X 351 4 Nacional de Malpu Мари RM 340
6 kneOro Si ntHlma Trinidad Providencia RM 3S0 6 laviera Carrera Santiago RM 33S
7 El S*va<fc» San Vicente VI 349 6 Jos* Victorino Lastima Prov*denc>a RM 335
8 Ruben Castro Dlumo Vifta del Mar V 347 8 Liceo Zapallar С unco VH 334
9 SalcsünoOomingoSavlo Concepción VIII 346 9 Liceo de Ninas N* 7 Providencia RM 331
9 Andrés Bello-Pampa La Serena (V 346 10 Carmela Silva Donoso Nuftoa RM 328
11 kné A<justJn GOmez Sanfeiip* V 345 11 Liceo de Aplicación Santiago RM 324
12 HF Camilo Henrtquer Qmlpuí V 343 11 Pol Arturo Alessartdrl Palma Providencia RM 324
1 I Iquique 1 342 13 Juan Bautista Contardi Punta Arenas XII 320
14 Gerónimo Rendk La Serena IV 340 14 Amanda Labarca Vitacura RM 319
14 Alcamara de la Cordillera LaFlonda RM 340 15 Municipal Instituto Chacabuco Colina RM 317
16 inswuto Sania Maria CMian VIII 339 16 San Francisco del'Alba Las Condes RM 312
16 Carpe Dtem Castro X 339 16 Int Nacional Barro» Arana Santiago RM 312
16 Rayen Caven Concdn V 339 18 Donald Me Intyre Grtff iths Cabode Hornos XII 311
16 San Joaquín Renca RM 339 19 Lúls Cruz Martfncz Calama II 310
20 Polivalente Camilo Henriquez Ma pu RM 338 20 Ga(varinoRlv*fos Cárdenas Castro X 307
20 San Buenaventura ChHian VIII 338
20 Nocedal La Pintana RM 338
Рисунок 3. Результаты школ, опубликованные в чилийской газете [4].
ПРЕДОСТАВЛЕНИЕ ИНФОРМАЦИИ РОДИТЕЛЯМ. Информирование родителей выполняет две функции: укрепление подотчетности школ и вовлечение родителей в школьный процесс. Программа SIMCE располагает двумя механизмами информирования родителей: отчет перед родителями и географическая информационная система. В отчете перед родителями сообщаются результаты школы (средний балл школы, разница между средними результатами школы и средними результатами предыдущей оценки и разница между школами из одной социально-экономической группы). В отчете также приводятся рекомендации о том, каким образом родители могут помочь своим детям в учебе дома (рис. 4).
5 Школы распределяются на пять социально-экономических групп в зависимости от контингента обучаемых.
Для внедрения отчетов перед родителями использовалась недорогая и жизнеспособная стратегия. Во-первых, комиссия программы SIMCE достигла консенсуса по поводу важности распространения такого отчета. Во-вторых, SIMCE использовала самый низкозатратный механизм — черно-белую листовку, которую можно легко тиражировать и распространять по школам. В-третьих, программа SIMCE распределяла небольшое число распечатанных отчетов по школам с просьбой размножить их и раздать копии родителям. В последующие годы программа SIMCE взяла на себя расходы по обеспечению отчетами всех родителей. Несмотря на то что предоставляемая информация ценится родителями, у них все еще возникают сложности с ее пониманием и использованием [17] .
Рисунок 4. Отчет перед родителями.
Географическая информационная система (карты SIMCE) доступна в Интернете и показывает на картах Google школы с их результатами на всей территории страны. Система была запущена в 2010 году и сразу вызвала серьезную полемику в системе образования. Первоначально географическая информационная система отображала средние результаты школ вместе с отметками зеленого, желтого и красного цветов (наподобие светофора), в зависимости от того, были ли средние результаты школ выше или ниже среднего национального результата. После серьезных дискуссий, дошедших до уровня конгресса, цвета светофора убрали во избежание стигматизации школ с низкими результатами. Пока неизвестно, в каком объеме родители используют географическую информационную систему.
Рисунок 5. Географическая справочная система с результатами школ.
ПРОГРАММЫ ПОДОТЧЕТНОСТИ. В Чили программы подотчетности используются для воздействия на школы и их мотивирования. Национальная система оценки успеваемости (Sistema Nacional de Evaluación de Desempeño — SNED) — первая такого рода программа, утвержденная законом в 1995 году. Данная программа предусматривает денежное поощрение учителям школ, где наблюдается высокая успеваемость. Вторая программа, избирательное субсидирование (Subvención Escolar Preferencial — SEP), утверждена законом в 2008 году. Эта программа предоставляет экономические стимулы и педагогическую поддержку школам, в которых обучаются учащиеся с низким доходом, при условии достижения ими заранее согласованных целей. И наконец, Закон об обеспечении качества от 2011 года (еще не вступил в силу на момент публикации данного документа) установит более строгую нормативную базу, будет отслеживать результаты школ и предусматривать для них профессиональную поддержку. Закон будет также допускать закрытие школ, в которых не наблюдается улучшение качества обучения.
Подотчетность школ обеспечивается с помощью таких специальных механизмов, как приложения к газетам, отчеты для родителей, географическая информационная система и интернет-сайт (таблица 1).
ОТРИЦАТЕЛЬНОЕ ИСПОЛЬЗОВАНИЕ ОЦЕНКИ
Помимо «официального» использования оценки, наблюдается нежелательное отрицательное использование, которое вызывает озабоченность
внутри самой программы оценки. Комиссия программы SIMCE предостерегает от следующих негативных явлений: учителя обучают только предметным областям, которые охвачены программой оценки; учителя злоупотребляют заданиями с вариантами ответов при оценивании в классе; школы направляют средства только на учащихся оцениваемого года обучения; школы исключают из оценки учащихся с низкой успеваемостью; углубляется сегрегация школ по качеству обучения и социально-экономическому уровню (Comisión SIMCE 2003). Степень воздействия отрицательного использования оценки на систему школьного образования в Чили не изучена.
факторы перемен
Несколько внешних факторов задавали тон в разработке стратегии распространения информации об оценках по программе SIMCE. Эти факторы включают: политическую среду, правовой статус, институциональные условия, позицию руководства и международное влияние.
Политические факторы оказывали мощную поддержку развитию программы оценки. Когда в 1990 годы образованию был отдан национальный приоритет, программа SIMCE предоставила очень востребованный и достоверный индикатор качества образования.
Правовое требование на публикацию результатов школ в обязательном порядке привело к важным инновациям в этой сфере. SIMCE начала публиковать результаты школ в газетах и на своем интернет-сайте, что подняло уровень освещения результатов программы SIMCE в средствах массовой информации. Программа SIMCE классифицировала школы по социально-экономическому признаку, что сделало сравнение школ более справедливым.
Важные институциональные условия позволили укрепить стратегию распространения информации программы SIMCE. Во-первых, на программе SIMCE положительно сказалась сильная и стабильная позиция руководства в экспертном сообществе и на уровне лиц, принимающих политические решения. Это руководство играло ключевую роль в установлении долгосрочных целей. Во-вторых, ежегодный бюджет для программы оценки вырос с 2,5 млн. долларов США в 2001 году до 23 млн. долларов США в 20116. Это позволило укрепить рабочие группы, ответственные за оценку, и, что самое важное, создать в 2005 году отдел, специально занимающийся анализом и распространением информации по оценке. Обеспечение стабильным финансированием сыграло основополагающую роль в реализации действующей стратегии распространения информации. В 2010-2011 годах на мероприятия по распространению информации было потрачено около 10% бюджета программы SIMCE.
6 По данным национального бюджета Чили (http://www.dipres.gob.cl) .
Лидирующая роль экспертно-политической комиссии способствовала планированию дальнейшего развития стратегии распространения. Правительство все больше критиковалось из-за того, что затраченные силы и средства не трансформировались в повышение результатов обучения. Это вызывало озабоченность в отношении способности программы SIMCE выявлять изменения успеваемости учащихся. В 2003 году министр образования обратился к вышеупомянутой комиссии с просьбой проанализировать программу оценки. В состав комиссии входили представители от союза учителей, родителей, администраций школ, университетов, научных центров и министерства образования. За пять месяцев комиссия SIMCE выработала порядок стратегического планирования. Комиссия поддержала программу оценки и выработала рекомендации по ее дальнейшему развитию. Рекомендации имели следующее содержание: (I) публиковать отчеты для родителей, (II) сообщать об уровнях успеваемости, (III) сообщать результаты оценки администрациям школ, (IV) повысить участие преподавателей в программе оценки, а также (V) дать учителям больший доступ к информации. Эти рекомендации стали дорожной картой для программы SIMCE в последующие годы [3] .
И, наконец, международное влияние также внесло свой вклад в формирование стратегии распространения информации в рамках программы. За первые десять лет 2000-х годов наблюдалась тенденция в сторону большей прозрачности программы, что привело к публикации информации большего объема и лучшего содержания. Крайне важную роль сыграла публикация баз данных программы SIMCE. Такой шаг привел к увеличению числа научных работников и руководителей, использующих информацию по оцениванию учебных достижений для принятия решений и оценки образовательной политики. Еще одним международным фактором, оказавшим влияние на формирование стратегии распространения информации, было движение в сторону повышения ответственности школ перед обществом. Это способствовало развитию методов стимулирования по результатам оценки SIMCE.
воздействие программы оценки
Внесла ли какой-либо вклад чилийская программа оценки в повышение качества образования за счет улучшения успеваемости учащихся? Несмотря на то что это основной критерий, по которому следует судить об эффективности программы оценки, ответить на этот вопрос весьма сложно. Программа оценки функционирует в сочетании с другими мероприятиями образовательной политики, поэтому невозможно оценить исключительный вклад каждой программы в улучшение образования. Их эффективность зависит не только от присущего им качества, но и от других внешних факторов, в том числе от способности учителей анализировать результаты, ставить учебные цели и учить своих учащихся так, чтобы достичь этих целей.
Несмотря на эти ограничения, имеются доказательства того, что в улучшении качества обучения учащихся есть доля программы SIMCE. Рост успеваемости чилийских учащихся за последнее десятилетие отмечен программами оценивания SIMCE и PISA. В некоторой степени эти достижения можно отнести на счет устойчивой и эффективной образовательной политики. Учитывая, что основанием для этой политики явилась информация, полученная непосредственно из программы SIMCE, можно утверждать, что SIMCE косвенно воздействовала на успеваемость учащихся. Эти доводы подтверждаются тем, что программа SIMCE высоко ценится министрами образования и другими лицами, формирующими политику образования. Эти доводы также подтверждаются в докладе МакКинзи (2010 г.), где говорится о том, что большинство усовершенствованных систем школьного образования (включая чилийскую систему) систематически использовали информацию по оценке достижений учащихся для информирования структур, ответственных за образовательную политику.
Тем не менее похоже, что на уровне школы информация программы SIMCE используется в недостаточной степени. Хотя педагоги и ценят информацию программы SIMCE, у них возникают трудности с ее пониманием и использованием в педагогических целях [19]. Тем не менее школы докладывают, что важные решения принимаются на основе результатов оценки, включая решения по внедрению корректировочных курсов; при этом преподавание сосредоточено на темах, охваченных программой SIMCE, а в классы, оцениваемые программой SIMCE, назначаются лучшие учителя.
Что касается использования SIMCE в целях обеспечения подотчетности школ перед обществом, то родители, по-видимому, не пользуются информацией по оценке, чтобы «присмотреть школу». Хотя родители и заявляют о том, что выбирают школу исходя из качества обучения, большинство из них не использует результаты SIMCE в качестве источника информации для принятия своих решений. При выборе школы демографическая ситуация в школе имеет больший вес, чем информация программы SIMCE. В этом есть определенный смысл, учитывая те трудности, с которыми сталкиваются родители, чтобы получить и понять результаты SIMCE [5, 19]. Пока неизвестно, в какой степени информация программы SIMCE способствует вовлечению родителей в работу школы.
На сегодня лишь старейшая программа подотчетности SNED оценивалась на предмет ее воздействия. Исследования показывают, что программа SNED имеет хоть и не большое, но значимое воздействие на успеваемость учащихся со среднеквадратической ошибкой от 0,1 до 0,2, но не имеет никакого воздействия на такие показатели спроса, как прирост численности учащихся. Тем не менее SNED оказывается весьма недорогой программой, если сравнивать ее с другими реформами [1, 6, 13, 17]. Неизвестно, проводились ли какие-либо исследования по поводу воздействия программы SNED на мотивацию учителей и педагогическую практику.
извлеченные уроки
Страны, преследующие цель усилить свои национальные крупномасштабные программы оценки, могут извлечь важные уроки из этого конкретного опыта. Чили систематически пользуется данными программы оценки для информирования ответственных за образовательную политику лиц, распределения стимулов по школам и обеспечения педагогической поддержки. В докладе МакКинзи (2010 г.) указывается на систематическое использование информации по оценке в качестве основного аспекта улучшения качества систем школьного образования, включая систему в Чили.
Несколько факторов задавали тон систематическому использованию информации по оценке в Чили. Вероятно, самыми важными факторами являлись политическое давление, оказываемое с целью улучшения образования, и необходимость иметь истинные, беспристрастные и убедительные показатели качества. Правовая поддержка оценки способствовала укреплению стратегии распространения, включая публикацию результатов школ. Комиссия программы SIMCE выработала согласие в отношении целей и механизмов оценки и способствовала обеспечению учителей и родителей информацией лучшего качества. И, наконец, вливание в программу оценки дополнительных средств являлось необходимым условием улучшения стратегии SIMCE.
Страны, ищущие пути улучшения своих оценочных систем, могут извлечь важные уроки из чилийского опыта использования информации по оценке. Эти уроки разделены на две группы: к одной группе относятся те уроки, где рассматривается стратегия распространения, а к другой те, где рассматриваются условия использования информации по оценке.
уроки по стратегии распространения
наличие ясного Представления. Странам необходимо четко представлять, что такое оценка. Для этого требуется прийти к согласию о целях оценки, о том, какую целевую аудиторию необходимо охватить, какую мысль донести и какие методы использования развивать. Эксперты в области образования и лица, ответственные за образовательную политику, должны совместно сформировать такое представление. В Чили такое представление начало формироваться прежде всего на уровне высшего руководства министерства образования. Дальнейшее уточнение возникло в результате консенсуса на уровне комиссии программы SIMCE. Доклад, подготовленный комиссией, стал дорожной картой для стратегического развития программы оценки.
выработка консенсуса. Для программы оценки важно обеспечить политическую жизнеспособность. Заинтересованным лицам необходимо прийти к согласованному видению программы оценки, а именно: они должны достигнуть консенсуса в отношении задач, аудитории и использования информации. В Чили такой консенсус был достигнут с помощью экспертнополитической комиссии высокого уровня, в которой были представлены все заинтересованные стороны. Благодаря стратегическому планированию комиссия и ее доклад позволили усилить легитимность оценки, определить стратегические цели и расставить их приоритеты. Комиссия согласилась с важностью усиления мероприятий по предоставлению информации родителям и администрациям школ.
усиление стратегии распространения. Стратегия распространения должна стать «главной скрипкой», задающей тон всем мероприятиям по оценке. Начинать необходимо всегда с вопроса, какую информацию мы хотим выдать. И, исходя из ответа на данный вопрос, должны приниматься решения в отношении того, что оценивать, кого оценивать и как оценивать. Необходимо планировать все мероприятия по оценке так, чтобы распространять только требуемую информацию, не больше и не меньше. Стратегия распространения должна четко определять цели и ожидаемое использование информации по оценке, целевую аудиторию и механизм распространения.
Страны обычно совершают ошибку, собирая гораздо больше данных, чем они могут сообщить их потенциальным потребителям. Чили не стала исключением. На протяжении нескольких лет в Чили с помощью анкет собиралась информация о социально-экономическом положении учащихся, которая никогда не была опубликована. Это было дорого и неэффективно. Другой общей ошибкой является то, что у стран заканчиваются деньги до публикации результатов. В Чили этого не случилось благодаря правильному планированию.
ПостЕПЕнноЕ внесение изменений. Странам не следует пытаться за пару лет разработать стратегию, на которую у других стран ушли десятилетия. На реализацию всеобъемлющей стратегии распространения уходят годы и даже десятилетия. Стратегия распространения должна реализовываться постепенно, от простого к сложному, и строиться таким образом, чтобы первые этапы служили фундаментом для последующих. Постепенность должна идти рука об руку с возможностями органа по оценке внедрять изменения. Постепенность должна также идти рука об руку с возможностями страны по «перевариванию» информации по оценке.
Сегодня, когда Чили обладает всеобъемлющей стратегией распространения, важно отметить, что на начальном этапе эта стратегия включала только отчеты для школ и методические руководства по оценке для учителей. Новые механизмы распространения вводились постепенно. Эти изменения реагировали на новые политические приоритеты (например, вовлечение родителей), технологические перемены (Интернет) и другие факторы. Они
также реагировали на изменения в методике оценки. Например, в 1980-х годах программа SIMCE сообщала только процент правильных ответов; в конце 1990-х она стала предоставлять сопоставимые результаты, используя шкалу математической теории педагогических измерений (ЖТ); в 2000-х годах в отчеты добавили процентное соотношение учащихся, достигших разных уровней обучения.
обеспечение жизнеспособности изменений. Следует предостеречь страны от запуска отчетных мероприятий, не обладающих долгосрочной устойчивостью в перспективе. Также следует предостеречь от проведения экспериментов с разными видами отчетности при каждом новом цикле оценки. Такие действия приводят к разочарованию и неразберихе. После публикации отчета заинтересованные лица рассчитывают на его регулярный выход. До внесения каких-либо изменений в стратегию распространения отдел по оцениванию должен убедиться, что эти изменения будут жизнеспособны в долгосрочной перспективе. Часто это ведет к поиску более простого и экономичного решения. В качестве хорошего примера жизнеспособного изменения в Чили можно привести внедрение отчета перед родителями, подготовленного в рамках программы SIMCE. Он представляет собой одностраничную черно-белую листовку, которую можно легко размножить с помощью копировального аппарата.
двигаться от низких ставок к высоким. При запуске новой оценочной программы очень важно обеспечить ее легитимность. Для этого требуется, чтобы заинтересованные лица, особенно педагоги, воспринимали результаты оценки как достоверные, справедливые и полезные для повышения качества образования. Если педагоги воспринимают результаты как угрозу или они не доверяют результатам, то такая оценка будет бесполезной для улучшения качества. Привязка последствий к программе оценки при ее первом запуске не скажется положительно на формировании доверия. Вначале заинтересованные лица должны узнать программу в «безопасном режиме», не отягощенном стимулирующими факторами. Более подходящее время для внедрения стимулов наступает после признания программы в качестве важной части системы школьного образования. После внедрения стимулов их следует сбалансировать с другими аспектами использования информации (например, оценочный компонент без последствий для школы) .
В Чили программа SIMCE постепенно привязывала последствия к результатам оценки. В 1980-х результаты сообщались только школам без последствий для них. В середине 1990-х годов результаты школ начали публиковаться, а в конце 1990-х и в начале 2000-х годов вводились программы подотчетности с более ощутимыми последствиями для учителей и школ.
внедрение всеобъемлющих Программ Подотчетности. Качество учителя и качество школы — понятия сложные, которые невозможно полностью охватить одним показателем. Если бы программа подотчетности полагалась только на результаты оценки учащихся, то были бы упущены дру-
гие важные аспекты качества при распределении стимулов. Это бы привело к восприятию программы подотчетности как несправедливой и недостаточно правомерной. Таким образом, странам, ищущим способы распределения стимулов школам, не следует полагаться только на один показатель (например, средний экзаменационный балл). Предпочтительно использовать несколько индикаторов для охвата различных аспектов качества (например, процент отсева, прирост результатов, выполнение годовых задач) .
В Чили различные программы подотчетности вводятся постепенно. И во всех результаты учащихся являются основным индикатором. Прочие индикаторы включают: частоту повторения в школе, школьную политику и административную часть.
опыт создания условий для использования информации по оценке
создание культуры оценки. Это означает наличие грамотного в вопросах оценки персонала, где учителя могут оценивать, понимать и использовать информацию по оценке для улучшения качества образования. Если у учителей есть какие-либо предубеждения по отношению к программе оценивания, то они ее проигнорируют. Если у них возникают сложности с пониманием результатов оценки, то они никогда не будут использовать эту информацию для улучшения педагогического процесса.
Программа оценивания должна приложить все усилия к тому, чтобы обеспечить учителям возможность узнать об оценивании. Это можно сделать несколькими способами. Во-первых, привлечь учителей к некоторым мероприятиям по оценке. Во-вторых, вовлечь педагогов в процесс, например, обеспечить учителей материалами тестов для оценивания своих учащихся, обеспечить критериями оценивания и инструкциями для анализа и использования результатов оценки. И последнее, наладить мосты между программой оценки учебных достижений, с одной стороны, и программами педагогического образования и профессионального повышения квалификации учителей — с другой.
Даже по истечении двух десятилетий работы программы оценки результатов в чилийских школах все еще низкая культура оценивания и еще слишком много несведущих в вопросах оценивания учителей. Отчасти это объясняется тем, что ограничены возможности учителей в ознакомлении с программой SIMCE. Страны, вставшие на путь развития своих программ оценки, должны попытаться избежать этого недостатка.
создание надлежащих институциональных Условий. Распространение информации по оценке — условие необходимое, но недостаточное, чтобы этой информацией пользовались. Для этого должны быть созданы надлежащие институциональные условия. Чили постепенно внедряет
условия, обеспечивающие школам возможность использования результатов оценки. Например, школы организовывают встречи с родителями для вручения и обсуждения опубликованных для родителей отчетов, а также проводят семинары по анализу результатов SIMCE. Кроме того, школы получают денежную мотивацию по результатам их оценивания. Страны, намеревающиеся обеспечить эффективное использование информации по оценке, должны включить в свои планы создание этих или иных условий.
обеспечить, чтобы результаты оценки ценили и считали справедливыми, достоверными и полезными. Конечная цель оценки — содействие повышению качества образования. Для успешного достижения этой цели необходимо, чтобы заинтересованные лица ценили программу и воспринимали полученные с ее помощью данные как справедливые, достоверные и полезные. Вероятность того, что результаты будут считаться справедливыми, выше в том случае, если признается социальноэкономическое положение учащихся, обучаемых в школе. Результаты будут, скорее всего, восприниматься как достоверные, если учителя смогут увидеть связь между учебным планом и оценкой. Более вероятно, что результаты будут восприниматься как полезные, если учителя смогут понимать эти результаты, анализировать ответы учащихся и планировать преподавание соответствующим образом.
В Чили в 2010 году справедливость результатов оказалась под вопросом, когда в школах ввели цветовую индикацию наподобие светофора. Цветовая индикация сильно критиковалась, так как она не учитывала разного социально-экономического положения учащихся. Такое положение вещей считалось несправедливым, так как социально-экономическое положение являлось мощным прогнозирующим фактором результатов школы (например, бедные школы получали красный свет светофора, а более богатые — зеленый). После серьезных споров программа SIMCE избавилась от цветовой индикации светофора.
Для придания достоверности программе оценивания SIMCE с 1980-х годов начала публиковать инструкции по оценке. В этих инструкциях была дана основа оценивания тестов, объяснялась связь между этой основой и учебным планом.
Что касается полезности оценки, то Чили еще требуется усилить работу в этом направлении. Несмотря на то что учителя ценят информацию программы SIMCE, у них возникают трудности с ее пониманием и использованием. Для решения этой проблемы SIMCE организовывает семинары по обучению учителей анализу оценки результатов.
отслеживание последствий оценки. Нельзя ограничиваться лишь распространением информации; для программы оценивания необходимо, чтобы информация обязательно использовалась соответствующим образом и исключалось ее отрицательное использование. Ежегодные собеседования и опросы играют важную роль, чтобы удостовериться в том, что заинтересо-
ванные стороны получают информацию, ценят, понимают и используют ее. Но в структуре программы SIMCE пока отсутствует систематическое включение этого компонента.
Странам, ищущим пути улучшения распространения, использования и воздействия своих программ оценок, следует критически проанализировать приведенные выше уроки. Их полезность зависит от способности страны выбрать уроки и переработать этот опыт в соответствии со своей культурой, уровнем развития своей программы оценки, наличием ресурсов и с учетом других факторов. В конечном счете вклад, который программа может внести в повышение качества обучения, будет зависеть от эффективности стратегии распространения полученных результатов.
список литературы
1) Effects of Short-Term Tutoring on Cognitive and Non-Cognitive Skills: Evidence from a Randomized Evaluation in Chile: unpublished manuscript / V. Cabezas, J. I. Cuesta, F. Gallego; Instituto de Economía; P. Universidad Católica de Chile, 2011.
2) clarke, M. What Matters Most for Student Assessment Systems: A Framework Paper: SABER-Student Assessment Working Paper № 1 // OKR: Open knowledge repository [Электронный ресурс] / World Bank, 2012.— Режим доступа: https://openknowledge.worldbank.org/bitstream/handle/10986/1747l/682350 WP00PUBL0WP10READ0web04019012.pdf?sequence=1.
3) Comisión para el Desarrollo y Uso del Sistema de Medición de la Calidad de la Educación (Comisión SIMCE) // Evaluación de Aprendizajes para una Educación de Calidad. — Santiago, Chile: Ministerio de Educación, 2003.
4) School Results // La Tercera. — 2011. — 7 april. — P. 11.
5) 2006. School Choice in Chile: Is it Class or the Classroom? / G. Elacqua, M. Schneider, J. Buckley // Journal of Policy Analysis and Management. — 2006. — 25 (3).— P. 577-601.
6) Gallego, F. Efectos del SNED en resultados del proceso educativo: unpublished manuscript / F. Gallego; Instituto de Economía; P. Universidad Católica de Chile, 2008.
7) Orgánica Constitucional de Enseñanza = [Закон об образовании в Чили]: Ley № 18.962, 1990 // Biblioteca del Congreso Nacional de Chile [Электронный ресурс]. — Режим доступа: http://www.leychile.cl/Navegar?idNorma=247551&idV ersion=.
8) General Law of Education: Ley № 20.370, 2009 // Biblioteca del Congreso Nacional de Chile [Электронный ресурс].— Режим доступа: http:// www.mineduc.cl/usuarios/convivencia_escolar/doc/201103050142570. Ley_N_20370_Ley_General_de_Educacion.pdf.
9) Quality Assurance Law (Sistema Nacional de Aseguramiento de la Calidad de
la Educación Parvularia, Básica y Media y su fiscalización): Ley № 20.529, 2011 // Biblioteca del Congreso Nacional de Chile [Электронный ресурс]. — Режим доступа: http://www.cned.cl/public/secciones/seccionsnac/normativa/LEY-
20529_27-AGO-2011.pdf.
10) Himmel, Е. National Assessment in Chile / E. Himmel // National Assessments: Testing the System / P. Murphy, V. Greaney, M. Lockheed, C. Rojas. — Washington, DC: World Bank, 1996. — P. 111-128.
11) Majluf, N. The National Assessment of Education in Chile. Operational Research / N. Majluf; Dept. Ingeniería de Sistemas, Escuela de Ingeniería, Pontificia Univ. Católica de Chile. — Santiago, 1987.
12) Mourshed, M. How the World's Most Improved School Systems Keep Getting
Better / M. Mourshed // McKinsey & Company [Электронный ресурс] . — 2010. — November. — Режим доступа: http://www.mckinsey.com/client_service/social_ sector/latest_thinking/worlds_most_improved_schools.
13) Mizala, A. School Markets: The Impact of Information Approximating Schools' Effectiveness: working paper 13676 / A. Mizala, M. Urquiola; National Bureau of Economic Research. — Cambridge, MA, 2007 // site of Columbia University [Электронный ресурс].— Режим доступа: http://www.columbia.edu/~msu2101/ MizalaUrquiola (2007).pdf.
14) Socioeconomic Status or Noise? Tradeoffs in the Generation of School Quality Information / A. Mizala, P. Romaguera, M. Urqueola // Journal of Development Economics. — 2007. — 84. — P. 61-75.
15) The Impact of Diagnostic Feedback to Teachers on Student Learning: Experimental Evidence from India / K. Muralidharan, V. Sundararaman // The Economic Journal. — 2010. — Vol. 120, Issue 546. — P. F187-F203.
16) Organisation for Economic Co-operation and Development (OECD) n.d. Education at a Glance. Paris: OECD.
17) Tournaments, Gift Exchanges and the Effect of Monetary Incentive for Teachers: The Case of Chile: unpublished manuscript, 2008 / T. Rau, D. Contreras; Departamento de Economía, Universidad de Chile.
18) Sistema de Medición de la Calidad de la Educación (SIMCE). National Report, 2010 // Agencia de Calidad de la Educación [Электронный ресурс]. — Режим доступа: http://www.agenciaeducacion.cl/simce/que-es-el-simce.
19) Evaluating School and Parent Reports of the National Student Achievement Testing System (SIMCE) in Chile: Access, Comprehension, Use / S. Taut, F. Cortes, C. Sebastian, D. Preiss // Evaluation and Program Planning. — 2009.— 32.— P. 129-137.
20) United Nations Development Program (UNDP). Human Development Report [Электронный ресурс]: [сайт Программы развития ООН]. — Режим доступа: http://hdr.undp.org/en/.
21) El Banco Central de Chile = Центральный банк Чили [Электронный ресурс]: сайт. — Режим доступа: www.bcentral.cl.
22) Ministerio de Desarrollo Social = Министерство социального развития Чили [Электронный ресурс]: сайт. — Режим доступа: www.ministeriodesarrollosocial. gob.cl.
23) PISA: Международная программа по оценке образовательных достижений учащихся // OECD [Электронный ресурс]. — Режим доступа: http://www. pisa.oecd.org.
24) SIMCE: Чилийская национальная программа оценки // Agencia de Calidad de la Educación [Электронный ресурс]. — Режим доступа: www.simce.cl.
25) Всемирный банк [Электронный ресурс]: сайт. — Режим доступа: www. worldbank.org.
