CC BY
44
УДК: 372.881.111.1
Е. В. Заруцкая E. V. Zarutskaya
Объекты тестирования и параметры оценивания
устного профессионально ориентированного общения студентов управленческих специальностей на иностранном (английском) языке
Objectives and criteria for oral communication assessment in second language testing of management students
В статье рассматриваются объекты тестирования устного профессионально ориентированного общения студентов управленческих специальностей в рамках языковой, предметной и прагматической компетенций. Далее в работе описываются особенности владения устной речью на уровне B2, уточняются параметры ее оценивания на данном уровне.
The article focuses on the objectives for oral communication assessment in second language testing of management students in terms of linguistic, specific and pragmatic competencies. Then it presents analytical descriptors of spoken language (level B2) and specifies criteria used for speaking assessment on that level.
Ключевые слова: устное тестирование, объекты тестирования, профессионально ориентированное общение, параметры оценивания, студенты управленческих специальностей.
Key words: second language testing, oral communication, assessment, assessment criteria, management students.
Устное тестирование - это процедура проверки устно-речевой коммуникативной компетенции, в которой умения говорения оцениваются на основе устного высказывания испытуемого [8]. При определении объектов устного тестирования тестологи сталкиваются с рядом объективных трудностей. Во-первых, контроль навыков и умений общения строится на возможности получения более или менее сопоставимых между собой отрывков речи студентов. Однако устная речь - индивидуальна, вариативна (особенно на продвинутых этапах обучения), ее трудно рассматривать в каких-то определенных рамках. Следовательно, не всегда все навыки и умения устной речи, которые планируется проверить в тестовом задании, действительно могут быть продемонстрированы студентом в ходе
w n w
решения им речевой задачи. В этом отношении индивидуальный формат устного тестирования (1 испытуемый - 1 экзаменатор-собеседник) имеет то преимущество перед парным форматом (2 ис-
пытуемых - 1 экзаменатор-собеседник), что экзаменатор, в определенной степени управляющий речевым взаимодействием, может «подтолкнуть» студента к употреблению того или иного языкового материала. Во-вторых, необходимо отметить, что при определении объектов устного тестирования в один тест невозможно включить весь арсенал компонентов и субкомпонентов коммуникативной компетенции, подлежащих проверке. Ограничения связаны как с временными возможностями проведения теста, так и с возможностями рейтеров. Относительно последнего отметим, что даже опытные рейтеры не в состоянии оценить сразу много показателей, поэтому необходимо выделять минимально необходимое количество компонентов и субкомпонентов, подлежащих измерению [8, с.59].
Ограничим объекты устного тестирования такими компонентами коммуникативной компетенции, как языковая, предметная и прагматическая (выделяются вслед за Д.И. Изаренковым) [4]. В их рамках возможно проверить спектр умений, необходимый для осуществления устного речевого взаимодействия, в том числе и в профессиональной сфере. Рассмотрим их подробнее.
Прежде всего, необходимо отметить, что под языковой компетенцией понимается «корректное употребление и распознавание языковых средств, базирующихся на знании участником общения правил (фонологических, фонетических, лексических, грамматических) и навыках оперирования этими средствами в процессах продукции и рецепции, имеющих место в коммуникативной деятельности» [2, с. 181-182]. При этом языковые средства отбираются на основе сфер профессиональной деятельности специалиста, тем и ситуаций (т.е. на основе предметного компонента). Большей частью это относится к лексическим средствам, поскольку грамматика и фонетика остаются относительно универсальными, в то время как лексический пласт языка наиболее тесно связан с экстралингвистической действительностью и отражает семантический аспект языковых единиц той или иной сферы профессиональной деятельности индивида. Данные языковые средства вместе с речевыми навыками образуют необходимый для общения языковой потенциал коммуниканта, направленный на решение конкретной коммуникативной задачи.
В качестве объектов контроля в рамках языковой компетенции в самом общем виде выступают фонетические, лексические и грамматические навыки говорения, а также фонетические, лексические и грамматические навыки аудирования, т.е. навыки артикуляционного и ритмико-интонационного оформления, навыки формообразования и употребления лексических единиц, навыки формообразования и употребления грамматических структур.
Перейдем к рассмотрению следующего компонента - предметной компетенции, которая включает в себя не только специальные знания в определенной области человеческой деятельности (знания предмета общения) и умения оперировать этими знаниями для его осуществления, но и знания норм и правил, действующих в языковом социуме профессиональной сферы коммуниканта, а также «умение воспринимать, воспроизводить и производить высказывания», «адекватные» данным «нормам» [9, с.27]. Как было сказано выше, предметный компонент ограничивает тот набор сфер, тем и речевых ситуаций, на основании которых ведется обучение и, следовательно, контроль профессионально ориентированного общения. В связи с этим предметная компетенция в лингводидактических тестах выступает скорее условием определения иных компетенций, выделяемых в составе коммуникативной. Тем не менее, высказывается мнение [6], что в основе предметной компетенции также лежит владение терминосистемой, которое предполагает как предметное знание, заложенное в термины, так и понимание сущности механизма профессиональной деятельности [6, с.110]. Ввиду этого видится целесообразным выделить в качестве объекта тестирования умение высказываться продуктивно в ситуациях профессионального общения, как по содержанию, так и по форме [9, с.97]. Под высказыванием, продуктивным по содержанию, можно понимать активное и творческое оперирование информацией, как на основе имеющихся знаний по специальности, так и на основе знаний в области профессиональных интерперсональных конвенций, принципов и правил поведения. Высказывание, продуктивное по форме, в свою очередь, предполагает, как знание широкой синонимии, вариативности и антонимии единиц данного подъязыка, так и знание терминологии.
Отметим, что при коммуникативном подходе одним из ведущих критериев успешности акта общения выступает решение участниками речевого взаимодействия коммуникативной задачи, следовательно, на первый план при определении объектов устного тестирования выступают навыки и умения прагматической компетенции. Уточним, что понимается в отечественной методической науке под данным термином. В соответствие с Д.И. Изаренковым, прагматическая компетенция представляет собой умение употреблять высказывания в соответствие с коммуникативным намерением (интенцией) говорящего и ситуативными условиями речи [4, с.56-57]. В нее включаются:
а) знания соответствий между коммуникативными намерениями и реализующими их высказываниями;
б) знания соответствий между вариативной формой высказываний, реализующих одно и то же намерение, и ситуативными условиями речевого акта;
в) умения реализовывать коммуникативное намерение путем выбора речевого действия в соответствие с требованиями ситуации [4, с.56-57].
Необходимо пояснить, что в качестве основных интенций (намерений) коммуникантов в профессиональном общении выступают фатическая, информационная и воздейственная [1]. Первая из них есть своеобразная тактика общения, к числу которой относятся средства установления, поддержания и завершения речевого контакта. Информационная интенция находит свое выражение в организационных стратегиях, управляющих формой организации и протекания общения. Воздейственная интенция реализуется через риторические стратегии, связанные с оказанием влияния на человека как участника общения, с процессами оценивания ситуаций и выработки решений, выбора наиболее эффективного способа влияния. К ним относятся стратегии отговаривания, настаивания, соблазна или устрашения, возражения, отклонения и т.д. [1, с.37].
Следовательно, реализация той или иной интенции предполагает владение речевыми стратегиями и тактиками общения. Под стратегией общения понимается «комплекс речевых действий, направленных на достижение коммуникативных целей» [7, с.37], и определяется она, как правило, макроинтенцией одного (или всех) участников диалога. Стратегия включает в себя планирование процесса речевого общения в зависимости от его конкретных условий и личностей коммуникантов, а также реализацию этого плана. Она всегда связана с поисками общего языка и выработкой основ диалогического сотрудничества: это выбор тональности общения и языкового способа представления реального положения дел [5, с.73]. В то время как тактика общения есть совокупность речевых действий, выполняемых коммуникантом в той или иной последовательности, которые реализуют / не реализуют коммуникативную стратегию и подчиняются / не подчиняются тем или иным правилам [7, с.39]. Так, например, в стратегии отказа в выполнении просьбы может быть тактика: 1) выдать себя за некомпетентного человека; 2) сослаться на невозможность выполнения просьбы в данное время; 3) иронии и т.д. [5, с.74]. Следовательно, если стратегия обеспечивает общее развитие общения, то тактика показывает реализацию данной стратегии на каждом этапе развития ситуации общения.
В качестве субкомпонентов прагматической компетенции выступает достаточно широкий реестр речевых навыков и умений, которые можно условно поделить на две группы. К первой относятся
навыки и умения, характеризующие устное общение в целом, ко второй - специфические для профессионального общения в сфере управления. Рассмотрим их подробнее.
Речевые навыки и умения, характеризующие общение в целом, включают в себя навыки и умения:
• использовать ту или иную интенцию;
• выбирать оптимальную речевую стратегию и тактику при решении определенной коммуникативной задачи;
• разворачивать систему доводов, выделяя наиболее значимые моменты, подкрепляя свои утверждения аргументами;
• использовать средства зачина, поддержания и завершения общения, адекватные ситуации;
• умение переключать регистры с учетом типа адресата (статусом речевого партнера, его коммуникативным намерением, модальностью общения, сложившимися отношениями) и выбирать этикетные формы и т.д.
Данный реестр навыков и умений прагматической компетенции может быть конкретизирован с учетом специфики управленческой деятельности. Так, например, в ситуациях деловой беседы и переговоров в качестве объекта контроля выступают навыки и умения:
• обсуждать возможные проблемы, возникающие в связи с предметом общения, и предлагать оптимальные пути их решения;
• представлять информацию в выгодном для себя аспекте;
• побуждать партнера по общению к совершению определенных действий в связи с обсуждаемой темой общения;
• выдвигать предложения / контрпредложения / компромиссные предложения относительно обсуждаемого предмета речи;
• прямо воздействовать на собеседника через убеждение;
• отклонять / принимать предложения партнера по общению и т.д.
В зависимости от типа ситуации (конфликтная/неконфликтная)
• избегать конфликта, если он может отрицательно сказаться на профессиональном результате или вступить в него, если он представляется неизбежным или единственно выгодным и т.д.
В ситуации заключение контракта в качестве основных выступают навыки и умения:
• описывать предмет сделки;
• излагать коммерческие условия сделки;
• инструктировать относительно предмета сделки;
• объяснять юридические условия сделки [2, с. 188].
Таким образом, уточнив субкомпоненты коммуникативной компетенции, подлежащие оцениванию, в обобщенном виде объекты
тестирования устного профессионально ориентированного общения можно представить следующим образом (см. таблицу 1):
Таблица 1
Объекты тестирования устного профессионально ориентированного общения
Языковая компетенция 1.1 Навыки артикуляционного и ритмико-интонационного оформления.
1.2 Навыки формообразования и употребления лексических единиц.
1.3 Навыки формообразования и употребления грамматических структур.
Прагматическая компетенция 2.1.1 Умение сообщать информацию оценочного характера.
2.1.2 Умение запрашивать информацию оценочного характера.
2.2.1 Умение запрашивать информацию фактического характера.
2.2.2 Умение сообщать информацию фактического характера.
2.3.1 Умение аргументировать точку зрения.
2.3.2 Умение запрашивать аргументацию собеседника.
2.4 Умение использовать формулы убеждения.
2.5 Умение принимать решение в соответствие с ситуацией и излагать его.
2.6 Умение использовать стратегии а) отказа; б) избегания прямого ответа; в) возражения; г) отговаривания.
2.7 Умение использовать средства зачина, поддержания и завершения общения.
2.8 Умение выбирать тип регистра (официальный -неофициальный) в соответствие с ситуацией и использовать формулы вежливости и делового этикета в общении с собеседником.
3.1 Умение использовать средства связности для обозначения смысловых и структурных связей в собственном высказывании.
Предметная компетенция 4.1 Знания в области профессиональных интерперсональных конвенций, принципов и правил поведения, а также языковых и этикетных норм в различных подтипах профессионального общения.
4.1 Знание широкой синонимии, вариативности и антонимии единиц подъязыка профессионального общения.
Следующий вопрос, который решается тестологами, заключается в разработке инструмента оценивания, который позволил бы сделать вывод о степени соответствия результатов цели. В качестве такого инструмента, как правило, выступают рейтинговые шкалы оценивания. Однако прежде чем приступить к их разработке, необходимо иметь представление об особенностях владения иностранным языком на разных уровнях, для этого следует обратиться к программному документу, разработанному Языковым департаментом Совета Европы, - 'Common European Framework of Reference for Languages: Learning, Teaching, Assessment' («Общеевропейские компетенции владения иностранным языком: изучение, преподавание, оценка») [10]. Проиллюстрируем на примере уровня B2, какие особенности владения иностранным языком на данном уровне рекомендуется принимать во внимание при разработке системы оценивания [3]. Данные особенности представлены в таблице 2.
Таблица 2
Характеристика особенностей развития навыков и умений говорения на уровне B2 согласно «Общеевропейским компетенциям владения иностранным языком...» [3]
Диапазон языковых средств Обладает достаточным словарным запасом, позволяющим описывать что- либо, выражать точку зрения по общим вопросам без явного поиска подходящего выражения. Умеет использовать некоторые сложные синтаксические конструкции.
Точность выбора языковых средств Демонстрирует достаточно высокий уровень контроля грамматической правильности. Не делает ошибок, которые могут привести к непониманию, и может исправить большинство собственных ошибок.
Беглость речи Может порождать высказывания определенной продолжительности с достаточно ровным темпом. Может демонстрировать колебания при отборе выражений или языковых конструкций, но заметно продолжительных пауз в речи немного.
Взаимодействие с собеседником Может начинать беседу, вступать в беседу в подходящий момент и заканчивать беседу, хотя иногда эти действия характеризуются определенной неуклюжестью. Может принимать участие в беседе на знакомую тему, подтверждая свое понимание обсуждаемого, приглашая других к участию и т.д.
Связность речи Может использовать ограниченное количество средств связи для соединения отдельных высказываний в единый текст. Вместе с тем, в беседе в целом отмечаются отдельные «перескакивания» от темы к теме.
В соответствие с представленными в таблице 2 особенностями владения устной речью должна строиться и шкала оценивания, с составляющими ее параметрами.
Так как объекты тестирования, как отмечалось выше, были выделены в рамках языковой, предметной и прагматической компетенций, то параметры оценивания, составляющие рейтинговую шкалу, должны учитывать данные субкомпоненты коммуникативной компетенции. В качестве параметров оценивания можно использовать такие, как 1) языковая корректность, 2) лексическая и грамматическая вариативность, 3) коммуникативная адекватность, 4) беглость речи и связность, 5) продуктивность интеракции, которые соотносятся с объектами тестирования следующим образом (см. схему 1):
Схема 1
Соотношение параметров оценивания и объектов тестирования
языковая корректность
языковая компетенция
прагматическая компетенция
лексическая и грамматическая вариативность
предметная компетенция ----коммуникативная адекватность
беглость речи и связность
продуктивность интеракции
Поясним, что включает в себя содержание данных параметров. Так под языковой корректностью понимается соответствие произносительного, ритмико-интонационного и лексико-грамматического оформления высказывания студентов нормам и правилам изучаемого языка. Лексическая и грамматическая вариативность есть разнообразие используемых в речи, в первую очередь, лексических единиц, широкая синонимия и антонимия единиц подъязыка профессионального общения, а также вариативность синтаксических и грамматических единиц. Следующий критерий (коммуникативная адекватность) - релевантность выбранного студентами регистра общения заданной ситуации, соответствие речевого поведения (стратегий и тактик) правилам и нормам поведения, принятым в профессиональной сфере. Четвертый критерий (беглость речи и связность) - скорость речевого потока и скорость реакции на реплики собеседника; отсутствие излишних пауз хезитаций; связность, обеспечиваемая использованием дискурсивных средств. Продуктивность интеракции, в свою очередь, представляет собой выполнение коммуникативной задачи.
В целом рейтинговую шкалу для оценивания уровня развития умений устного профессионально ориентированного общения для
студентов уровня В2 можно представить следующим образом (см. таблицу 3):
Таблица 3
Рейтинговая шкала для оценивания умений устного профессиональноориентированного общения студентов уровня В2.
Баллы
3
2
1
0
к
I
го
ш ^
I ф
^ о
Ш
О
0
1
Ё ш
О
^
К ГО ш о
.0 со к
Речь правильная. Встречаются
эпизодические ошибки или погрешности в формообразовании и употреблении языковых и речевых единиц, которые не препятствуют пониманию.
Произношение, ритм и интонация близки к нормативным.
Речь в целом правильная, понимание ее содержания не вызывает затруднений. Однако встречаются ошибки в формообразовании и употреблении языковых и речевых единиц, которые, тем не менее, носят несистематический характер. Сказывается влияние родного языка на произносительное и ритмико-интонационное оформление речи студентов._
В речи присутствуют систематические ошибки в формообразовании и употреблении определенных языковых и речевых единиц, либо значительное количество несистематических ошибок в формообразовании и употреблении языковых и речевых единиц в целом, а также наблюдается нарушение произносительной и ритмико-
интонационной нормы, что временами может затруднять понимание.
Большое количество лексических, грамматических, произносительных и ритмико-интонационных ошибок существенно затрудняет понимание.
0
1
ш ^
н го
ГО Ш
К
ГО ^
О ф
т
го
го
К
ГО ^
О
ш
т ^
о ^
ш
Речь отличается большим разнообразием и насыщенностью грамматических структур, синтаксических моделей, большой вариативностью лексических единиц, также наблюдается уверенное владение понятиями и терминами делового английского языка.
В целом речь отличается разнообразием, однако в отдельных аспектах (лексика (в том числе терминология делового английского языка), грамматика, синтаксические модели) не
наблюдается вариативности, что, тем не менее, не препятствует полной передаче и пониманию
передаваемого сообщения.
Речь студентов характеризуется ограниченным владением языковых средств в большинстве аспектов.
Диапазон используемых в речи языковых средств весьма ограничен, что препятствует полной передаче и пониманию передаваемого
сообщения, либо низкие баллы по другим критериям делают невозможным оценивание ответа по данному критерию.
о
0
1
н го
ш
^
ш
го
к го
I
ш
го
I >
о
Выбранный регистр общения релевантен заданной ситуации и остается неизменным. Речевое поведение соответствует правилам и нормам, принятым в профессиональной сфере.
В целом регистр релевантен заданной ситуации, однако временами наблюдается несоблюдение правил и норм поведения, принятых в профессиональной сфере, а также употребление языковых и речевых единиц, несвойственных данному регистру, что, тем не менее, носит несистематический характер и вследствие этого значительно не препятствует решению речевой задачи.
Регистр не вполне релевантен заданной ситуации; наблюдается систематическое несоблюдение правил и норм поведения, принятых в профессиональной сфере, а также употребление языковых и речевых единиц, несвойственных данному регистру, что в реальной ситуации общения может препятствовать достижению цели общения.
Выбранный регистр общения не релевантен заданной ситуации, что затрудняет достижение цели общения. Речевое поведение характеризуется существенными отклонениями от принятых в профессиональной сфере правил и норм поведения.
о
0
1
со к ш о
т ф
О
О |_
Ф
ю
Речь беглая, хотя может присутствовать незначительное количество пауз хезитаций, которые заполняются
дискурсивными средствами и не затрудняют ее понимание. Успешно использует прием перефразирования или описательного выражения в случае нехватки речевых средств. Скорость реакции на реплики собеседника высокая. Широко используются средства связности.
В целом речь беглая, однако в ходе общения возникают паузы хезитации, которые не заполняются дискурсивными средствами. Не всегда используется прием перефразирования или описательного выражения в случае нехватки речевых средств, или используется не всегда успешно. Возможно замедление скорости при реакции на реплику собеседника. Тем не менее, речевая задача решается успешно.
Временами речь прерывиста. Испытывает трудности в формулировании мысли, что проявляется в необоснованных паузах хезитациях, повторах, вызванных поиском необходимой языковой единицы, незавершенных предложениях. Не всегда используется прием перефразирования или описательного выражения в случае нехватки речевых средств, или используется не всегда успешно. Возможно замедление реакции на реплики собеседника, что оказывает отрицательное влияние на восприятие и понимание речи партнером по общению._
Речь постоянно прерывается, частотны необоснованные паузы, повторы, незаконченные предложения, не всегда используются средства связности, не используется прием перефразирования или описательного выражения в случае недостатка речевых средств, что затрудняет понимание речи собеседником. Не всегда присутствует адекватная реакция на реплики собеседника.
CD
О О X
m
> о
Œ С
Задание выполнено. Речевая задача решена. Все умения, составляющие конструкт задания, были про-демонстрированы.
В целом задание выполнено, однако при решении речевой задачи студент испытывал затруднения. Возможно не все умения, составляющие конструкт задания, были продемонстрированы
Задние выполнено не полностью, т.к. речевая задача не была в полной мере решена и/или не все умения, составляющие конструкт задания, были продемонстрированы.
Задание не выполнено, речевая задача не решена.
Таким образом, в данной статье представлены объекты тестирования устного профессионально ориентированного общения и параметры их оценивания. Однако необходимо помнить, что для тестирования продуктивных видов речевой деятельности не могут быть определены универсальные объекты контроля и инструменты оценивания. Они уточняются и конкретизируются в каждом отдельном тестовом задании в соответствие с его форматом и речевой задачей.
Список литературы
1. Астафурова Т.Н. Лингвистические аспекты межкультурной деловой коммуникации. Волгоград: Изд-во Волгогр. гос. ун-та, 1997. - 107 с.
2. Громова Н.М. Деловое общение на иностранном языке: методика обучения. М.: Магистр: ИНФРА-М, 2010. - 285 с.
3. Европейская система уровней владения иностранным языком [Электронный ресурс] Режим доступа: http://lang.mipt.ru/articles/european_levels.html?xsl:print=1
4. Изаренков Д.И. Базисные составляющие коммуникативной компетенции и их формирование на продвинутом этапе студентов-нефилологов. // Русский язык за рубежом. 1990. №4. - С. 54-60.
5. Культура русской речи: учебник для студентов высших учебных заведений / Отв. ред.: Л.К. Граудина, Е.Н. Ширяев. - М.: Норма, 2008. - 549 с.
6. Лаврова Н.В. Тестирование как средство измерения сформированно-сти коммуникативной компетенции в русском языке как иностранном в сфере профессионального образования. Дис. ... канд. пед. наук. - М., 1999. - 182 с.
7. Малюга Е.Н. Функциональная прагматика межкультурной деловой коммуникации. - М.: ЛИБРОКОМ, 2008. - 313 с.
8. Цатурова И.А., Балуян С.Р. Тестирование устной коммуникации: учебно-методическое пособие. - М.: Высш. шк., 2004. - 127 с.
9. Шишмолина Е.П. Обучение профессионально ориентированному иноязычному общению студентов неязыковых специальностей гуманитарного профиля (на материале немецкого языка): дис. ... канд. пед. наук. - СПб.: 2007. -226 с.
10. The Common European Framework in its political and education context [Электронный ресурс] Режим доступа: http://www.coe.int/t/dg4/linguistic/Source/Framework EN.pdf
