Актуальные вопросы языкового тестирования. Издательство санктпетербургского университета
 Скачать 6.52 Mb.
|
|
II уровень. Рейтерская таблица № Сценарий для тестирующего. Репликистимулы Реакции тестируемого Шкала оценок 1 Запрос мнения Высказывание мнения 1 2 3 4 5 Запрос уточнения информации Уточнение информации 1 2 3 4 5 Запрос разъяснения мнения Разъяснение мнения 1 2 3 4 5 Запрос информации Информация 0 1 2 3 4 5 Запрос оценочного суждения Оценочное суждение 1 2 3 4 5 Запрос обоснования Обоснование 0 1 2 3 4 5 Запрос сравнения Сравнение 0 1 2 3 4 5 Запрос примера Приведение примера 1 2 3 4 5 Запрос предположения Высказывание предположения Запрос вывода Вывод 0 1 2 3 4 Наиболее распространенные ошибки отсутствие запроса некоторых интенций (иногда 3–4), подмена запроса одной интенции другой, повторы в запрашивании одной и той же интенции. Надо сказать, что последнее возможно как тактика выбрасывания спасательного круга, ноне более одного дополнительного раза. Типичные ошибки начинающих тесторов см. в табл. Но более серьезные ошибки тестора мы выявили при проведении теста III уровня. Цель теста-интервью на этом уровне — выявить умение тестируемого отстаивать свою точку зрения в диалоге с собеседником, имеющим противоположное мнение. Две точки зрения на одну проблему предъявляются тестором. Сфера интереса для обсуждения выбирается тестируемым. Здесь ошибки тестора часто выявляются уже в самом начале дискуссии (задание 15) (табл. 38). Глава 5. Определение уровня сформированности методической компетентности… Таблица 36 III уровень. Рейтерская таблица № Сценарий для тестирующего. Репликистимулы Реакции тестируемого. Шкала оценок Итого I фаза. Установление контакта и выбор темы 1 Определение темы и круга возможных проблем. Запрос аргументации Предъявление темы и обоснование ее значимости фаза. Обмен мнениями 2 Представление альтернативных мнений Присоединение к одному из мнений 1 2 3 4 5 Декларирование противоположного мнения Согласие / несогласие с мнением собеседника. Аргументация собственной точки зрения 1 2 3 4 5 Представление конкретной проблемной ситуации Представление возможного решения 1 2 3 4 5 Высказывание собственной точки зрения Опровержение / признание обоснованности точки зрения собеседника. Обоснование возражения согласия 1 2 3 4 5 Настаивание на собственной точке зрения / выражение сомнения в высказанной точке зрения Отстаивание собственной позиции 1 2 3 4 5 Запрос иллюстративной информации. (Обращение к личному опыту собесед- ника) Описание конкретной ситуации 1 2 3 4 5 Запрос сравнения Выражение сравнения 1 2 3 4 5 Запрос рекомендации Рекомендация 0 1 2 3 4 5 10 Запрос разъяснения понятия Разъяснение понятия 1 2 3 4 5 III фаза. Заключительная часть беседы 11 Запрос вывода Вывод 0 1 2 3 4 5 477 5.2. Тестор и преподаватель трансформация компетенции Таблица Ошибки тестора при проведении устного интервью Тактика тестора Вопрос тестора и ответ тестируемого Ошибка тестора Баллы Запрос разъяснения Выговорите, что спорт сейчас — это бизнес. Разъясните, что вы имеете ввиду Да, спорт — это бизнес. 0 Повторение запроса Ну, так объясните, почему Потому что из спорта, соревнования / сейчас уже стало как бизнеса непросто соревнования. + 6 Повторение запроса — Что это значит Это значит, что спорт как / можно купить / игроки / или даже команда… + 6 Запрос разъяснения спасательный круг Что значит купить игрока Ну, игрок хочет много денег и едет в другая страна / чтобы играть. Выражение несогласия, корректировка ответа — Это не совсем купить. Это, скорее, продать себя, свои профессиональные умения. Вы согласны Да. + 2 Запрос согласия / несогласия с мнением + 10 Всего 24 Оценка работы тестора 76 Таблица Ошибки тестора при проведении устного интервью третьего уровня Тактика тестора Вопрос тестора и ответ тестируемого Ошибка тестора Баллы Определение темы На какую тему Вы хотите поговорить Я вижу, у Вас книги / были в руках. Может быть, о книгах О литературе Ну / я люблю читать / о книгах хорошо. Сам выбирает тему 10 Запрос уточнения — Прекрасно. А какие книги вы любите читать Я люблю Достоевского, Пушкина, Толстого. Запрос из теста II уровня Глава 5. Определение уровня сформированности методической компетентности… Тактика тестора Вопрос тестора и ответ тестируемого Ошибка тестора Баллы Запрос обоснования — Почему Почему Достоевского Или Пушкина Ну, потому что это писатели великие, они писали о жизни, у них много философии / в их книгах / там можно многое увидеть / понять / как жили люди / как надо жить. Запрос из теста II уровня 6 Высказывание собственной точки зрения. Запрос согласия / несогласия с мнением Я тоже люблю Достоевского. И согласна сего идеями. А вот Толстого я иногда не понимаю. И несогласна с философией «каратаевщины». А вы Я / честно говоря / сейчас не помню / это, кажется / как христианство что-то… Запрос по форме соответствует уровню, а по содержанию уровню (2 ошибки) 12 Разъяснение информации — Да. Платон Каратаев один из героев романа Война и мир, он олицетворял идею всепрощения АДа интересно /спасибо. Подмена запроса 10 Всего 38 Оценка работы тестора 62 Еще одна очень распространенная ошибка тестора — коррекция ответа и подсказки. Это хорошо видно во фрагменте ролевой игры задание 14, III уровень, где тестор играет роль подчиненного, плохо выполнившего возложенные на него обязанности (табл. Таблица Ошибки тестора вовремя проведения ролевой игры Тактические шаги тестора Реплика тестируемого Реплика тестора Ошибки тестора Баллы Вступитель- ная часть — Здравствуйте. Вы меня вызывали? — 0 Ответ на вопрос Здравствуйте. Сначала я хочу спросить / когда Вы вчера вышли из работы. Вы знаете, ямного раз выходила. — 0 Окончание табл. 38 479 5.2. Тестор и преподаватель трансформация компетенции Тактические шаги тестора Реплика тестируемого Реплика тестора Ошибки тестора Баллы Ответ на вопрос И последний раз? Последний раз Когда я домой уходила с работы. — 0 Ответ на вопрос Это когда? В 6 часов — 0 Запрос разъяснения И тогда Вы проверили все? Зачем? — 0 Ответ на запрос. Разъяснение Это Ваше дело. Вы сделали эту обязанность? Это не входит в мои обязанности. Это обязанности уборщицы. Это то, что она должна выполнять. Корректировка использование выбранной тестируемым конструкции в правильной форме) 2 Выражение согласия с мнением Только уборщица А Вы Потому что Вы последний человек, который вышел из фирмы / и Вы не проверили / включал ли / включил ли или нет / сигнализацию / поэтому компьютер украден. Это ужасно, что у нас украли компьютер. Я понимаю. Да, я, наверное, виновата, что не проверила сигнализацию. — 0 Переспрос Проверять входит в обязанности / не только уборщица. Теперь Вам надо пожаловаться с директором. Кому я должна пожаловаться Директору Нона что я буду жаловаться директору? Корректировка использование выбранной тестируемым конструкции в правильной форме) 2×2 Подсказка тактического шага 2 Переспрос ………………… На уборщицу Вызнаете, я вообще не люблю жаловаться. Нина кого. Подсказка 2 Продолжение табл. 39 Глава 5. Определение уровня сформированности методической компетентности… Тактические шаги тестора Реплика тестируемого Реплика тестора Ошибки тестора Баллы Запрос разъяснения спасательный круг. Выражение мнения. Предложе- ние. ………………… Ну почему Вы молчите Я понимаю, что Вы сердиты, но поймите меняя не хочу жаловаться, говорить, что виноват кто- то другой, а не я. Может быть, Вы сами все объясните директору? Подсказка тактического шага 2 Выражение согласия. Прощание. Да / жаловаться / это плохо / Ноя тоже не хочу / Нет / потому что я только слышала от кого- то. Это неточно. А Вы — это лучше. Хорошо. Я пойду к директору и все ему объясню. До свидания — 0 До свидания. — — 0 Всего 12 Оценка работы тестора 88 Мы видим в приведенных фрагментах тестов, как тестор своим поведением демонстрирует реализацию функций преподавателя обучающую, корректирующую, информирующую. И эти примеры показывают, насколько сложным является переключение с одной профессиональной роли на другую. Совмещение в профессиональной жизни двух ролей требует очень серьезного самоконтроля. Первое, что необходимо тестору, приступающему к проведению экзамена, — временно убить в себе преподавателя». В тоже время преподавателю необходимы умения и навыки те- стора — при составлении заданий урока, при проведении промежуточного контроля, при подготовке студентов к прохождению сертификационного тестирования. Ведь основной минус итоговых контрольных работ и экзамена — оценка, недостаточно характеризующая уровень знаний и умений учащихся, зачастую основанная на субъек- Окончание табл. 39 481 5.2. Тестор и преподаватель трансформация компетенции тивных впечатлениях преподавателя. Основное отличие теста от этих видов контроля состоит в том, что тест всегда предполагает измерение, функция которого — поставлять качественную и количественную информацию о прогрессе обучения, о диагнозе пробелов и о прогнозе успешности. В настоящее время введение элементов теста в промежуточный и итоговый контроль стало привычным методическим приемом. Поэтому еще один вопрос, который необходимо рассмотреть, говоря о те- стологической компетенции, это вопрос умения работать с заданиями и самим разрабатывать их при подготовке к тестированию. В связи с этим нам хотелось бы определить содержание понятий тестовое задание и задание тестового характера. Под тестовым заданием мы понимаем задание, входящее в общую систему теста как инструмента для проверки уровня владения языком и обладающее следующими основными свойствами конкретная формулировка, четкое описание условий выполнения, наличие измерения и шкалы оценива- ния, а также соответствие между формой, содержанием и целью задания, наличие только одной цели (задание, направленное на проверку нескольких характеристик речи, можно считать заданием, состоящим из нескольких тестовых заданий. Задание тестового характера выполняет обучающую функцию при помощи контроля. Такое задание обладает только некоторыми свойствами тестового задания, ибо основная цель его — обучить правильному речевому поведению через анализ результатов выполнения задания. Поэтому степень близости такого задания по своему характеру к тестовому зависит от конкретных учебных целей и устанавливается преподавателем. Отсутствие коррекции речевого поведения учащегося в процессе выполнения задания и анализ результатов только после окончания выполнения отличает задание тестового характера от учебного задания, где коррекция речевого поведения производится непосредственно в процессе его выполнения, а анализ результатов выполнения может быть кратким или вообще отсутствовать. Учебное задание может быть направлено на выполнение нескольких целей, может не иметь конкретно описанной ситуации и быть направленным на развитие творческих способностей личности. Однако если задание не обладает этими свойствами, то оно может быть использовано и как задание тестового характера, и как учебное. Можно представить следующую схему действий преподавателя в аудитории при использовании заданий в 3 разных методических функциях Глава 5. Определение уровня сформированности методической компетентности) тестовое задание наблюдение, фиксирование — измерение — (оценивание); 2) задание тестового характера наблюдение, фиксирование — (оценивание) — анализ — коррекция) обучающее задание наблюдение, (фиксирование, коррекция (оценивание) — анализ. Итак, данные типы заданий отличаются друг от друга по наличию в методической тактике преподавателя оценивания, анализа и коррекции. В таком случае, зная степень важности какого-либо из этих элементов для определенных видов работы в процессе обучения, можно говорить о приоритетном использовании заданий одного или другого типа в педагогических целях. Так, обучающие задания — чисто учебные, преподаватель не играет в ситуации их выполнения роли цензора, его функция заключается не только в корректировании речевого поведения учащегося, но ив активизации его творческой активности. В диагностических тестах, обеспечивающих обратную связь, позволяющих преподавателю корректировать программу, методическую тактику в соответствии с подвергаемыми измерению результатами выполнения заданий, удобнее всего использовать задания тестовые. Сами диагностические тесты могут заменить разные формы промежуточного контроля именно благодаря заложенной в них возможности измерения степени сформированности коммуникативных умений и навыков. В качестве заданий проверочного характера, используемых преподавателями в процессе урока, при отсутствии времени на оценива- ние стоит использовать задания тестового характера. Однако в данном случае можно обратиться и к тестовым заданиям. Это необходимо, прежде всего, для того, чтобы и преподаватель, и учащийся имели возможность оценить степень прогресса в обучении. Во-вторых, выполнение тестовых заданий тренирует способность учащихся адекватно ориентироваться в ситуации тестирования. Но задания тестового характера по форме выполнения близки к тестовыми потому также обладают данной функцией тестового задания. Задания тестового характера могут быть использованы ив качестве учебных, ибо в них, также, как ив обучающих, заложена обязательность анализа и коррекции речевого продукта учащегося. Итак, умение применять тестовые задания и задания тестового характера в соответствии с целями урока или контроля — часть ме- 483 5.2. Тестор и преподаватель трансформация компетенции тодической компетенции преподавателя. Умение составлять тестовые задания — часть тестологической компетенции тестора, рейтера, преподавателя. Умение использовать составленные задания соответственно формату контроля — наиболее трудная часть работы профессионального тестора. Что же такое компетенция тестора? Данный вид компетенции представляет собой комплекс знаний и умений, позволяющих грамотно осуществлять объективный коммуникативный тестовый контроль в системе преподавания русского языка как иностранного. Данная компетенция преподавателя включает в себя) знания о системе тестирования) знания по тестологии, овладение принципами составления тестовых заданий, развитие практических умений составления тестовых заданий) умение анализировать тестовые задания и задания тестового характера сточки зрения их методической пригодности для использования в качестве обучающего и контролирующего материала) умения оценивания речевого продукта в процессе тестирования) умения ведения процесса тестирования. Преодоление нарушений в поведении и формирование умений правильного речевого и неречевого поведения в ситуации тестового экзамена — одна из многих задач, стоящих перед тесторами. Решение ее — в постоянной тренировке, практике проведения тестов, обсуждении своих ошибок и ошибок коллег. Все это говорит о необходимости взаимообучения преподавателей и тесторов вовремя совместных лекционных, семинарских и практических занятий по лингводидактиче- скому тестированию. Развитие тестологической компетенции — несомненно, интересный процесс совершенствования личности преподавателя Глава 5. Определение уровня сформированности методической компетентности. МЕЖДУНАРОДНЫЕ ИНСТРУМЕНТЫ ОЦЕНИВАНИЯ МЕТОДИЧЕСКОЙ КОМПЕТЕНЦИИ ПРЕПОДАВАТЕЛЯ ИНОСТРАННОГО ЯЗЫКА. СОДЕРЖАНИЕ И ТЕСТИРОВАНИЕ УРОВНЯ СФОРМИРОВАННОСТИ МЕТОДИЧЕСКОЙ КОМПЕТЕНЦИИ ПРЕПОДАВАТЕЛЯ ИНОСТРАННОГО ЯЗЫКА Новые задачи в области обучения, которые предстоит решать преподавателями учителям иностранного языка в частности, в связи с модернизацией образования повлекли за собой острую необходимость в улучшении качества преподавания иностранных языков. Совершенно очевидно, что этот процесс оказывает существенное влияние на повышение квалификации преподавателей, систему их специальной подготовки и переподготовки, направленную на овладение новыми методическими знаниями и современными технологиями обучения. Входе решения этих задач все более значимыми стали проблемы контроля в подготовке учителя иностранного языка, оценки качества его педагогической деятельности и профессиональной компетентности в целом, поскольку это напрямую связано с аттестацией учителя, присвоением ему той или иной категории. К сожалению, приходится констатировать, что за последние годы, в период острой нехватки педагогических кадров по иностранному языку, в условиях, когда выпускники педагогических вузов не шли работать в школу, проблемам контроля уровня методической подготовки учителя иностранного языка уделялось недостаточно внимания. Процедура аттестации, в свою очередь, привела к необходимости определить квалификационные уровни профессиональной компетентности преподавателя, которые можно было бы использовать в практике аттестации и соотнести их с присваиваемой категорией, а также к необходимости решать более конкретные вопросы, связанные с разработкой критериев и параметров оценки профессионально- педагогической компетентности учителя. Эти вопросы являются актуальными и для подготовки преподавателей вузов. Однако, поскольку профессиональная компетентность преподавателей оценивается по иным критериям, связанным с научной работой и получением ученой степени и звания, то излагаемый материал в большей мере относится к учителям школ. Перечисленные проблемы все чаще заставляют исследователей обратить внимание на стандартизацию процесса контроля уровня сформированности профессиональной компетентности учителя, те. Международные инструменты оценивания методической компетенции на определение его целей, выявление объектов контроля, на разработку его видов и форма также контролирующих заданий, в том числе тестовых, единых для всех испытуемых. Таким образом, контроль может осуществляться как в традиционной, таки в тестовой форме, ив этом случае речь может идти о тестировании |