Лопаткина, Е. В
 Скачать 1.6 Mb.
|
|
Глава 5 ПЕДАГОГИЧЕСКИЕ ТЕСТЫ. ВИДЫ ТЕСТОВ И ФОРМЫ ТЕСТОВЫХ ЗАДАНИЙ Практическое задание: отберите и решите несколько тестовых зада- ний по математике разных по форме, составьте вопросы для их обсу- ждения. Теоретическое задание: изучите один из двух вопросов: а) методика разработки дидактических тестов, б) технология конструирования ди- дактического теста [5]. План лекции: 5.1. История становления понятия «педагогический тест». 5.2. Понятие «педагогический тест». Классификация педагогических тестов. 5.3. Методика разработки педагогических тестов. 5.4. Формы тестовых заданий. 5.1. История становления понятия «педагогический тест» Разработка первого педагогического теста принадлежит амери- канскому психологу Э. Торндайку 14 . Первый стандартизированный педагогический тест, снабженный нормами – тест на решение ариф- метических задач. Современное понимание тестов и процесса тести- рования можно развести по уровням. В работе А.Н. Майорова выде- лено три таких уровня. 14 Торндайк Э. Введение в теорию психологии и социальных измерений, 1904. Опережающая самостоятельная работа Оценка с помощью типов упрощает задачу тому, кто оценивает, поскольку она освобождает человека от ответственно- сти за это оценочное суждение. Виктор Эмиль Франкл 64 Первый уровень – «бытовой», где тест понимается как набор вопросов с вари- антами ответов, который стоит в одном ряду с головоломками, кроссвордами. Второй уровень – «словарный», где вы- деляются основные составляющие поня- тия тестирования, но не учитываются особенности процедуры создания, ис- пользования, анализа, специфичные для той или иной сферы применения. Тре- тий уровень – «научный». Данный уро- вень наиболее точен, т.к. учитывает особенности тестов и отражает требования к ним, которые появляются в процессе развития и научно- го обоснования тестирования. Современное состояние тестологии находится на втором уровне понимания тестов. Исследования в области педагогического тестиро- вания привели к достаточно интенсивной разработке его отдельных аспектов и породили множество подходов к определению понятий «тест» и «тестовое задание». Приведём некоторые из них. Тест – краткое стандартизированное испытание, предназначен- ное не только для получения объективной количественной оценки ре- зультатов обучения, но и для распознавания интересующих особенно- стей и качеств личности. Тест – стандартизированные задания, по результатам выполне- ния которых судят о психофизиологических и личностных характери- стиках, а также знаниях, умениях и навыках испытуемого. Тест – краткое стандартизированное испытание, допускающее количественную оценку результатов на основе их статистической об- работки. Тест – это инструмент, состоящий из квалиметрически выверен- ной системы тестовых заданий, стандартизированной процедуры про- ведения и заранее спроектированной технологии обработки и анализа результатов, предназначенной для измерения качеств и свойств лич- ности, изменение которых возможно в процессе систематического обучения. Ключевые понятия педагогический тест нормативно- ориентированный тест критериально- ориентированный тест тестовое задание требования к тестово- му заданию формы тестового задания 65 5.2. Понятие «педагогический тест». Классификация педагогических тестов В.С. Аванесов даёт чёткое определение педагогического теста: педагогический тест – это совокупность взаимосвязанных заданий возрастающей сложности, позволяющих надежно и валидно оценить знания и другие интересующие педагога характеристики личности. В данном определении основной упор делается на систему взаимосвязанных заданий возрастающей сложности. В.С. Аванесов особо выделяет так называемые традиционные тесты, кото- рые представляют собой единство трех систем: содержательной сис- темы знаний, описываемой языком проверяемой учебной дисципли- ны; формальной системы заданий возрастающей трудности; стати- стических характеристик заданий и испытуемых. Ведущая идея тра- диционного теста – минимумом числа заданий, за короткое время, быстро, качественно и с наименьшими затратами сравнить знания как можно большего числа испытуемых. Исходя из этих положений педа- гогическим тестом называют систему определенным образом распо- ложенных заданий, позволяющих выявить структуру знаний, умений и измерить их. Педагогические тесты весьма разнообразны. С точки зрения це- лей применения можно выделить: тесты достижений; критериально- ориентированные тесты, позволяющие сопоставить уровень индиви- дуальных учебных достижений с полным объемом знаний, умений и навыков; нормативно-ориентированные тесты, сравнивающие испы- туемых по уровню их учебных достижений; аттестационные тесты, определяющие степень обученности; тесты прогнозирования резуль- татов обучения по выбранной технологии обучения. Рассмотрим типологию тестов по ряду оснований: по процедуре создания выделяютстандартизированные и не- стандартизированные тесты; Чем же отличается обычный тест от педагогического? 66 по средствам предъявления: бланковые; предметные; аппарат- ные; практические; компьютерные; адаптивные; по направленности: тесты интеллекта, личностные тесты и тесты достижений; по характеру действий: вербальные, невербальные; по ведущей ориентации: тесты скорости, тесты результатив- ности и смешанные тесты; по степени однородности задач: гомогенные, гетерогенные; объективные тесты и проективные тесты; широкоориентированные и узкоориентированные тесты; по целям использования: определяющие тесты; формирующие тесты; диагностические тесты; суммирующие тесты; по широте использования: для использования учителем, груп- пой учителей или администрацией образовательного учреждения; для целей отбора, формирования групп и аттестации учащихся. В последнее время всё большее признание в нашей стране по- лучают критериально-ориентированные тесты. Выделяют два вида критериально-ориентированных тестов, отличающихся друг от друга по ряду характеристик. Первый вид предназначен для оценки доли учебного материала от полного его объема, кото- рую усвоил испытуемый. Если полный уровень объ- ема учебного материала условно принимается за 100 %, то уровень учебных достижений каж- дого испытуемого выражается в проценте от полного объема области содержания теста. Второй вид критериально-ориентированных тестов используется для классификации испытуемых, разделения их на группы на основании заранее выбранного критерия. Здесь уже не ре- комендуется выбирать критерий, равный 100 %. Наиболее существенные различия между нормативно-ориен- тированными и критериально-ориентированными тестами представ- лены в табл. 4. В чём различие нормативно- ориентированного и критериально- ориентированного тестов? 67 Таблица 4 Различия между нормативно-ориентированными и критериально-ориентированными тестами Характеристика Нормативно- ориентированные Критериально- ориентированные Типичное среднее число учеников, выполнивших правильно почти все зада- ния 5 – 10 % 80 – 90 % Область для сравнения результатов учащихся Результаты других учеников Содержательная область или совокупность видов учебной деятельности Диапазон охвата целей проверки Широкий, охватывает многие цели и виды учебной деятельности Узкий, обычно охватывает несколько целей контроля Репрезентативность охвата содержания предмета Умеренная, фрагментарная – обычно включают не все разделы Большая, обычно вклю- чают все то, что можно операционализировать и принять за 100 % Разброс результатов учащихся (вариативность баллов) Высокий, поскольку основная цель тестирования – дифферен- циация испытуемых по уровню подготовки Низкий, внутри результатов группы учащихся, превысивших по своим результатам критериальный балл, почти нет вариативности Подбор заданий по трудности Распределение оценок трудности близко к нормальному. Основная часть заданий имеет трудность 40 – 60 % Распределение скошенное. Основная часть заданий имеет трудность 80 – 90 % 5.3. Методика разработки педагогических тестов Процесс разработки тестов достижений делится на несколько исследовательских этапов: подбор типичных ситуаций, которые возникают в профессио- нальной деятельности; разработка методов перевода ситуаций на язык педагогиче- ских задач; разработка нескольких вариантов решения педагогических за- дач; определение ценности (веса) различных решений по каждой конкретной педагогической задаче; 68 перевод педагогической задачи в тестовое задание; установление правильной последовательности предъявления системы заданий, составляющих тест достижений; экспериментальная проверка теста, заполнение технологи- ческой карты распределения заданий теста по видам деятельности. В первоначальном варианте тест достижений имеет избыточное число заданий, часть которых после первой экспериментальной про- верки убирается. Для каждого задания устанавливается свой эталон ответа. При подготовке тестов достижений применяется экспертная оценка знаний и умений, осуществляемая параллельно с тестировани- ем. Сначала испытуемые выполняют тест, после этого их опрашивает группа экспертов. Баллы по тестам сопоставляют с оценками. Про- цент совпадений должен быть высок – 85 – 90 %. Это является гаран- тией, что в тест включен основной материал по предмету. Нормативно-ориентированные тесты имеют свою специфику, связанную с их основной задачей – дифференцировать испытуемых. При разработке данных тестов стараются добиться высокой вариа- тивности тестовых баллов. Если большинство испытуемых получают только низкие или только высокие баллы, то труднее устанавливать между ними различия. Если же вариативность баллов высокая, то дифференцировать испытуемых легко. Нормативно-ориентированные тесты разрабатываются таким образом, чтобы распределение баллов было близко к нормальному. Понимание нормативной и критериальной ориентированности как разных подходов к интерпретации результатов дается в работах В.С. Аванесова 15 : «для нормативно-ориентированной ориентации вы- вод достраивается рейтингом: задания → ответы → выводы о знаниях испытуемого → рейтинг, понимаемый как вывод о месте или ранге испытуемого»; «для критериально-ориентированной интерпретации вывод выстраивается вдоль логической цепочки: задания → ответы → выводы о соответствии испытуемого заданному критерию». 15 Аванесов В.С. Теория и практика педагогических измерений (материалы пуб- ликаций), ЦТ и МКО УГТУ-УПИ, 2005. 69 5.4. Формы тестовых заданий Перед определением форм тестового задания необходимо подробно рассмотреть следующееопределение теста: тест – это краткое стандартизированное испытание, допускающее количест- венную оценку результатов на основе их статистической обработки. Во-первых, «испытание» всегда сопряжено с системой заданий, на основании анализа результатов выполнения которой предстоит провести количественную оценку измеряемым качествам и свойст- вам. Каждое из заданий теста по своей сути представляет для испы- туемого вопрос, проблему. Ответ на вопрос – это всегда устранение некоторых сомнений, колебаний, неопределенности в рассматривае- мой ситуации с целью получения новых, более точных знаний. По- этому среди заданий теста различают: задания информативного ха- рактера; задание, решение которых может быть осуществлено алго- ритмическим способом; проблемы, для решения которых необходим эвристический поиск. При этом информация, содержащаяся в тексте задания, может быть представлена в явном виде или же в скрытой форме, требующей для ее извлечения выполнения более или менее сложных операций, что повышает сложность заданий. Во-вторых, под «стандартизированным испытанием», всегда по- нимают такое испытание, при котором все выполняющие задания на- ходятся в одинаковых, строго оговоренных условиях. Тогда возможно сравнение результатов тестирования, доведение их до числа. А стан- дартизированная форма оценки позволяет соотнести уровень дости- жений школьника по учебному предмету в целом и по отдельным его разделам со средним уровнем достижений учащихся в классе и уров- ням достижений каждого из них. В-третьих, тест позволяет получить «количественную оценку» результатов тестирования. Поскольку измеряются непрерывно изме- няющиеся, недискретные величины, то для доведения результатов измерения до числа используются специальные шкалы. Шкала – это определенная последовательность числовых значений результатов измерительных операций, примененных к эмпирической системе. Формы тестов имеют свою специфику и сферу применения. В настоящее время разработаны и используются две группы тестовых 70 форм заданий и несколько разновид- ностей. Задания в закрытой форме: задания с выбором ответов; альтерна- тивные задания; задания на классифи- кацию; задания на обнаружение правильной последовательности. За- дания в открытой форме: задания, в которых необходимо указать от- вет; задания в свободной форме. Тестовые задания в закрытой форме сконструированы так, что вся информация, необходимая для выполнения задания, присутствует в нем, «закрыта». Задания с выбором ответов – тестовые задания, содержание которых сопровождается несколькими нумерованными вариантами ответа. Испытуемому предлагается выбрать номер пра- вильного ответа из предлагаемых вариантов, которые являются не- верными, т.е. дистракторами. Дистрактор (отвлекающий ответ) – ва- риант ответа на тестовое задание закрытого типа, похожий на пра- вильный, но не являющийся таковым. В заданиях такого вида обычно используют 3 – 4 дистрактора. При этом следует учесть важное тре- бование: в ответах к заданию обязательно должен быть верный от- вет и он должен быть только один. Альтернативные задания – задания, к которым предполагаются только два ответа (задания, имеющие один дистрактор).Как правило, альтернативная форма используется тогда, когда задание предполага- ет только два возможных ответа: «верно – неверно», «будет – не бу- дет», «является – не является» и т.д. Задания на классификацию задаются двумя множествами объек- тов, между которыми необходимо установить соответствие. Соответ- ствие должно быть однозначным. Содержание задания часто выража- ется в виде двух множеств с соответствующими названиями, которые могут располагаться столбцами, элементы задающего столбца слева, а элементы выбора – справа. В правом столбце возможно наличие ди- стракторов (одного или более). Задания на обнаружение правильной последовательности удобно использовать для проверки усвоения правильной последова- тельности событий, правильной последовательности действий, дейст- вий правильности расположения объектов, событий в заданном по- Ограничен ли набор форм тестовых заданий? 71 рядке. Задания такого вида используют для выявления усвоения алго- ритмов, способов действия. Оценка тестовых заданий в закрытой форме дихотомическая (успешно выполненное задание – 1 балл, неуспешное – 0 баллов). Задание открытой формы – тестовое задание без указания воз- можных вариантов ответа; испытуемому предлагается самостоятель- но указать правильный ответ либо привести обоснование ответа ре- шения задания. Ответ или решение должен вписать ученик; т.е. не вся информация содержится в задании, часть ее ученик должен привне- сти, т.е. задание «открыто» для информации. Задания этой формы не имеют никаких ограничений на содержание и форму представления ответов. Задания в открытой форме имеют две разновидности. Зада- ния открытой формы, в которых необходимо указать ответ. В ин- струкции по выполнению задания говорится, что ответом на задания этой части будет некоторое слово, формула, символ или число, кото- рое надо вписать на месте прочерка в тексте задания или в специаль- но отведенном месте, занести в бланк ответов рядом с номером зада- ния. Задания в свободной форме направлены на выявление способно- сти создавать собственный продукт на основе общих приемов его по- строения. Задания, предлагаемые ученикам в свободной форме, как правило, творческого уровня, и при их проверке важным является не только ответ к заданию, но и сам ход решения. Поэтому такие задания оцениваются большим количеством баллов, чем задания предыдущих форм, т.е. являются политомическими. Политомическое тестовое задание– задание, выполнение ко- торого допускает несколько категорий оценки ответа, каждая из ко- торых оценивается по-разному (например, полностью верный ответ – 2 балла, частично верный ответ – 1 балл, неверный ответ – 0 баллов). При подборе заданий для контроля целесообразно использовать различные формы тестов, учитывая их особенности. Выбор форм тес- товых заданий определяется спецификой содержания учебной дисци- плины, целями создания и применения теста. В каждом тесте можно использовать несколько форм, но желательно, чтобы их было в одном тесте как можно меньше. 72 Вопросы и задания 1. Проведите сопоставительный анализ форм тестовых заданий и со- ставьте таблицу соответствия технологических характеристик и формы тестового задания. 2. Приведите пример программно-дидактического теста и продумайте методические рекомендации по его использованию в практике обучения математике. 3. Как Вы думаете, можно ли одно и то же содержание, выбранное для проверки, предъявить учащимся в виде тестового задания разной формы? Ответ обоснуйте. Список рекомендуемой литературы 1. Васильев, В. И. Теория и практика формирования программно- дидактических тестов / В. И. Васильев, Т. Н. Тягунова. – М. : Изд- во МЭСИ, 2001. – 130 с. 2. Майоров, А. Н. Теория и практика создания тестов для системы образования / А. Н. Майоров. – М., 2000. 3. Макарова, Т. Д. Тестирование в системе мониторинга качества образования / Т. Д. Макарова // Стандарты и мониторинг в образовании. – 1998. – № 1. – С. 60 – 61. 4. Мельникова, М. Б. Теория и практика конструирования педагоги- ческих тестов / М. Б. Мельникова. – М., 2002. 5. Михайлычев, Е. А. Дидактическая тестология / Е. А. Михайлычев. – М. : Народное образование, 2001. – 432 с. 73 |