Этапы создания тестов. №3.Этапы создания теста (2). Этапы проектирования теста колесникова Юлия Алексеевна
 Скачать 294.71 Kb.
|
ЭТАПЫ ПРОЕКТИРОВАНИЯ ТЕСТАКолесникова Юлия АлексеевнаСоздание дидактического теста1 ЭТАП Проектирование теста действия разработчика до апробации теста 2 ЭТАП Апробация теста практические «испытания» теста с целью улучшения его качества на основе полученных количественных характеристик и экспертных оценок Этапы проектирования теста1
2
3
4
5
6
7
Определение цели тестированияПроверка уровня знаний в начале обучения Входной тест Проверка уровня усвоения знаний в течение обучения Текущий тест Проверка уровня усвоения знаний, умений и навыков после изучения темы, раздела Тематический тест Проверка уровня усвоения умений и навыков в конце обучения Итоговый тест Определение формы организации процедуры тестирования Компьютерное тестирование Бланковое тестирование Отбор содержания тестаСодержание теста можно определить как оптимальное отображение содержания обучения в системе тестовых заданийУчебная программа Содержание учебного материала Базисная система знаний Измеритель, тест Предлагаемые знания даются учащимся в форме учебных пособий, материалов, текстов, лекций, рассказов и т.п., отражающих основную часть образовательной программы. Приобретаемые знания результат взаимодействия личности учащегося, педагога и учреждения в образовательном процессе. Проверяемые знания это та часть содержания учебной дисциплины, которая подлежит обязательному контролю в отдельно взятом образовательном учреждении Отбор содержания тестаОбъем проверяемых знаний всегда меньше объема знаний, который предлагается учащимся в процессе обучения.Требование «оптимального отображения» предполагает необходимость отбора такого контрольного материала, ответы на который с высокой вероятностью (не менее 95%) свидетельствовали бы об уровне подготовленности каждого учащегося.В тестах всегда используется ограниченное количество заданий, и составителю необходимо подобрать такие заданий, которые отражают знания учащихся по предмету (разделу, теме).Результатом преобразования учебного материала в содержание проектируемого теста может являться технологическая матрица,Технологическая матрицаТехнологическая матрица задает содержание, которое будет отобрано для покрытия заданиями теста.Технологические матрицы теста Одномерная матрица Двухмерная матрица Технологическая матрицаОдномерная матрица
Технологическая матрицаПроектирование учебных действий осуществляется при использовании классификации поуровням усвоения виды знанийдвухмерная матрицаТехнологическая матрицавключающая уровни усвоения знаний
Технологическая матрицавключающая виды знаний
Конструирование базы заданийДля того чтобы на одном содержательном материале можно было составить несколько вариантов заданий, конструируют базу заданий.Создание базы заданий позволяет решить проблему многовариантности тестаТаким образом, это открывает возможности по созданию множества вариантов одного задания, что снижает вероятность списывания учащимися правильных ответов друг у друга.Фасетные заданияФасетные задания – это задания имеющие фасетную часть т.е. часть содержащую переменные элементы.Это означает что проверка знания признаков, свойств, состава, функций однотипных объектов может быть организована на базе одного и того же задания, меняющего в своем тексте только название этих объектов.Когда понятия перечисляются, можно организовать множество вариантов за счет исключения какого-то одного. Важно, чтобы варианты одного задания были одинаковы по трудности.Фасетные задания открытой формыПример базы для заданий на дополнение короткой информацииДопишитеПРИНЦИП РАЗРАБОТКИ ВАРИАНТОВ ОТВЕТОВ В ЗАДАНИЯХ С ОДНИМ ПРАВИЛЬНЫМ ОТВЕТОМ, ПРИ КОТОРОМ К ЗАДАНИЯМ ПОДБИРАЮТСЯ (альтернативные ответы; несколько однородных ответов), НАЗЫВАЕТСЯ ПРИНЦИПОМ ________________________
Фасетные задания открытой формыПример базы для заданий на свободное изложениеДопишитеПРИНЦИП (кумуляции; сочетания) – ЭТО ПРИНЦИП ПРИ КОТОРОМ ____________ _______________________________________________________________________
Фасетные задания открытой формыПример базы для заданий с кодировкой балловДопишитеВИДЫ ЗАДАНИЙ (открытой; закрытой) ФОРМЫ
Фасетные задания закрытой формыПРЕДМЕТНАЯ СЛОЖНОСТЬ ЗАДАНИЯ ОТ (формы задания; числа логических операций; инструкции к заданию; времени тестирования; информационной мощности; содержательной валидности)1) зависит2) не зависит
Фасетные задания закрытой формы(соответствие задания целям тестирования; количество учебных элементов, знание которых проверяет задание), НАЗЫВАЕТСЯ1) предметной сложностью2) статистической надежностью3) информационной мощностью4) содержательной валидностью
База в табличной формеПример базы для заданий с несколькими правильными ответамиВыберите все правильные варианты ответовПравильные ответы Неправильные ответы1) сочетания 1) краткости2) кумуляции 2) логичности3) классификации 3) доступности4) противоположности 4) соответствия5) технологичности6) последовательности
База заданийДля заданий на установление соответствия и правильной последовательности в базе создается большее количество элементов, чем требуется в задании.База заданий на соответствие
База заданий на последовательность
Структура тестаИнструкция к тесту Система заданий Эталон Инструкция к тесту
Инструкция к тестуИнструкция к тесту тематического контроляпо дисциплине «Методика профессионального обучения»Цель тестирования:тест предназначен для контроля качества усвоения основного содержания по теме «Формы и виды заданий в тестовой форме».После изучения темы студент должен:знать: основные формы и виды заданий, требования предъявляемые к заданиям, дидактические свойства заданий и т.д.уметь: разрабатывать задания различных форм, определять дидактические свойства заданий, проводить дистракторный анализ заданий.Тест состоит из 15 тестовых заданий. В тесте использованы тестовые задания различной формы, однотипные задания сгруппированы в блоки. В начале каждого блока заданий имеется инструкция, указывающая на действия, которые должны выполнить испытуемые для успешного решения тестовых заданий.При выполнении заданий с формулировкой «Выберите правильный вариант ответа» Вы должны выбрать один правильный ответ из предложенных.При выполнении заданий с формулировкой «Установите соответствие» Вы должны найти такие однозначные связи между позициями первого и второго столбиков, чтобы одной позиции первого столбика соответствовала только одна позиция второго. Повтор используемых позиций не допустим. Вид тестирования – бланковое, с использованием отдельных бланков для ответов студента. В бланк ответов заносятся ФИО, номер группы, вариант, номера заданий и соответствующие им цифровые обозначения правильных (правильного) ответов.Время выполнения теста – 20 мин.Система заданийЗадания необходимо располагать в порядке возрастания предполагаемой трудности.Задания одной формы необходимо компоновать в один блок под одной инструкцией.Блоки заданий необходимо располагать по возрастанию трудностиМатрица покрытияНаглядное «покрытие» учебных элементов тестовыми заданиями
Типы ошибок Не корректная работа дистракторов Отсутствие логической корректности в формулировках заданий Нарушение требования краткости Просчеты, способствующие угадыванию правильного ответа Не корректная работа дистракторов Неработающие дистракторы Подбор неоднородных вариантов ответа Неработающие дистракторыНа этапе апробации теста необходимо обратить внимание на те дистракторы, которые не выбираются испытуемыми.Очевидно, что эти дистракторы по каким-либо причинам не выполняют своих функций – не отвлекают внимание незнающих испытуемых от правильного ответа.Эти дистракторы следует исключить из задания и заменить работающими.Подбор неоднородных вариантов ответаОтветы к заданию неоднородны в силу того, что подбираются по разным основаниям для классификации.Для испытуемых с большим опытом выполнения тестов они кажутся неправдоподобными.Подбор неоднородных вариантов ответаНе правильно1) равна 0.2) больше 0.3) меньше 0.4) переменная.Правильно1) равна 0.2) больше 0.3) меньше 0.Отсутствие логической корректности в формулировках заданий Несколько по существу правильных ответов, но различных по полноте Двусмысленность формулировок задания Оценка нескольких знаний в задании В задании проверяются оценочные суждения Варианты ответов противоречат содержанию задания Несколько по существу правильных ответовНе правильноФИЗИЧЕСКИЕ СВОЙСТВА КИСЛОРОДА1) тяжелее воздуха.ПравильноВыберите правильный и наиболее полный вариант ответа:ФИЗИЧЕСКИЕ СВОЙСТВА КИСЛОРОДА1) тяжелее воздуха.ФИЗИЧЕСКИЕ СВОЙСТВА КИСЛОРОДА1) тяжелее воздуха, имеет характерный запахДвусмысленность формулировокЭтот недостаток наиболее характерен для заданий открытой формы, но может присутствовать и в закрытых заданиях.Обычно наиболее способные обучаемые, прочитав задания, начинают сомневаться в правильности понимания ими смысла задания и задают вопросы.Двусмысленность формулировок заданияНе правильноДополните:ПЕРВЫМ ПРЕЗИДЕНТОМ РОССИЙСКОЙ ФЕДЕРАЦИИ БЫЛ _____________.ПравильноДополните:ФАМИЛИЯ ПЕРВОГО ПРЕЗИДЕНТА РОССИЙСКОЙ ФЕДЕРАЦИИ _____________.1) Путин В.В.2) Ельцин Б.М.3) Горбачев М.С.4) Медведев Д.А.Оценка нескольких знаний в заданииНе правильноИзменится ли температура кипения в открытом сосуде при увеличении атмосферного давления? Если изменится, то как?1) увеличится.2) уменьшится.3) останется неизменной.4) изменится.Правильно1) увеличится.2) не изменится3) уменьшится.1) изменится.2) не изменитсяВ задании проверяются оценочные сужденийПри этом присутствуют слова «как вы думаете», «что по вашему мнению» и т.п. Это как раз и является тем, что выходит за границы тестовых измерений. Тестами можно проверить только объективно истинные знания, а не мнение учащихся.Например, на вопрос: «Что послужило причиной отречения от престола императора Николая II?» могут быть различные мнения, каждое из которых к тому же может быть хорошо аргументированным.Обсуждение такого рода проблем должно стать темами семинарских занятий и других форм обучения.Варианты ответов противоречат заданиюНе правильнокак изменится сила трения скольжения при движении бруска по горизонтальной плоскости, если силу нормального давления увеличить в 2 раза?1) увеличится в 2 раза.2) уменьшится в 2 раза.3) увеличится в 4 раза.4) не изменится.Правильноесли силу нормального давления увеличить в 2 раза, ТО сила трения скольжения при движении бруска по горизонтальной плоскости1) увеличится в 2 раза.2) уменьшится в 2 раза.3) увеличится в 4 раза.4) уменьшится в 4 раза.Нарушение требования краткости В задании отсутствует постановка проблемы Повторение слов в вариантах ответа Правильный вариант ответа длиннее всех остальных Наличие лишней информации в задании Совмещение инструкции и задания В задании отсутствует постановка проблемыВ силу этого мы имеем краткое задание, а центр тяжести в формулировке перенесен на ответы, которые намного длиннее, чем содержательная часть.При нарушении правильных пропорций задания ответы становятся громоздкими и трудночитаемыми.В задании отсутствует постановка проблемыНе правильноучебный план – этоПравильноДОКУМЕНТ, ОПРЕДЕЛЯЮЩИЙ ПЕРЕЧЕНЬ ПРЕДМЕТОВ, ИХ РАСПРЕДЕЛЕНИЕ ПО ПЕРИОДАМ ОБУЧЕНИЯ И ОБЪЕМ ЧАСОВ НА ИХ ИЗУЧЕНИЕ, НАЗЫВАЕТСЯ1) учебный план.2) учебная программа.3) государственный стандарт.Повторение слов в вариантах ответаНе правильноучебный план – этоПравильноПравильный вариант ответа длиннее всех остальныхЭтот недочет можно объяснить требованием точности задания, но если такая закономерность станет понятной испытуемому, то он не читая будет выбирать наиболее длинные варианты ответов.Не правильно4) перечень предметов, распределенных по циклам, объем часов, отводимых на их изучение и форму контроля знаний, умений, навыков учащихся.ПравильноНаличие лишней информации в заданииИ как следствие усложненные грамматические конструкции, перегруженные причастными и деепричастными оборотами.Так как в заданиях закрытого типа есть варианты ответов, то поле деятельности испытуемых сужено и они не выйдут за обозначенные рамки задания.Следовательно, всю вспомогательную информацию из задания следует исключить.Не правильноДОКУМЕНТ, ОПРЕДЕЛЯЮЩИЙ ПЕРЕЧЕНЬ ПРЕДМЕТОВ, РАСПРЕДЕЛЕННЫХ ПО ЦИКЛАМ И ПЕРИОДАМ ОБУЧЕНИЯ, А ТАКЖЕ ОБЪЕМ ЧАСОВ, ОТВОДИМЫХ НА ИХ ИЗУЧЕНИЕ И ФОРМУ КОНТРОЛЯ ЗНАНИЙ, УМЕНИЙ, НАВЫКОВ УЧАЩИХСЯ.1) учебный план.2) учебная программа.3) государственный стандарт.ПравильноДОКУМЕНТ, ОПРЕДЕЛЯЮЩИЙ ПЕРЕЧЕНЬ ПРЕДМЕТОВ, РАСПРЕДЕЛЕННЫХ ПО ПЕРИОДАМ ОБУЧЕНИЯ, И ОБЪЕМ НА ИХ ИЗУЧЕНИЕ1) учебный план.2) учебная программа.3) государственный стандарт.Совмещение инструкции и заданияВ задании не должно быть слов типа «укажите», «обведите кружком» и т.п. Эта информация должна содержаться в инструкции.Совмещение инструкции и заданияНе правильноДопишите определение учебного плана – это ДОКУМЕНТ, ОПРЕДЕЛЯЮЩИЙ ______________________________________________________________________________ПравильноДопишите определение:учебный план – это ДОКУМЕНТ, ОПРЕДЕЛЯЮЩИЙ ______________________ |