Лопаткина, Е. В
 Скачать 1.6 Mb.
|
|
Глава 6 КОНТРОЛЬНЫЕ ИЗМЕРИТЕЛЬНЫЕ МАТЕРИАЛЫ И ИНТЕРПРЕТАЦИЯ РЕЗУЛЬТАТОВ ТЕСТИРОВАНИЯ Практическое задание: найдите существенные отличия контрольных измерительных материалов ГИА и заданий, предложенных на итого- вой аттестации. Теоретическое задание: на основе анализа контрольных измери- тельных материалов ЕГЭ опишите их структуру и содержание. План лекции: 6.1. Контрольные измерительные материалы (КИМ). 6.2. Технология разработки контрольных измерительных материа- лов. 6.3. Шкалирование результатов ГИА и ЕГЭ и их использование в управлении качеством образования. 6.1. Контрольные измерительные материалы Вструктуре КИМ до 2010 г. выде- ляли три части (А, В, C), имеющие раз- личное число заданий в зависимости от предмета. В части А по всем предметам содержатся только задания с выбором ответов. Задания части В значительно варьируют по форме и предполагают возможность краткого регламентирован- ного ответа, установления соответствия между элементами двух множеств и Ключевые понятия контрольно- измерительные материалы технология разработки КИМ ГИА ЕГЭ шкалирование результатов Где мудрость, утраченная нами ради знания? Где знание, утраченное нами ради сведений? Томас Стернз Элиот Опережающая самостоятельная работа 74 правильной последовательности различных процессов, явлений, объ- ектов. Часть С предназначается для свободного конструирования от- вета. Например, по математике – дать развернутые решения заданий и т.д. С 2010 г. выделяют две части: ЕГЭ – В и C;ГИА – 1-я и 2-я части, имеющие различное число заданий. Содержание КИМ предназначено для получения персонифициро- ванной информации о достиже- нии выпускниками школ базово- го и повышенного уровней под- готовки по предметам. Поскольку при аттестации требуется прове- рить освоение выпускниками большинства элементов предметной подготовки, а время экзамена ограничено, для повышения репрезен- тативности охвата содержания образования приходится варьировать спецификацией контрольных измерительных материалов ГИА и ЕГЭ незначительно внутри одного года и более существенно по годам. Благодаря специальному планированию, осуществляемому предмет- ными комиссиями по разработке КИМ, за 2 – 3 года удается охватить все необходимые содержательные элементы. В целом содержание КИМ отбирается на основе спецификаций, которые ежегодно обновляются в Интернете и включают обобщен- ные планы экзаменационных работ со ссылками на соответствующие позиции кодификаторов (пронумерованных перечней содержатель- ных элементов по предметам). В содержании КИМ отображаются только предметные знания и умения, которым обучают в школе, хо- тя это противоречит современным воззрениям на приоритеты в обу- чении, принятым во многих странах. Вследствие этого российские учащиеся показывают невысокие результаты в международных срав- нительных исследованиях качества образования. Они не умеют вы- полнять задания, требующие применения знаний в ситуациях, ими- тирующих жизненные, или междисциплинарных умений. Изменяется ли структура и содержание контрольных измерительных материалов? 75 6.2. Технология разработки контрольных измерительных материалов Технологический ежегодный цикл разработки КИМ по предмету начинается с пересмотра кодификатора элементов содер- жания, подлежащих проверке, а также с создания спецификации и демонстрационного варианта КИМ. Обычно по 13 предметам, заяв- ленным в ЕГЭ, ежегодно разрабатывается не менее 10 тыс. новых заданий. Помимо целевого заказа на задания для пополнения банка ГИА и ЕГЭ объявляется конкурс, в котором принимают участие все желающие авторы тестовых заданий из различных регионов России. Материалы, представленные на конкурс, проходят экспертизу, по результатам которой осуществляется отбор и покупка тестовых заданий для банка ГИА и ЕГЭ. Специалисты ФИПИ, используя банк, формируют варианты КИМ. Затем проводится экспертиза качества содержания вариантов, анализ их параллельности и соответствие заданий требованиям тесто- вой формы. После коррекции, основанной на результатах экспертизы, КИМ передаются на апробацию, проводимую на репрезентативных выборках учащихся школ России. Обработка данных апробации и их анализ позволяют выполнить очередную коррекцию, после заверше- ния которой получаются эквивалентные варианты КИМ с комплекта- ми сопроводительной документации для проведения ГИА и ЕГЭ, соз- данные в условиях высокого уровня информационной безопасности и хранящиеся в специальных помещениях до начала ЕГЭ. После проведения экзамена и обработки данных специалисты ФИПИ готовят аналитический отчет, содержащий рекомендации по совершенствованию КИМ, которые учитываются при выполнении очередного ежегодного технологического цикла. 6.3. Шкалирование результатов ГИА и ЕГЭ и их использование в управлении качеством образования В соответствии с заявленными целями и решаемыми задачами по данным ЕГЭ (до 2007 г.) выста- вляются две оценки – в сто- и пяти- балльной школьной шкале. Первую получают специалисты Федерального Какие шкалы использу- ются при проведении ГИА и ЕГЭ? 76 центра тестирования (ФЦТ) путем шкалирования первичных данных ЕГЭ, преобразования их в стандартную шкалу логитов на основе современной теории тестов. Вторая, школьная, выбирается специалистами группы по шкалированию, организуемой Рособрнадзором во время экзаменов и состоящей из тестологов, представителей предметных комиссий ФИПИ и сотрудников ФЦТ. Для выбора границ интервалов стобалльной шкалы и установ- ления их соответствия оценкам четырехбалльной шкалы результаты ЕГЭ по каждому предмету и всем регионам подвергаются много- аспектному анализу, включающему проблемы содержательной ва- лидности школьных баллов и сопоставимости оценок по предмету в ЕГЭ разных лет. Для обеспечения содержательной сопоставимости результатов тестирования многие страны, в которых есть национальные экзамены в форме тестов или другие виды массового тестирова- ния, вводят стандартизован- ные уровневые шкалы, по- зволяющие проследить связь между содержанием тестов но годам. Важное преимущество уровне- вых шкал заключается в расширении возможности интерпретации результатов экзаменов, поскольку тестовый балл можно дополнять содержательным описанием подготовки выпускников школ в терми- нах, освоенных и неосвоенных тематических элементов предмета. В терминах теории педагогических измерений сопоставимость означает возможность переноса результатов тестирования различных лет на единую шкалу. Сопоставимость обеспечивает выпускнику возможность однократной сдачи ЕГЭ и использования своих резуль- татов при неудачном поступлении в вуз в последующие годы, а управленцам – возможность проведения сравнительных исследова- ний качества образования. На основе якорного теста определяются репрезентативные об- щенациональные нормы по различным предметам. Cобранные дан- ные служат для построения шкалы единых показателей. Каждый но- вый тест в последующие годы калибруется относительно якорного Чем обоснована необходимость достижения сопоставимости результатов ЕГЭ разных лет? 77 теста. Для построения таблиц перевода в общем случае на одной и той же выборке испытуемых обычно используют метод равных пер- центилей 16 , согласно которому показатели считаются эквивален- тными, если они имеют равные перцентили и получены на нормаль- ной группе сравнения по параллельным вариантам тестов. К недос- таткам метода можно отнести высокую стоимость, неизбежную кор- рекцию и совершенствование содержания тестов, изменение содер- жания образования и приоритетов в учебных достижениях, а к досто- инствам – стабильность и высокую точность, поскольку результаты по всем последующим версиям тестов сравниваются с одним якор- ным тестом. В связи с появлением теории IRT стали использовать более эф- фективные технологии, обеспечивающие сопоставимость результа- тов тестирования по различным годам. Эта технология основана на включении в тесты различных лет групп якорных (общих) заданий, связывающих цепочкой результаты по более поздним и более ранним версиям теста. Отсчёт ведется от шкалы, построенной на эталонной группе сравнения. Тем самым каждый вариант очередной версии теста благодаря блоку общих заданий связывается с предыдущим и последующим вариантами батареи тестов. ГИА и ЕГЭ является неотъемлемым структурным элементом ОСОКО и обеспечивает объективную информацию о реальном состо- янии качества школьного образования. Данные ГИА и ЕГЭ позво- ляют получить оценки состояния образовательных достижений выпу- скников школ, выявить тенденции и динамику изменения системы среднего образования, сформировать совокупность осно-вных факто- ров, влияющих на качество образования в различных регионах, и оценить меру их влияния. ГИА и ЕГЭ не является единственным информационным источ- ником ОСОКО. Несомненно, что помимо собранной в процессе экза- 16 Вероятность и математическая статистика : энциклопедия / под ред. Ю. В. Про- хорова М. : Большая Российская энциклопедия, 2003. С. 453 Как результаты ГИА и ЕГЭ исполь- зуются Общероссийской системой оценки качества образования? 78 мена информации о предметных знаниях и умениях выпускников школ необходимы дополнительные данные. Их перечень должен ха- рактеризовать состояние качества образования на различных ступе- нях (например, оценки умений применять знания, собранные с по- мощью портфолио; оценки общеучебных и коммуникативных уме- ний; результаты участия учащихся в олимпиадах и творческих кон- курсах и т.д.). Важным требованием, обеспечивающим корректность исполь- зования данных ГИА и ЕГЭ в ОСОКО, является учёт различных фак- торов при интерпретации результатов экзамена, лежащих зачастую за пределами влияния школы, но существенно влияющих на качество образования. Вопросы и задания 1. Почему российские учащиеся показывают невысокие результаты в международных сравнительных исследованиях качества образова- ния? Зависит ли это от содержания КИМ? Приведите примеры за- даний математического содержания международных исследований PISA и TIMSS. 2. Сколько этапов можно выделить в технологии разработки КИМ? Какие из них самые важные для создания качественных контроль- но-измерительных материалов? 3. Изменилась ли шкала результатов при проведении ЕГЭ? Если да, то в каком году это произошло? Как Вы думаете, смена шкалы влияет на уровень учебных достижений школьников? 4. Выполните каждое задание первой части ГИА или ЕГЭ не менее чем двумя способами, хронометрируя своё решение. Выполняли ли Вы при этом проверку? Список рекомендуемой литературы 1. Дорофеев, Г. В. Единый государственный экзамен по математике и тес- тирование / Г. В. Дорофеев // Математика в школе. – № 7. – 2001. – С. 63. 2. Ковалева, Г. С. Подходы к разработке контрольно-измерительных материалов для ЕГЭ / Г. С. Ковалева // Школьные технологии. – 2003. – № 4. – С. 142 – 149. 79 Глава 7 СОДЕРЖАНИЕ И СТРУКТУРА ТЕСТОВЫХ ЗАДАНИЙ ПО МАТЕМАТИКЕ Практическое задание: сравните по выбранной Вами теме задание из действующего учебника математики и тестовое задание из кон- трольно-измерительных материалов по содержанию, структуре и форме предъявления. Теоретическое задание: изучите принципы отбора ответов и прин- ципы содержания тестовых заданий, составьте рекомендации по кон- струированию тестового задания для выпускников 9 и 11 классов. План лекции: 7.1. Требования к конструированию тестовых заданий. 7.2. Структура тестового задания. Принципы отбора ответов и содер- жания тестовых заданий. 7.3. ГИА и ЕГЭ: спецификация, кодификатор, демоверсия – 2012. 7.1. Требования к конструированию тестовых заданий Для достижения высокого качест- ва образования, необходимо следовать правилу качественного подбора изме- рителей. Как всякий хороший измери- тельный инструмент, тест должен отве- чать определенным требованиям. 1. Содержательная валидность – соответствие содержания теста прове- ряемому содержанию. 2. Уровневая валидность – соот- ветствие уровня задания проверяемому уровню. Ключевые понятия требования к конст- руированию тестового задания структура тестового задания требования к струк- туре тестового зада- ния спецификация кодификатор демоверсия Об уме человека легче судить по его вопросам, чем по его ответам. Гастон де Левис Опережающая самостоятельная работа 80 3. Определенность – обеспечение общепонятности формулиро- вок заданий всеми учащимися. 4. Однозначность – создание эталона ответа, соответствующего полному и правильному решению заданий. 5. Надежность – показатель точности и устойчивости резуль- татов измерения с помощью теста при его многократном примене- нии. Характеризует степень адекватности отражения тестом соответ- ствующей генеральной совокупности заданий. 6. Стандартизованность – наличие определенных норм его вы- полнения (среднее, стандартное отклонение и т.д.) для интерпретации результатов применительно к испытуемым из различных выборок. Стандартизованный тест – тест, прошедший апробацию на репрезен- тативной выборке. Тестовое задание должно содержать инструкцию по его исполь- зованию. Инструкция тестового задания – словесные указания ис- пытуемому, связанные с выполнением тестового задания (выбором правильного ответа из нескольких вариантов; решением математиче- ской задачи и т.п.). Указывается способ записи правильного ответа (что, каким образом и где надо отметить, вписать и т.д.). Инструкция может быть единой для нескольких заданий теста, если эти задания однотипны по действиям. Рассматривая типы тестовых заданий, мож- но выделить требования к их конструированию. Тестовые задания за- крытого типа предусматривают различные варианты ответа на по- ставленный вопрос: из ряда предлагаемых выбираются один или не- сколько правильных ответов, выбираются правильные (или непра- вильные) элементы списка и др. Это задания с предписанными отве- тами, что предполагает наличие ряда предварительно разработанных вариантов ответа на заданный вопрос. Иногда варианты неверных от- ветов называют дистракторами (от английского distract – отвлечение внимания). Задания закрытого типа. Задания альтернативных ответов. К каждому заданию только два варианта ответов. Испытуемый должен выбрать один из них: «да – нет», «верно – неверно», «правильно – не- правильно» и пр. Инструкция для заданий альтернативных ответов дается, как правило, в следующем виде: а) обведите кружком вариант 81 ответа «да» или «нет», который вы считаете правильным; б) обведите ответ «да» или «нет». (Если согласны с утверждением, обведите кру- жком «да», а если не согласны – обведите «нет»). Задания альтернативных ответов являются самыми простыми, но не самыми распространёнными при составлении тестов. Это связа- но в основном со специфичностью того материала, которому в боль- шей степени соответствует эта форма заданий. Задания альтернатив- ных ответов предназначены для оценки одного элемента знаний. Пример Инструкция. Обведите ответ «да» или «нет» (если согласны с утвер- ждением – обведите кружком «да» в клеточке таблицы ответов, а если не согласны – обведите «нет»). Утверждение. Тестовое задание – это минимальная законченная часть теста в виде проверочного задания специфической формы. Варианты ответа: Эталон ответа: да. Таким образом, при конструировании тестового задания в фор- ме альтернативных ответов должны быть соблюдены следующие ус- ловия: приведена инструкция, в которой поясняется способ выбора ответа; сформулирован однозначно воспринимаемый вопрос (сужде- ние, утверждение); задание представлено в одной из приведенных выше форм; приведен эталон верного ответа. Задания множественного выбора предполагают наличие вариа- тивности в выборе ответа. Испытуемый должен выбрать правильный ответ из предложенных вариантов ответов. Инструкция для заданий множественного выбора имеет вид: обведите кружком букву, соот- ветствующую варианту ответа или запишите выбранную букву ответа в специально отведенное место. да нет Форма представления: Утверждение Ответ или Утверждение Ответ утверждение 1 утверждение 2 утверждение 3 утверждение 4 да нет да нет да нет да нет да нет 82 Пример Инструкция. Обведите кружком букву, соответствующую правильному ответу. Задание. Катер плывет по реке, скорость течения равна a км/ч, скорость катера в стоячей воде равна b км/ч. Какая из сле- дующих формул выражает время, затра- ченное катером на путь в 30 км вниз по течению и обратно? (Время стоянки не учитывается). Варианты ответа: А. 60 2 a b − ; С. b a 30 30 + ; В. a b b a − + + 30 30 ; Д. a b b a + + − 30 30 Эталон ответа: В. Таким образом, при конструировании задания множественного выбора следует сформулировать: инструкцию по выбору или записи ответа; вопрос – задание и соблюсти форму предъявления задания, а также подобрать не менее трех-четырех ответов (оптимальное коли- чество – пять ответов), среди которых имеется один верный, и указать эталон ответа. Иногда к заданиям множественного выбора относят за- дания, предполагающие несколько правильных ответов. В этом слу- чае задание считается выполненным верно, если испытуемый указал все верные и только верные ответы. В заданиях на восстановление соответствия необходимо найти или приравнять части, элементы, понятия – конструкциям, фигурам, утверждениям; восстановить соответствие между элементами двух списков. К этому же типу следует отнести задания, в которых требу- ется установить порядок ряда (упорядочить). Инструкция. Соотнесите написанное в столбцах 1 и 2 (запишите в таблицу ответов цифры из столбца 2, которые соответствуют ут- верждениям из первого списка). Форма представления: Задание (утверждение): А. Вариант ответа 1 В. Вариант ответа 2 С. Вариант ответа 3 Д. Вариант ответа 4 Эталон ответа: _________ 83 Пример Инструкция. Соотнесите формулы задания функций с их конкретными примерами, за- полнив пропуски в ответе: 1. у = kx + b; А. у = - 5x 3 ; 2. у = ax 2 + bx + c; Б. у = 2 x ; 3. у = a x ; В. у = 1+ 0,5x 2 ; 4. у = kx 3 ; Г. у = 5 – x; Д. у = – x 2 + 2x; Ответ: 1 – ___, 2 – ____, 3 – ____, 4 – ____. Эталон ответа: 1 – Г; 2 – В, Д; 3 – Б; 4 – А. Эта форма заданий достаточно разно- образна и может быть использована по всем учебным предметам и предметным областям. Число входных данных одного списка не должно превышать 10. Если в ответе планируется получить одно- значное соответствие между списками, то число элементов в первом и втором списках должно совпадать. При неоднозначном соответствии число элементов второго списка подбирается так, чтобы для каждого элемента из первого списка нашелся элемент из второго. Но в этом случае во второй список может быть включен элемент, для которого не найдется соответствующий из первого, или, наоборот, элементу второго списка соответствуют два элемента первого. Пример Инструкция. Установите соответствие между списками 1) – 4) и А. – В., укажите, на основе каких свойств из списка А – В выполняли дей- ствия 1) – 4). 1) 2 8 : 2 6 ; А. a т · a k 2) 3 3 · 2 3 ; Б. a т : a k 3) 4 2 · 4 3 ; В. (ab) n 4) 12 6 : 12 4 Ответ: 1 – ___, 2 – ____, 3 – ____, 4 – ____. Эталон ответа: 1 – Б, 2 – В; 3 – А; 4 – Б. Задания на установление последовательности можно рассмат- ривать как вариант задания на восстановление соответствия. Эта форма тестовых заданий обладает следующими преимуществами: Форма представления: Задание. Варианты ответа Столбец 1 Столбец 2 А. 1. В. 2. С. 3. Д. 4. Е. 5. Эталон ответа: 1 2 3 4 5 84 краткостью, простотой проверки и подходит для любого предмета, там, где присутствуют алгоритмическая деятельность или временные события. Инструкция. Расположите в правильной последовательности (в столбце ответов проставьте соответствую- щие буквы). Пример Инструкция. В столбце ответов проставьте соответствующие буквы. Задание. Из перечня действий а) – е) со- ставьте один из возможных планов доказа- тельства теоремы «Если а>b и с>d, то а+с>b+d»: Эталон ответа: в – а – б – д – е. Задания открытого типа бывают двух видов: свободного из- ложения или свободного конструирования, предполагают свободные ответы испытуемых по сути задания; дополнения (задачи с ограниче- нием на ответы), в них испытуемые должны также самостоятельно давать ответы на вопросы, однако их возможности ограничены требо- ваниями к записям ответа. Ограничения обеспечивают объективность оценивания результата выполнения задания. Инструкция для заданий на дополнение: вместо многоточия впишите только одно слово (символ, знак и т.д.). Инструкция для за- даний свободного изложения: выполните задание, обоснуйте ответ; закончите предложение (фразу); впишите вместо многоточия пра- вильный ответ в виде словосочетания, фразы, предложения или не- скольких предложений. Ответ 1 а) определить знак разности чисел a и b; 2 б) определить знак разности чисел с и d; 3 в) найти разность чисел (a+с) - (b+d); 4 г) сложить неравенства a > b и с > d; 5 д) сложить числа a-b и с-d и определить знак суммы; 6 е) сравнить числа, если их разность положительна; Форма представления: Задание (утверждение, вопрос). Варианты ответа: Ответ 1 А. 2 В. 3 С. 4 Д. 5 Е. Эталон ответа 85 Пример задания на дополнение Инструкция. Вместо многоточия впишите слово. Задание. Отрезок, соединяющий вершину треугольника с серединой противолежащей стороны, – это ________________. Эталон ответа: медиана треугольника. Пример задания свободного изложения Инструкция. Впишите требуемые характеристики в таблицу. Задание. Сравните функции у = 5x 2 + 2 и у = - 5x 2 - 2 по предложен- ным свойствам. Свойства у = 5x 2 + 2 у = - 5x 2 - 2 Область определения Нули функции Промежутки возрастания и убывания Множество значений функции 7.2. Структура тестового задания. Принципы отбора ответов и содержания тестовых заданий При конструировании тестовых заданий важно соблюдать некоторые общие правила, которые можно сформулировать в виде следующих положений: каждое задание имеет свой порядковый номер, который мо- жет изменяться после объективной оценки трудности задания и выбо- ра стратегии предъявления заданий теста; каждое задание имеет эталон правильного ответа; в тестовом задании все элементы располагаются на четко оп- ределенных местах, фиксированных в рамках выбранной формы; тестовые задания одной формы сопровождаются стандартной инструкцией, предваряющей формулировку задания; для каждого тестового задания разрабатывается правило вы- ставления оценки (дихотомическая, политомическая); тестовое задание должно быть достаточно кратким по форме предъявления и по времени выполнения. На основе выделенных положений можно кратко сформулиро- вать минимальные требования к структуре тестового задания: 1. Инструкция. 2. Текст задания в соответствии с формой предъявления и фор- мой записи ответа. 86 3. Правильный ответ (эталон ответа). 4. Оценочная схема. Как уже отмечалось выше, неправильные ответы, но похожие на правильные, то есть правдоподобные ответы называют дистрактора- ми. В идеале каждый дистрактор должен в равной мере использовать- ся всеми испытуемыми, выбирающими неправильный ответ. Дист- рактор, который никто не выбирает, называют неработающим и для улучшения задания его убирают. Выделяют следующие принципы подбора ответов: Противоречивость. При создании задания в одном из отве- тов используется отрицательная частица «не», а также отрицающие предлоги и слова. При использовании принципа противоречия ответы подбираются так, чтобы второй ответ отрицал первый. Логическая схема «А и не А». Пример. Уравнение х 2 + 9 = 0 решение 1) имеет; 2) не имеет. Противоположность. Противоположные ответы допускают возможность других переходных состояний. При противоречии ис- пользуется отрицание, а при противоположности один содержатель- ный ответ заменяется другим, антонимичным по смыслу. Пример. График нечетной функции симметричен относительно 1) оси абсцисс; 2) оси ординат; 3) начала координат. Однородность. Подбираются такие ответы, которые отно- сятся к одному роду, виду или отображают основные стороны, грани явления, ситуации, описанной в задании. Пример. График функции у = (х – 2) 2 получен из графика у = х 2 с по- мощью параллельного переноса: 1) вдоль оси ординат на 2 единицы вверх; 2) вдоль оси ординат на 2 единицы вниз; 3) вдоль оси абсцисс на 2 единицы вправо; 4) вдоль оси абсцисс на 2 единицы влево. 87 Кумуляция. Этот принцип означает, что содержание второго ответа включает в себя (кумулирует) содержание первого, содержа- ние третьего – второго и т.д. Здесь нередко используется союз «и», а также запятые. Пример. Отношение во множестве А называют отношением эквива- лентности, если оно: 1) рефлексивно; 2) рефлексивно и симметрично; 3) рефлексивно, симметрично и транзитивно. Сочетание. Используется сочетание слов (знаков) по два или три в каждом ответе. Пример. Механическая работа, совершенная телом при поступатель- ном движении, зависит: 1) от силы и времени; 2) силы и перемещения; 3) силы и пройденного пути. Градуирование. Применяют для заданий с тремя и большим числом ответов (возрастает, не изменяется, снижается или высокая, средняя, низкая). Пример. При увеличении значения аргумента соответствующее зна- чение функции у = 2х 1) увеличивается; 2) не изменяется; 3) уменьшается. Удвоенное противопоставление. Этот принцип применяется преимущественно в заданиях с четырьмя ответами. Пример. Отношение строгого порядка 1) рефлексивно, симметрично; 2) антирефлексивно, симметрично; 3) рефлексивно, антисимметрично; 4) антирефлексивно, антисимметрично. Определив цели составления тестов, уточнив подходы и выбрав уровень использования, разработ- чик определяет необходимые эта- пы создания тестового инструмен- тария. После этого составляется модель объекта педагогического тестирования. Эта модель может В чём отличие принципов подбора ответов и отбора содержания тестовых заданий? 88 быть представлена в виде технологической матрицы. Такая матрица носит разные названия: содержательная решётка, сетка, орга- низационно-деятельностная матрица, тестовая решётка, таблица со- держания и др. Технологическая матрица задаёт содержание, которое будет отобрано для проверки с соблюдением важности того или иного элемента содержания. Она может содержать: уровни достижений, ко- торые будут проверены, их соотношение; соответствие стандарту и некоторые другие компоненты. В самом простом случае технологическая матрица может опи- сывать только предметы, предметные области или отдельные темы разного уровня обобщения, которые должны войти в тест, и опреде- лять соотношение заданий в тесте. Выделяют следующие принципы отбора содержания тестовых заданий: Значимость. Этот принцип указывает на необходимость включения в тест только тех элементов знания, которые можно отне- сти к наиболее важным, ключевым, без которых знания становятся неполными, с многочисленными пробелами. Такие элементы знания ввиду их важности называют структурными элементами. Следова- тельно, в тест нужно включать только те материалы, которые выпол- няют роль таких элементов в индивидуальном знании. Научная достоверность. В тест включается только то со- держание учебной дисциплины, которое является объективно истин- ным и поддается некоторой рациональной аргументации. Соответст- венно, все спорные точки зрения не рекомендуется включать в тесто- вые задания. Соответствие содержания теста уровню современного со- стояния науки. Этот принцип вытекает из естественной необходимо- сти готовить специалистов и проверять их знания на современном ма- териале. Трудность в реализации этого принципа заключается в опо- средованности связи содержания теста с уровнем развития науки и с содержанием учебной дисциплины. Репрезентативность. В тест не только включаются значи- мые элементы содержания, но обращается внимание также на полно- ту и их достаточность для контроля. Репрезентативность не означает обязательного включения в тест всех элементов содержания. Ведь многие из них явно связаны между собой в общей структуре знаний, 89 включены один в другой полностью или частично. Этому принципу соответствуют основные задания, которые лучше называть структур- ными. Возрастающая трудность учебного материала. Этот прин- цип означает, что каждый учебный элемент в процессе контроля об- ладает некоторой усредненной мерой трудности. Поэтому при конст- руировании заданий следует учитывать меру трудности учебного ма- териала. Вариативность содержания. Содержание теста не может оставаться неизменным и независимым от развития науки, научно- технического прогресса, от нового содержания учебной дисциплины и от новых учебников. По мере изменения содержания учебной дис- циплины должно варьироваться и содержание теста. В содержании теста, предназначенного для разных групп испытуемых, должны вхо- дить инвариантная и вариативная части. Системность содержания. Соблюдение этого принципа оз- начает подбор такого содержания тестовых заданий, который отвечал бы требованиям системности знаний. Помимо подбора заданий с сис- темным содержанием важно иметь задания, связанные между собой и общей структурой проверяемых знаний. Комплексность и сбалансированность содержания теста. Взаимосвязь содержания и формы. Этот диалектический принцип означает, что настоящий педагогический тест можно охарак- теризовать как результат взаимовлияния содержания заданий с наи- более подходящей формой. При этом тестовую форму надо рассмат- ривать вместе с содержанием как активную сторону их взаимодейст- вия. Уже на стадии замысла содержание задания начинает обретать свою форму. Необходимо помнить, что не всякое содержание подда- ется представлению в форме тестового задания. Доказательства, об- ширные вычисления, многословные описания трудно выражаются, а то и совсем не выражаются в тестовой форме. 7.3. ГИА и ЕГЭ: спецификация, кодификатор, демоверсия – 2012 Спецификации контрольных измерительных материалов для проведения в 2012 г. еди- ного государственного эк- замена по математике со- держит следующие компо- ненты: В чём особенность спецификации контрольных измерительных ма- териалов для проведения в 2012 г. ЕГЭ? 90 1. Назначение контрольных измерительных материалов. 2. Документы, определяющие содержание контрольных измеритель- ных материалов. 3. Подходы к отбору содержания, разработке структуры КИМ ЕГЭ. 4. Структура КИМ ЕГЭ. 5. Распределение заданий КИМ ЕГЭ по содержанию, проверяемым умениям и видам деятельности. 6. Распределение заданий работы по уровню сложности. 7. Продолжительность ЕГЭ по математике. 8. Дополнительные материалы и оборудование. 9. Система оценивания отдельных заданий и экзаменационной работы в целом. 10. План экзаменационной работы 2012 г. 11. Изменения в структуре и содержании экзаменационной работы 2012 г. по сравнению с 2011 г. Кодификатор элементов содержа- ния по всем разделам включает в себя элементы содержания за курс средней (полной) школы (базовый уровень) и необходимые элементы содержания за курс основной школы. Каждому разделу («Алгебра», «Уравнения и неравенства», «Функции», «Начала математического анализа», «Геометрия», «Элементы комбинаторики теории вероятно- стей и математической статистики»), соответствующей теме и эле- ментам содержания присваиваются определённые коды. Кодификатор требований по всем разделам включает в себя тре- бования к уровню подготовки выпускников средней (полной) школы (базовый уровень). В соответствии со стандартом среднего (полного) образования и требованиями к уровню подготовки учащихся в коди- фикатор требований включаются также знания, необходимые для вы- работки соответствующих умений. Демонстрационный вариант ЕГЭ по ма- тематике 2012 г. разработан по заданию Федеральной службы по надзору в сфе- ре образования и науки Российской Фе- дерации. Демонстрационный вариант предназначен для того, чтобы дать представление о структуре будущих контрольных измеритель- ных материалов, количестве заданий, их форме, уровне сложности. Какие кодификаторы ре- гулируют подготовку и проведение ЕГЭ? Какие функции вы- полняет демоверсия? 91 Задания демонстрационного варианта не отражают всех вопро- сов содержания, которые могут быть включены в контрольные изме- рительные материалы в 2012 г. Структура работы приведена в специ- фикации, а полный перечень вопросов – в кодификаторах требований и элементов содержания по математике для составления контрольных измерительных материалов ЕГЭ 2012 г. Демонстрационный вариант содержит инструкцию по выполне- нию работы, в которой даётся краткое описание структуры работы, советы и рекомендации по процедуре её выполнения, пожелание ус- пеха. Затем следует сама работа, состоящая из двух частей. Далее приводится система оценивания контрольных измерительных мате- риалов, включая ответы к каждой части работы, решения и критерии оценивания второй её части. Вопросы и задания 1. Чем отличается кодификатор элементов содержания от кодифика- тора требований? Проанализируйте их по одному содержательно- му разделу для ГИА и ЕГЭ. 2. Как оценивается правильное решение каждого из заданий экзаме- национной работы для 11класса? Что такое первичный балл за вы- полнение всей работы, каково его максимальное значение? 3. Какое количество заданий экзаменационной работы подтверждает освоение выпускником основных общеобразовательных программ общего (полного) среднего образования? Список рекомендуемой литературы 1. Чибисова, М. Ю. Единый государственный экзамен: психологиче- ская подготовка / М. Ю. Чибисова. – М., 2004. 2. Теоретические основы обучения математике в средней школе : учеб. пособие / Т. А. Иванова [и др.] ; под ред. проф. Т. А. Ивановой. – Н. Новгород : НГПУ, 2003. – С. 304 – 310. 92 ЛАБОРАТОРНЫЕ ЗАНЯТИЯ Вопросы для обсуждения 1. Проблемы качества образования. Критерии и показатели качества образования. 2. Диагностическая деятельность учителя (сущность, структура, со- держание). 3. Психолого-педагогические критерии эффективности обучения и принципы построения контрольно-диагностических заданий. 4. Методика составления контрольных работ по математике в соот- ветствии с новыми критериями качества образования. Задания 1. Проанализируйте систему критериев и ориентиров, обеспечиваю- щих новое качество математического образования. Приведите приме- ры заданий по математике, отвечающие комплексу этих критериев. 2. Выявите особенности диагностической деятельности учителя ма- тематики общеобразовательной и профильной школ. Разработайте с использованием компьютерной техники комплект отчётной докумен- тации для проведения мониторинга по одной теме школьного курса математики. 3. Сконструируйте текст контрольной работы по математике в соот- ветствии с новыми критериями качества образования (тема и класс по выбору студента). *** Домашнее задание 1. Оформите отчет по составлению контрольной работы по математи- ке для 5 – 9 классов в соответствии с новыми критериями. 2. Подготовьтесь к лабораторной работе № 2. Творческое задание. Сконструируйте контрольно-диагностическое за- дание по одной из тем курса математики основной школы. Опишите подходы к интерпретации результатов его проведения. |