Методические рекомендации по разработке КИМ. Методические рекомендации по разработке кимов учебной дисциплины. Требования к оформлению Комплекта контрольноизмерительных материалов (кимов) по учебной дисциплине
 Скачать 0.54 Mb.
|
|
Методические рекомендации по разработке Контрольно-измерительных материалов (КИМов) для учебных дисциплин Рекомендации по созданию Контрольно-измерительных материалов включают в себя: Методические рекомендации по разработке КИМов учебной дисциплины. Требования к оформлению Комплекта контрольно-измерительных материалов (КИМов) по учебной дисциплине. Методические рекомендации по разработке Контрольно-измерительных материалов (КИМов) для учебных дисциплин 1. Направления в оценивании качества подготовки специалистов Постепенный отказ от инструментов оценки, преимущественно направленных на оценку заучивания, узнавания фактов, деятельности по образцу, алгоритмических знаний переход к измерителям, обеспечивающим оценку компетенций, способности к профессиональной, практической и творческой деятельности. Введение значимых оценочных средств: тестов практических умений, проектов, решения ситуационных заданий. Основные методы оценки ♦ задания; ♦ сбор образцов деятельности обучающихся, демонстрирующих освоение ими требуемых компетенций; ♦ экзамен (беседа, собеседование, тестирование, интервью); ♦ практические задания по демонстрации умений; ♦ свидетельства, демонстрируемые в процессе смоделированной или реальной трудовой ситуации; ♦ журналы/дневники, которые ведут обучающиеся; ♦ индивидуальные или групповые проекты. Виды и формы контроля и аттестации  Формы контроля: собеседование; коллоквиум; тест; контрольная работа; лабораторная, расчетно-графическая и т.п. работа; эссе творческие работы; творческие проекты; реферат; отчет (по практикам, научно-исследовательской работе студентов и т.п.); зачет; дифференцированный зачет; экзамен (по дисциплине, модулю, итоговый государственный экзамен); курсовая работа (проект); выпускная квалификационная работа. Устные формы контроля Собеседование– специальная беседа преподавателя со студентом на темы, связанные с изучаемой дисциплиной, рассчитанная на выяснение объема знаний студента по определенному разделу, теме, проблеме и т.п. Коллоквиум(лат. colloquium – разговор, беседа) может служить формой не только проверки, но и повышения знаний студентов. На коллоквиумах обсуждаются отдельные части, разделы, темы, вопросы изучаемого курса, обычно не включаемые в тематику семинарских и других практических учебных занятий, а также рефераты, проекты и иные работы обучающихся. Зачет и экзаменпредставляют собой формы периодической отчетности студента, определяемые учебным планом подготовки по специальности СПО или профессии СПО. Зачеты служат формой проверки качества выполнения студентами лабораторных работ, усвоения учебного материала практических и семинарских занятий, успешного прохождения учебной ,производственной и преддипломной практик и выполнения в процессе этих практик всех учебных поручений в соответствии с утвержденной программой. Экзамен Экзамен: средство оценки способности обучающегося воспроизводить и применять умения, знания и понимание в ситуации ограниченного времени и четко заданных условий. Экзамены могут быть: ♦ практическими, оценивающими освоение конкретных умений; ♦ устными, оценивающими способность сделать устное сообщение; ♦ в форме интервью, когда результаты обучения оцениваются посредством устных вопросов, задаваемых обучающемуся (индивидуально или в группе); ♦ в форме аудирования (для оценки умения слушать и интерпретировать); ♦ теоретическими — для оценки способности обучающегося воспроизводить и применять теоретические знания (ответы на различные вопросы — краткие ответы, структурированные ответы, эссе). Экзамен по дисциплине служит для оценки работы студента в течение семестра (года, всего срока обучения и др.) и призван выявить уровень, прочность и систематичность полученных им теоретических и практических знаний, приобретения навыков самостоятельной работы, развития творческого мышления, умение синтезировать полученные знания и применять их в решении практических задач. По итогам экзамена, как правило, выставляется оценка по шкале порядка: «отлично», «хорошо», «удовлетворительно», «неудовлетворительно». Письменные формы контроля *тесты, *контрольные работы, * эссе, *рефераты, *курсовые работы, *научно-учебные отчеты по практикам, *отчеты по научно-исследовательской работе студентов. Тестявляется простейшей формой контроля, направленной на проверку владения терминологическим аппаратом, современными информационными технологиями и конкретными знаниями в области фундаментальных и прикладных дисциплин. Тест состоит из небольшого количества элементарных задач; может предоставлять возможность выбора из перечня ответов; занимает часть учебного занятия (10–30 минут); правильные решения разбираются на том же или следующем занятии; частота тестирования определяется преподавателем. Контрольная работа является более сложной формой проверки. Контрольная работа, как правило, состоит из небольшого количества средних по трудности вопросов, задач или заданий, требующих поиска обоснованного ответа. Контрольная работа может занимать часть или полное учебное занятие с разбором правильных решений на следующем занятии. Рекомендуемая частота проведения – не менее одной при каждой текущей и промежуточной аттестации. Эссе – одна из форм письменных работ, наиболее эффективная при освоении дисциплин циклов ОГСЭ и, в некоторых случаях, профессионального цикла. Роль этой формы контроля особенно важна при формировании общих компетенций выпускника, предполагающих приобретение основ гуманитарных, социальных и экономических знаний, освоение базовых методов соответствующих наук. Эссе – небольшая по объему самостоятельная письменная работа на тему, предложенную преподавателем соответствующей дисциплины. Цель эссе состоит в развитии навыков самостоятельного творческого мышления и письменного изложения собственных умозаключений. Эссе должно содержать чёткое изложение сути поставленной проблемы, включать самостоятельно проведенный анализ этой проблемы с использованием концепций и аналитического инструментария соответствующей дисциплины, выводы, обобщающие авторскую позицию по поставленной проблеме (рекомендуемый объём эссе – 10 тысяч знаков). Реферат– форма письменной работы, которую рекомендуется применять при освоении дисциплин профессиональных. Объем реферата может достигать 10–15 стр.; время, отводимое на его подготовку, – от 2 недель до месяца. Подготовка реферата подразумевает самостоятельное изучение студентом нескольких литературных источников (монографий, научных статей и т.д.) по определённой теме, не рассматриваемой подробно на лекции, систематизацию материала и краткое его изложение. Цель написания реферата – привитие студенту навыков краткого и лаконичного представления собранных материалов и фактов в соответствии с требованиями, предъявляемыми к научным отчетам, обзорам и статьям. Курсовая работа (проект) – более сложный, чем реферат, вид самостоятельной письменной работы, направленный на творческое освоение профессиональных дисциплин и профессиональных модулей и выработку соответствующих профессиональных компетенций. Объем курсовой работы может достигать 10–20 страниц; время, отводимое на ее написание, от 1–2 месяцев до семестра. В зависимости от объема времени, отводимого на выполнение задания, курсовая работа может иметь различную творческую направленность. При написании курсовой работы студент должен полностью раскрыть выбранную тему, соблюсти логику изложения материала, показать умение делать обобщения и выводы. Курсовая работа должна состоять из введения, основной части, заключения и списка использованной литературы. Во введении автор кратко обосновывает актуальность темы, структуру работы и даёт обзор использованной литературы. В основной части раскрывается сущность выбранной темы; основная часть может состоять из двух или более глав (разделов); в конце каждого раздела делаются краткие выводы. В заключении подводится итог выполненной работы, и делаются общие выводы. В списке использованной литературы указываются все публикации, которыми пользовался автор. При оценке уровня выполнения курсовой работы, в соответствии с поставленными целями для данного вида учебной При защите представленной курсовой работы целесообразно проводить оценивание знаниевой компоненты дисциплин, использованных при выполнении задания [Байденко, Ван Занворт 2003]. Отчеты по практикамявляются специфической формой письменных работ, позволяющей студенту обобщить свои знания, умения и навыки, приобретенные за время прохождения учебных и производственных практик. ТЕСТИРОВАНИЕТестовый контроль - это система контрольных измерительных материалов, стандартизированных процедур, технологий проверки и оценивания результатов учебной деятельности субъектов образовательного процесса. Тестирование - быстрый и эффективный способ контроля и оценки знаний. Вопросами правильной разработки тестовых заданий и методикой предъявления их тестируемому занимается тестология. ОПРЕДЕЛЕНИЕ ТЕСТАТест - это система тестовых заданий, специфической формы, позволяющая качественно и эффективно измерить уровень и структуру знаний тестируемых. Система означает, что в тесте собраны такие задания, которые обладают системообразующими свойствами. Тестовые задания представляют не набор произвольно объединенных заданий, а именно систему. Каждое задание должно удовлетворять определенным критериям. Тест, как система, обладает составом, целостностью и структурой. Состав. Тест состоит из: Тестовых заданий; Правил применения заданий; Баллов за выполнение каждого задания; Тестового балла; Рекомендаций по интерпретации тестовых результатов. СОЗДАНИЕ ТЕСТОВЫХ ЗАДАНИЙПри составлении тестовых заданий опираются на общепринятые требования: каждое тестовое задание имеет эталон правильного ответа; в тестовом задании все элементы располагаются на четко определенных местах, фиксированных в рамках выбранного типа; тестовые задания одного типа сопровождаются стандартной инструкцией, предваряющей формулировку заданий в тесте; для каждого задания разрабатывается правило выставления дихотомической или политомической оценки; тестовое задание должно быть по форме предъявления и по времени выполнения достаточно кратким. Процесс тестирования стандартизуется, если: ни одному тестируемому не дается никаких преимуществ перед другими; система подсчета баллов ко всем ответам тестируемых без исключения; в тест включаются задания одной формы, либо разных форм с соответствующими весовыми коэффициентами, полученные статистическим путем. Основная часть тестового задания может представлять собой: Вопрос. Задание в форме высказывания, которое становится истинным или ложным после выбора ответа. Ответ(ы) в данном случае является продолжением высказывания. Описанием некой практической ситуации. Вариантами ответа в данном случае будет перечень действий, который необходимо выполнить в описанной ситуации. Формулировки для составления тестовых заданий
Педагогический тест - это система заданий специфической формы, позволяющая объективно и функционально измерить уровень подготовки обучаемых  Уровень контроля Входной (Вступительный) Текущий (Тематический) Промежуточный (Рубежный) Итоговый По содержанию Гомогенный - основывается на содержании какой-либо одной дисциплины Гетерогенный - основывается на содержании нескольких дисциплин. Гетерогенный педагогический тест является по своему существу междисциплинарным, одной из разновидностей гетерогенного теста является набор гомогенных тестов. По методологии интерпретации результатов Нормативно-ориентированный тест (от англ. norm-referenced test) позволяет сравнивать уровень подготовки отдельных испытуемых друг с другом. Его основной задачей является дифференцировать уровень знаний и умений выборки тестируемых. Критериально-ориентированный педагогический тест представляет собой систему заданий, позволяющую измерить уровень индивидуальных компетенций относительно определенного критерия, функционально связанного с полным объемом знаний, навыков и умений, которые должны быть усвоены тестируемыми Формат предъявления Бланковый Ручная обработка Сканирование результатов Компьютерный Ординарный Компьютерно-адаптивный РАЗРАБОТКА КИМов (тестовых заданий)Предельное число заданий в тесте не должно превышать 60-80, на выполнение одного задания теста отводится не более 2 минуты. Контрольно-измерительные материалы (КИМы) должны быть составлены в соответствии с требованиями стандарта (знать и уметь) конкретной дисциплины. Обьем заданий к промежуточной аттестации: А) от 32 -80 часов – 30-40 заданий. Б) от 80 и больше – больше заданий. В) на текущий и рубежный контроль – количество заданий по усмотрению преподавателя. СТРУКТУРА КИМов: Пояснительная записка (цель создания тестовых заданий, описание сфер применения, общее число заданий в тесте; типы тестовых заданий, применяемых в тесте; рекомендуемое время выполнения теста; соотношение заданий по различным разделам и видам тестируемой дисциплины и т.д.) Требования ФГОС по учебной дисциплине: дидактические единицы (знать, уметь). Кодификатор (спецификация) содержания теста Тестовые задания Кодификатор (спецификация) содержания теста учебной дисциплины________________________________________ (наименование учебной дисциплины)
Пример Кодификатора (спецификации) содержания теста учебной дисциплины________________________________________ (наименование учебной дисциплины)
Структура тестового задания Инструкция Устанавливает необходимое действие испытуемого («правила игры») Например: Выберите один правильный ответ. Дополнительная инструкция Служит для концентрации внимания испытуемых на графической и (или) текстовой части задания Например: Рассмотрите рисунок и прочитайте пояснение под ним, чтобы решить поставленную задачу. ВИДЫ ЗАДАНИЙ: 
По содержанию действий обучаемого при контроле знаний можно выделить задания на: - выбор одного ответа; - выбор нескольких ответов; - установление соответствия; - становление правильной последовательности; - ранжирование; - заполнение пропусков, завершение предложений; - подстановку; - составление ответа; - вычисление ответа; - вычисление и выбор ответа. 4. Требования к разработчикам тестовых заданий ОФОРМЛЕНИЕ ЗАДАНИЯ ЗАКРЫТОЙ ФОРМЫ Инструкция для тестируемых. Тестирование начинается с короткой и четкой инструкции. Инструкция является общей и стандартной для всех испытуемых. Содержание задания. Содержание задания формулируется как можно яснее и как можно короче. Краткость обеспечивается тщательным подбором слов, символов, графиков, позволяющих минимумом средств добиваться максимума ясности смысла задания. Полностью исключаются повторы слов, малопонятные, редко употребляемые, а также неизвестные тестируемым символы. Хорошо, когда задание содержит не более одного придаточного предложения. Для достижения краткости в каждом задании лучше спросить о чем-нибудь одном. Ответы к заданиям. Они должны быть короткими и содержательными. Еще лучше, когда короткими являются и задание и ответ. Неправильный, но правдоподобный ответ называется словом дистрактор (от английского глагола tо distract - отвлекать). В общем случае, чем лучше подобраны дистракторы, тем лучше и задание. Талант разработчика проявляется в первую очередь в разработке эффективных дистракторов. Оценка. Одно из важных требований при тестировании - наличие заранее разработанных правил выставления баллов. 5. Правила правописания и оформления 1. Основу задания следует выделять одинаковым способом для всех заданий в данном тесте (например, полужирным шрифтом). Испытуемые должны запомнить стандарт оформления заданий и легко его воспринимать в процессе тестирования. 2. Если основа задания – законченное предложение, то в ее конце ставится точка, а если основа имеет вопросительную форму, то, соответственно, в конце ставится вопросительный знак. 3. Каждый вариант ответа идентифицируется (кодируется) одинаково для всего теста. Для бланкового формата тестирования кодировка применяется либо цифровая – 1), 2), 3), …, либо буквенная – А), Б), В), … и сопровождается круглой скобкой (точка нежелательна). Хороший способ кодирования латинскими буквами, например, A), B), C), D). Для компьютерного формата видимая кодировка может и не использоваться. 4. При использовании законченного предложения или вопроса в основе задания, все варианты ответа должны начинаться с заглавной буквы. 5. Если основа задания незаконченное предложение или требующее внутреннего завершения (с пропусками), то все ответы начинаются со строчных букв. 6. Варианты ответов не должны заканчиваться точкой или каким-либо другим знаком препинания. 7. Негативные формулировки в основе задания следует особенным образом выделять, например, подчеркиванием, курсивом и т.п. ( «не является…», «не отвечает…» ). 6. Требования к качеству и формату тестовых заданий Общие требования к заданиям разного типа Задания должны быть направлены на проверку значимых элементов содержания, а не тех, для которых проще формулируются задания. Задания должны соответствовать принципам научной достоверности и предметной корректности. Не допускается включение заданий, проверяющих частные, второстепенные факты. Например, на знание авторства какого-либо изречения. Следует минимизировать использование заданий на проверку знания терминов и отдельных фактов. Задание должно проверять освоение одного элемента содержания. Текст задания должен исключать всякую двусмысленность и неясность формулировок. Текст задания, как правило, формулируется предельно кратко, т.е. освобождается от всякого постороннего для данной проблемы материала. Текст задания должен иметь предельно простую синтаксическую конструкцию. Рекомендуется включать в задания как можно больше информации, представленной в графическом виде, при этом, если в задании используются рисунки, графики или формулы, они должны быть четко прорисованы и корректно отображаться на экране. В задании не используются слова, вызывающие различное понимание у испытуемых, а также слова, являющиеся подсказкой, например, «иногда», «часто», «всегда», «все», «никогда». Задания должны быть независимы друг от друга, т.е. выполнение одного задания не должно помогать выполнению другого задания (использование «зависимых» заданий в одном тесте недопустимо, поэтому, в случае наличия таких заданий в базе, они обозначаются как несовместимые). В заданиях, носящих составной характер (например, в группе заданий, относящихся к одному тексту, рисунку, таблице), необходимо также обеспечить, чтобы выполнение одного задания не зависело от выполнения другого задания данной группы. В заданиях, носящих составной характер, необходимо обеспечить, чтобы в заданиях не дублировался объект контроля. В тексте задания исключается двойное отрицание. Используемая в заданиях терминология не должна выходить за рамки учебной литературы, применяющейся при подготовке специалистов. Задания не должны дискриминировать испытуемых по какому-либо основанию (гендерные различия, этнические различия, политические, религиозные взгляды и др.). Задания должны носить светский характер, не ущемляя при этом свободу вероисповедания. Инструкции к вариантам и отдельным частям или заданиям варианта КИМ должны быть направлены на то, чтобы участники процедуры оценивания явно представляли себе, что они должны делать во время выполнения работы: где и как вводить ответы. При необходимости в инструкции должны включаться примеры заданий для разъяснения. Если в задании изложена ситуация или обстоятельства, то они должны быть знакомы студентам (обучающимся). Если в задании используется аббревиатура, то она может употребляться в тексте только после того, как она указана в скобках после полного названия. Исключением могут являться общеупотребительные аббревиатуры (ЮАР, НАТО, СНГ, СССР, КПСС, ООН, ГЭС, ЭВМ, ГДР, ФРГ и т.д.) или аббревиатуры, которые студенты должны знать (именно как аббревиатуры, т.е. не зная их лингвистической расшифровки – ОПЕК (Организация стран-экспортеров нефти), АСЕАН (Ассоциация государств Юго-Восточной Азии) и т.д.). Если в задании используются сокращения, то необходимо следить за правильностью их написания: а) без точек: ч (час), с (секунда), м (метр), км (километр), км/ч (километры в час), м/с (метры в секунду), А (ампер), Вт (ватт), га (гектар), Кл (кулон), л (литр), Ом (ом), т (тонна) и т.д. б) с точками: г. (год, город, гора), гг. (годы), см. (смотри), в.д. (восточная долгота), с.ш. (северная широта), н. ст. (новый стиль), о. (остров), рт. ст. (ртутный столб), с. (село, страница), С.-З. (северо-запад), а.е.м. (атомная единица массы) и т.д. (и так далее). 6.1. Дополнительные требования к заданиям с выбором одного верного ответа 1. Формулировка основной части задания, при соблюдении условий, изложенных в пункте 1.3., должна быть законченной, т.е. испытуемый должен из ее содержания понять, какую задачу ему предстоит выполнить до анализа предложенных вариантов ответа. Не рекомендуется включать задания, ответить на которые можно, только прочитав варианты ответов. 2. Не рекомендуется использовать задания, верный ответ в которых можно определить способом подстановки в приведенные формулы, выражения и др. 3. Количество вариантов ответа должно быть равно четырем для всех заданий с выбором ответа в варианте. 3. В ответы целесообразно включать не более двух-трех важных, ключевых слов. 4. В заданиях не должно требоваться выбрать один НЕПРАВИЛЬНЫЙ ответ при наличии нескольких правильных. 5. Из текста задания исключаются все вербальные ассоциации, способствующие выбору правильного ответа с помощью догадки. 6. Не рекомендуется использовать задания с отрицаниями в основной части. Если такое задание включается в работу, то частицу НЕ или слово, выражающее отрицание, необходимо выделить в тексте (жирным шрифтом с подчеркиванием). 7. Задания должны иметь одинаково правдоподобные дистракторы, одинаково привлекательные для выбора. 8. Правильный ответ не должен отличаться какими-либо формальными признаками от неправильных ответов (дистракторов). В частности, все ответы, по возможности, должны быть приблизительно одной длины. 9. Исключаются ответы, вытекающие один из другого или дополняющие друг друга. 10. При формулировке дистракторов не следует использовать выражения: «ни один из перечисленных», «все перечисленные» и т.д., так как они способствуют угадыванию правильного ответа. 11. Из ответов, как правило, исключаются все повторяющиеся слова путем ввода их в основной текст задания. 12. Все ответы должны быть грамматически согласованными с основной частью задания. 13. Если ответ выражен в виде числа, то, как правило, эти числа располагаются от меньшего к большему или наоборот. При этом, если в ответе имеются числа 1, 2, 3 и 4, то они должны стоять под соответствующими номерами. 14. Все ответы должны быть перечислены либо строго друг под другом, либо в одну строку, чтобы учащиеся не тратили времени на ориентировку в разнообразии возможных способов пространственного размещения ответов. Исключение составляют ответы в виде рисунков. В этом случае номера ответов располагаются слева направо (1 2), а ниже – (3 4). Список литературы: 1. Полежаева Мария Викторовна, к.п.н., заведующая кафедрой «Тестологии и оценки качества образования» Центра развития профессионального и личностного потенциала научно-педагогических кадров ФИРО. mpole@yandex.Формирование фонда оценочных средств для контроля качества освоения основной профессиональной образовательной программы при внедрении ФГОС 2.http://www.rsdn.re/File/640/ Теория_ тестирования.doc |