Кручав. Практическая работа №3 (к теме 5). Практическая работа Проектирование тестовой технологии контроля усвоения учебного предмета Теоретическая часть Одним из объективных средств контроля за достижением поставленных целей является тестирование. Термин тестирование
 Скачать 26.36 Kb.
|
|
Практическая работа: Проектирование тестовой технологии контроля усвоения учебного предмета Теоретическая часть Одним из объективных средств контроля за достижением поставленных целей является тестирование. Термин «тестирование» происходит от английского test, что значит «испытание, исследование, проба». Процедура тестирования используется для измерения или оценки природных и приобретенных способностей с целью предвидения поведения или достижений человека при определенных обстоятельствах. Тестирование - далеко не новый, но в советский период отечественной педагогики мало применявшийся метод контроля. В 80-90-е гг. XIX в. психологи начали изучать индивидуальные различия людей. Это привело к возникновению так называемого испытательного эксперимента - исследования с помощью теста (А. Дальтон, А. Кеттел и др.). Применение тестов послужило толчком для развития психометрического метода, основы которого были заложены А. Бине. Вслед за психометрическими тестами измерения интеллектуального развития появились тесты достижений, помогающие оценить уровень обученности учащихся. В настоящее время тестирование - целенаправленное, одинаковое для всех обследование, которое проводится в строго контролируемых условиях. Тест - это основной инструмент тестирования, применяемый для выявления уровня сформированности у учащихся знаний и умений в соответствии с методикой измерения и оценкой результатов. Тест как измерительный инструмент должен иметь: • описание методики применения; • структурированный набор специально подобранных заданий; • критерии оценивания тестовых заданий и (или) ключи ответов; • описание характеристик (статистических, экспертных, технологических) теста в целом и отдельных заданий; • систему интерпретации результатов тестирования. Тест включает в себя два основных элемента: задание, которое выдается учащемуся для выполнения, и эталон ответа, образец правильного и качественного выполнения этого задания, с которым сравниваются ход и результаты деятельности учащихся. Наглядно структуру теста выражают следующим образом: Т (тест) = 3 (задание) + Э (эталон) . Преподаватель, сверяя пооперационно ответ учащегося с эталоном, приходит к выводу о качестве теста. Тест, лишенный эталона, превращается в обычное задание, решение о качестве выполнения которого принимается на основе субъективного мнения преподавателя. Особенностями тестового метода контроля уровня подготовки обучающихся являются: • предъявление большого количества относительно коротких заданий каждому обучающемуся по всему объему контролируемого материала; • объективность оценивания (независимость от контролирующего лица); • надежность оценки как следствие широкого охвата материала и разнообразия заданий по сложности; • возможность применения оценочной шкалы с большим числом градаций; • быстрота обработки результатов; • демократичность формы контроля; • возможность проведения контроля любым сотрудником учебного заведения; • достоверная и полная информация об уровне усвоения всего предмета и его отдельных разделов и тем; • документальность ответов учащихся Тестирование позволяет выявить уровень усвоения темы, выяснить, в какой степени результаты обучения соответствуют поставленным целям. Если значительная часть учащихся не выполнила одно и тоже задание или группу взаимосвязанных заданий, то это должно послужить сигналом к корректировке преподавателем своих действий по обучению. Тестирование позволяет выявить уровень усвоения темы, как групповой, так и индивидуальный для каждого учащегося. Диагностика уровня усвоения дает возможность индивидуализировать обучение, наметить для каждого учащегося максимальные, реально достижимые результаты обучения, нижней границей которых служат обязательные результаты обучения. Качество теста определяется такими характеристиками, как надежность и валидность. Надежность - это получение устойчивых результатов, безотказность, долговечность, сохраняемость при заданных условиях. Надежность выражается способностью с достаточной для практики одинаковостью характеризовать исследуемый показатель как заданием в целом, так и его частями, или по-другому: тот же показатель одним и тем же заданием, но в разные моменты времени. Валидность - характеристика степени соответствия между тем, что измеряется, и тем, что должно измеряться. К числу источников неудовлетворительной надежности относят: 1. Субъективизм при оценке результатов выполнения заданий теста. Субъективизм оценок является непременным атрибутом оценок при включении в тест заданий со свободно конструируемыми ответами. При анализе результатов их выполнения всегда наблюдаются различия между подходами разных экспертов и между ответами одного и того же испытуемого при повторном выполнении им теста. Наиболее эффективный метод преодоления, отмеченного недостатка- использование закрытых заданий, которые благодаря возможности объективной оценки результатов выполнения при прочих равных условиях ведут к повышению надежности теста. 2. Угадывание. Как показывают специальные исследования, угадывание существенно снижает надежность теста, особенно в тех случаях, когда тестируется группа слабых учеников, которые обычно прибегают к догадке при выполнении наиболее трудных заданий теста. 3. Отсутствие логической корректности формулировок заданий теста. Как правило, некорректные задания пропускают сильные ученики, что в целом негативно отражается на надежности теста. 4. Неоправданный выбор весовых коэффициентов. При правильном положении вещей выбор весовых коэффициентов в процессе подсчета индивидуальных баллов обучаемых должен базироваться на соответствующей теории. Только в том случае, когда весовым коэффициентам приданы оптимальные значения, их введение не ведет к снижению надежности теста. 5. Длина теста. Надежность возрастает по мере увеличения длины теста. Для удовлетворительной надежности обычно достаточно 30 заданий теста. 6. Отсутствие стандартной инструкции к тесту. Инструкции к тесту должны быть предельно стандартизованы и точны. Любые неоднозначности, двусмысленности и отступления от требований стандартизации в инструкции ведут к снижению надежности теста. Другие источники снижения надежности. Иные источники ненадежности связаны с испытуемыми, а не с заданиями теста. Испытуемый может плохо себя почувствовать во время работы над тестом либо ошибочно понять инструкцию и указать вместо правильного неверный ответ. На результаты выполнения теста могут повлиять усталость и скука, температура в помещении, шум за окном и т. п. Таким образом, тестирование как процедура контроля имеет свои достоинства и недостатки при широком использовании тестов в учебном процессе. Достоинствами тестирования являются: • высокая объективность процесса измерений и интерпретации результатов; • возможность обеспечения стандартизации условий измерения; • приемлемый уровень надежности; • возможность обеспечить валидность измерения, в первую очередь валидность содержания; • достаточная точность, которую можно повысить заменой традиционной 4-балльной шкалы на более протяженную (от 0 до 10; 100-балльную); • небольшие затраты времени на измерения в больших группах; • незначительный уровень влияния субъективных факторов во время тестирования; • легкость обеспечения продолжительного сохранения измерений результатов и автоматизация их обработки. Недостатками продвижения тестирования в учебный процесс являются: • необходимость обоснованного изменения психологии воспитания и обучения, связанная с переходом к высшему уровню состязательности и индивидуализма; • замена учебников, рассчитанных на устное опрашивание, новыми, ориентированными на тестовую форму проверки знаний; • значительные затраты времени на первичную подготовку качественных материалов для проведения измерений; • необходимость преодоления сопротивления и комплекса предубеждений приверженцев старых методов педагогических измерений; • малое количество специалистов по тестированию в системе образования, что замедлит процесс перехода на современное тестирование. Тесты могут быть использованы при входном, поурочном, тематическом, рубежном и итоговом контроле. Тесты бывают трех уровней. Тесты первого уровня. Для проверки усвоения учебной информации на первом уровне должны использоваться тесты, требующие выполнения деятельности по узнаванию изучаемого объекта. В тестах первого уровня выполняется алгоритмическая репродуктивная деятельность с подсказкой, так как ответ содержится в самом задании. Тесты на опознание. В них одна существенная операция - выбор из альтернативы «да» - «нет», «верно» - «неверно» либо выбор между двумя ответами. Примеры: Верно ли утверждение: В инжекторной горелке поступление горючего газа и кислорода в смеситель осуществляется под одинаковым давлением. Эталон: нет Коэффициент расплавления выражается отношением массы электрода, расплавленной за единицу времени горения дуги, к единице сварочного тока. Эталон: да Выберите правильный ответ: Пламя называется окислительным 1) с избытком кислорода; 2) с избытком ацетилена; Эталон: 1 Тесты на различие. Этот вид тестов отличается от тестов на опознание тем, что их выполнение осуществляется в условиях поиска, создаваемого рядом стоящими вариантами ответов. Разновидностью тестов на различие являются тесты-классификации. Примеры: Укажите номера правильных ответо. 1. Мощностью сварочного пламени называется: 1) количество сжигаемого газа в единицу времени при сварке; 2) давление горючей смеси на сварочную ванну; 3) количество кислорода, подаваемого в сварочную горелку. Эталон: 1 2. За какое количество оборотов коленчатого вала осуществляется рабочий цикл четырехтактного карбюраторного двигателя: 1) 1 оборот; 2) 2 оборота; 3) 4 оборота. Эталон: 2 Тесты-классификации. Это разновидность тестов на различение. В них соединены несколько тестов на различие. Пример: Установите соответствие:
Эталон: 1 –А; 2 -В; 3 -Г; 4-Б. Тесты второго уровня В тесты второго уровня включаются специальные задания для проверки знаний, позволяющие воспроизвести информацию об изучаемых учебных элементах без опоры на помощь и подсказку извне. Наиболее простыми являются тесты-подстановки. Тесты-подстановки. В них, как правило, бывают пропущены ключевые понятия, фразы, формулы или другой какой-либо существенный элемент текста. Примеры Дополните: 1) Свойство металла или сочетания металлов образовывать при установленной технологии сварки соединение, отвечающее требованиям, обусловленным конструкцией и эксплуатацией изделия, называется_________ Эталон: свариваемостью Другая разновидность тестов второго уровня- конструктивные тесты. В них включаются задания, требующие самостоятельного конструктивного ответа: воспроизвести формулировку, дать характеристику, написать формулу, проанализировать явление, выполнить схему. Тест - типовая задача. Он характеризуется тем, что содержит условия, необходимые для решения, т. е. данные и требования того, что необходимо найти в ходе решения задачи. Алгоритм решения задачи может быть найден из известных формул. Эталон такого задания представляет рациональную последовательность всех операций. Все тесты второго уровня позволяют воспользоваться заранее приготовленным эталоном, что является необходимым условием объективности в оценке знаний учащихся. Тесты третьего уровня Они используются тогда, когда требуется определить умения учащихся выполнять предварительные преобразования с условиями задачи и методиками их решения. Тестами третьего уровня являются нетиповые задачи, требующие эвристической деятельности по применению знаний на практике. Тест - нетиповая задача. Ее решение состоит в сведении нетиповой задачи к типовой путем преобразования известных формул или нахождения алгоритма решения. Пример: 1. Контроль качества швов сварной конструкции, выполненных полуавтоматической сваркой в среде СО, показал, что: 1) в шве имеются поры; 2) узкая ширина шва; 3) шов имеет радужный цвет. Определите причины и укажите способы предотвращения этих явлений. Эталон
Тест « Черный ящик». В него, как правило, включена проблемная ситуация, решение которой содержится в известных для учащихся знаниях и умениях. Опираясь на них, учащиеся выполняют предложенное задание. Пример Предложите водителю к знаку аварийной остановки дополнительное средство предупреждения о стоящем на проезжей части транспортном средстве в условиях ограниченной видимости. Эталон: водители большегрузных автомобилей, остановившись на проезжей части дороги, в качестве дополнительной меры часто устанавливают позади транспортного средства ведро с дизельным топливом и поджигают его. Тестов четвертого уровня в педагогической практике не существует, так как они должны характеризоваться тем, что выявляют умения учащихся ориентироваться и принимать решения в новых проблемных ситуациях. Как правило, может существовать несколько решений проблемной ситуации, поэтому эталон к таким тестам создать очень трудно. Встречаются следующие формы тестовых заданий: 1. Вопрос или утверждение и выбор ответов. 2. Задание открытой формы (похоже на тест-подстановку). 3. Задание на установление соответствия. 4. Задание на установление правильной последовательности. Задания первой формы В. С. Аванесов предлагает реализовывать не в вопросительной, а в утвердительной форме. Такая формулировка, с его точки зрения, позволяет избегать упрощенных ответов «да - нет». В заданиях с двумя ответами легко набрать баллы за счет догадки. Поэтому в качестве оптимума пробовались три, четыре, пять, шесть и более ответов. И хотя с увеличением числа последних вероятность правильного ответа действительно снижается, но растет и громоздкость задания. Поэтому общей тенденцией стало стремление не к увеличению, а к оптимизации числа ответов, что положительно сказывается на качестве как заданий, так и теста в целом. Задание открытой формы отличается от теста-подстановки тем, что ответ в конце предложения ставят обучающиеся, т. е. они заканчивают предложение. В заданиях на установление соответствия даются две колонки, в одной из которых даны вопросы, а в другой - множество ответов, из которых необходимо выбрать правильные. С помощью заданий на установление правильной последовательности выясняется уровень знаний и умений испытуемых по выполнению определенных предписаний, правил. Например, дается в произвольном порядке ряд операций, событий, явлений и т. п. Обучающийся должен проставить номер в соответствии с их последовательностью. Чтобы грамотно составить систему тестового контроля знаний, преподавателю необходимо определить: • количество тестовых контролей в семестре; • количество баллов за каждый тестовый контроль и количество вопросов в нем; • способ тестирования: «накопленным итогом» или поэтапное тестирование; • форму проведения контроля (в аудитории, в дисплейном классе, с участием преподавателя и т. д.); • виды вопросов, входящих в контроль, и ответов на них; • форму представления учащимися ответов на вопросы и способы проверки ответов. Принципы отбора содержания тестов: 1. Значимость, т. е. в задание включаются наиболее важные, ключевые, сущностные знания. 2. Научная достоверность, т. е. в задания включается только то, что является объективно истинным. Спорные в науке истины не включаются в задание. 3. Соответствие содержания теста или тестового задания уровню современного состояния науки: проверять знания следует не только на достоверном, но и на современном научном материале. 4. Репрезентативность - необходимо включать не только значимые элементы содержания, но и обращать внимание на полноту и их достаточность для контроля. 5. Возрастающая трудность: в начале теста рекомендуется давать более легкие вопросы, чтобы обучающийся мог ответить на них положительно. Тогда у него появится вера в себя и он лучше выполнит все задания. 6. Вариативность содержания. Содержание теста не может оставаться неизменным и независимым от развития науки и техники. 7. Системность содержания, т. е. подбираются задания, отвечающие требованиям системности знаний. 8. Комплектность и сбалансированность содержания теста. Тест, разработанный для итогового контроля знаний, не может состоять из материалов только по одной теме, даже если эта тема является ключевой в учебной дисциплине. 9. Взаимосвязь содержания и формы. При разработке контрольных тестовых работ необходимо учитывать следующие требования: • сложность заданий теста должна соответствовать уровню, установленному государственными образовательными стандартами; • к каждому варианту заданий прилагаются эталоны правильных ответов; • необходимо определить время на выполнение контрольных заданий с учетом их сложности и объема; • контрольные тестовые работы должны выполнять не менее 50 % студентов группы; • повторно одни и те же контрольные тестовые задания обучающиеся не выполняют. Основные этапы разработки: 1) анализ профессиональной характеристики с учетом уровней квалификации; 2) анализ содержания учебного предмета и учебной программы с целью определения профессионально значимых тем, уровней усвоения и целей обучения; 3) анализ содержания тем с целью определения основных знаний и умений учащихся по теме; 4) разработка тестов различного уровня. Важными условиями объективизации теста являются: • выделение содержания, которое необходимо контролировать; • определение существенных операций и измерение результатов выполнения теста; • оценка выполнения теста. Оценка за теоретические знания по результатам выполнения заданий 1-го и 2-го уровней усвоения выставляется путем определения соотношения числа правильно выполненных заданий к общему числу заданий теста и затем вычисления коэффициента усвоения (К): К = n/N, где п - число правильных ответов; N — число вопросов, содержащихся в тексте задания. Принято считать, что материал усвоен на требуемом уровне, если К > 0,7. При К = 0,9-1,0 выставляется оценка «5», при К = 0,8-0,9- «4», при К = 0,7-0,8 - «3», при К < 0,7 - «2». В педагогической практике часто используются так называемые псевдотесты, или тестовые задания. Иногда их называют задания в тестовой форме. Отличие псевдотестов от тестов в том, что, во-первых, в их задании нет информации о признаках объектов, о которых идет речь, а есть только вопрос или само задание и, во-вторых, смешиваются уровни контроля, следовательно, невозможно выявить существенные операции ч поставить объективную оценку, а это значит, что в оценке псевдотестов допускается субъективизм. Именно по этим причинам они и называются псевдотестами. ЗАДАНИЯ: 1. Ознакомьтесь с теоретическими подходами тестовой технологии контроля знаний и умений. 2. Разработайте тестовые задания первого, второго и третьего уровня усвоения различного типа, используя содержание учебного материала по преподаваемым дисциплинам (количество вопросов не менее 15 по каждому уровню). 3. Дайте письменные ответы на контрольные вопросы: 1. В чем состоят особенности тестирования как процедуры контроля знаний и умений учащихся? 2. Каким требованиям должны удовлетворять тестовые задания? 3. В чем особенности тестов разных уровней? 4. Каковы принципы отбора содержания для тестовых заданий? 5. Что понимают под коэффициентом усвоения? |