Оценка качества образования в условиях дистанционного
 Скачать 2.63 Mb.
|
|
44 Оценка качества образования в условиях дистанционного обучения Россия Были отменены основные государственные экзамены (ОГЭ) для 9-классников. Итоговые оценки выставлялись на основании годовых, выставленных школой. Франция Во Франции произошла отмена экзамена BAC по окончании обучения в лицее, которое не- обходимо для поступления в вузы. С момента введения данного экзамена при Наполеоне в 1808 году это первый случай, когда он не будет проходить в традиционной форме. В 2020 году студенты получили средний балл по каждому предмету, рассчитанный из оценок, полу- ченных за тесты и домашние задания в течение всего года. Нидерланды В стране были отменены все центральные национальные экзамены. Учащиеся получали свои аттестаты об окончании школы на основе результатов предыдущих школьных экзаменов, которые обычно составляют 50% от итоговой оценки (другую половину оценки составляет результат внешнего экзамена). Норвегия Были отменены все письменные экзамены для старшеклассников. Итоговая оценка в табель успеваемости по курсу будет ставиться на основании школьных оценок, которые составляют 80% оценки от итоговой оценки студента. При 20-процентном вкладе экзаменов в итоговую оценку последствия их отмены кажутся управляемыми и не столь драматичными. Италия Были отменены письменные экзамены по окончании школы. Оценка учителя по курсу будет составлять 60% от общего балла, а не 40%, как это было ранее. Устные экзамены планирует- ся проводить в соответствии с графиком и с соблюдением мер безопасности. Во всех рассмотренных примерах отмена экзаменов сопровождается использованием (ча- стичным или полным) итоговых школьных оценок. Заключение Подводя итог обзора опыта организации выпускных и вступительных экзаменов в ряде за- рубежных стран в условиях пандемии, резюмируем условия и особенности, которые лежат в основе реализации той или иной модели в конкретных странах (таблица 2.1). Очевидно, что на практике использовались различные способы организации экзаменов с учетом национального контекста. Страны выбрали те меры и варианты, которые им подхо- дят наилучшим образом с учетом таких факторов, как сроки и масштабы распространения короновируса, техническая готовность необходимой инфраструктуры, а также содержание и график проведения своих оценочных процедур. В целом отметим, что страны старались решить в первую очередь задачу организации имен- но национальных экзаменов, от которых зависит дальнейшая судьба школьника и которые далеко не всегда можно полностью отменить. Что касается других оценочных процедур, то 45 Опыт проживания пандемии системами школьного образования стран постсоветского пространства Модель организации экзаменов Условия/особенности реализации модели Проведение экзаменов без изменения сроков - Обеспечение мер безопасности - Возможность проведения в сжатые сроки - Официальные сроки проведения экзаменов приходятся не на весну, а на осень Перенос экзаменов на более поздний срок - Обеспечение мер безопасности - Согласованность со сроками приемной компании в вузы - Предоставление возможности выбора заданий в тестах для про- верки того, что действительно было изучено - Сокращение числа сдающих ― использование экзамена только для поступления в вузы и отказ от учета при аттестации за курс школы Перевод процедуры проведения экзаме- на в онлайн - Наличие необходимой технической инфраструктуры - Наличие опыта организации онлайн-экзаменов - Возможность сдачи экзамена на дому - Применение прокторинга с технологией искусственного интел- лекта, - Другой формат проведения (open book/open note ― возможно использовать учебники и другие материалы) - Организация университетами нескольких этапов сдачи экзаме- нов (предметные тесты и собеседование) Отмена экзаменов и использование аль- тернативных данных - Использование «расчетных баллов» — прогнозные баллы учени- ка по предмету, предоставляемые школой, а также дополнитель- ные статистические данные - Учет школьных оценок и дополнительных статистических данных за предыдущие годы - Использование среднего балла, рассчитываемого на основе школьных оценок за последний год - Отмена весеннего этапа сдачи при наличии 2-го осеннего этапа - Использование результатов итоговой аттестации в школе на ступени основной школы (9 класс) - Использование школьных оценок по изучаемым курсам в случа- ях, когда они традиционно являлись частью итоговой аттестации наряду с экзаменом. Таблица 2.1. Условия и особенности реализации моделей организации экзаменов в странах мира Источник: Reimers, Schleicher, 2020б, Таблицы 6, 31. в 2020 году они либо отменялись, либо проводились в сокращенном режиме. Этот тезис можно проиллюстрировать примером национальных мониторингов качества образования, которые используются для выработки образовательной политики и мер, принимаемых на уровне национальных систем образования. В частности, по решению министерства образования в Австралии отменен в 2020 году на- циональный мониторинг NAPLAN (проводится для 3, 5, 7-х и 9-х классов). Он возобновится в 2021 году. В Новой Зеландии отменен национальный мониторинг National Monitoring Study of Student Achievement, который проводится ежегодно на выборках учащихся 4-х и 8-х классов. Национальный мониторинг NAEP (The National Assessment of Educational Progress) в США, про- водящийся ежегодно на выборке 4, 8-х и 12-х классов, в 2020 году реализован в урезанном режиме. Вместо предметных тестов проводились только исследования долгосрочных тен- денций по математике и языку, которые в стране осуществляются с 70-х годов. 46 Оценка качества образования в условиях дистанционного обучения В качестве важного урока, который национальные образовательные системы могут извлечь из опыта 2020 года, следует отметить, что ситуация с пандемией стимулирует образователь- ные системы: ● более активно осваивать и использовать цифровые инструменты и сервисы в оценоч- ных процедурах; ● больше доверять учителю и школе, делегируя им оценку знаний учащихся. 47 Опыт проживания пандемии системами школьного образования стран постсоветского пространства Армения: Эффективность и безопасность – ключевые характеристики систем оценки качества образования в период пандемии COVID-19 Арсен Багдасарян В образовании в период пандемии важно выделить два процесса — это преподавание и оце- нивание. Мы остановимся на процедурах оценивания, которые будем рассматривать в двух аспектах: эффективность и безопасность — академическая и эпидемиологическая. Академи- ческая безопасность связана с обеспечением прозрачности и объективности оценивания, защиты от списывания и фальсификации результатов, гарантии достоверности и надежности оценок. Эпидемиологическая безопасность — это снижение риска распространения забо- леваемости путем использования комплекса мер защиты. Через эти две призмы и стоит рас- сматривать опыт системы оценки качества образования в период дистанционного обучения. Эффективность обучения в дистанционном формате может быть связана с рядом факторов, одним из которых является возрастной. В младшей школе контроль за образовательным процессом ребенка осуществляют, помимо учителя, еще и родители, особенно мама. Мотива- ция и ответственное обучение также чаще находится под контролем родителей. Разделение полномочий между учителем и родителем может быть эффективным решением для данного возраста. В старшей школе и без пандемии существует проблема мотивации. В выпускном классе боль- шая часть учеников приобретают знания не для того, чтобы обогатить свой запас, расширить кругозор, а только с целью сдать экзамен. Такую подготовку чаще обеспечивает репетитор, а не школьный учитель. Такой подход привел к заметному снижению эффективности обуче- ния в старшей школе в период пандемии. Студенты вузов в этом смысле проявляют бо ́льшую осознанность. Свой выбор они уже осу- ществили и в большинстве своем готовы самостоятельно учиться. Наиболее ярко влияние осознанности в период пандемии отразилось на повышении эффективности учебы маги- странтов, которые в большей степени мотивированы на получение образования: они точно знают, зачем им это нужно. Второй важный фактор — предметный. В условиях пандемии преподавание математики или гуманитарных дисциплин сильно отличается с точки зрения эффективности. Для повышения качества образования важно понять, какие барьеры и риски в каждой предметной области с 48 Оценка качества образования в условиях дистанционного обучения наибольшей вероятностью могут привести к потерям качества, и минимизировать их. Напри- мер, в дисциплинах, которые находятся на стыке математических, социально-гуманитарных и педагогических наук, эффективность, на мой взгляд, в условиях пандемии даже выросла. Наиболее наглядно особенности онлайн-оценивания в период пандемии можно выявить в сравнении с предыдущими годами, когда все процедуры проводились в привычном очном формате. Опыт проведения и результаты таких аттестационных мероприятий как государ- ственные экзамены — защита дипломных работ выпускников вузов и единые государствен- ные экзамены (ЕГЭ) выпускников школ — позволяет оценить реакцию системы на возникшие в связи с пандемией форс-мажорные обстоятельства. Государственные экзамены Ереванского государственного университета в этом году были проведены полностью в онлайн-формате. ЕГЭ в условиях пандемии проходил очно, но со всеми мерами обеспечения эпидемиологической безопасности. Если говорить о государственных экзаменах, то и без пандемии соблюдение академической безопасности не играло особой роли в процедурах их проведения. При этом обнаружилось, что данные аттестационные процедуры в онлайн-формате оказались более эффективны, так как в этом случае возникает гораздо меньше отвлекающих факторов и можно обеспечить больше комфорта на местах как у студентов, так и у членов комиссии. В таких условиях на- блюдалась максимальная концентрация внимания и усилий обеих сторон. С другой стороны, сам процесс оценивания оказался в большей степени объективным: к обсуждению итоговой оценки члены комиссии подходили с более обособленным мнением, нежели при очной защите, когда преподаватели так или иначе обмениваются впечатлениями во время выступления студента. Здесь эффективность в условиях пандемии была выше, но это процедура оценивания, в которой об академической безопасности речь не идет, так как мошенничество не имеет смысла. Если сравнить оценочные процедуры, реализуемые в очном и в онлайн-форматах, можно за- фиксировать, что установленные требования к защите и критерии оценки не изменились при переходе в дистанционный режим. Но возникли новые технические процедуры, такие как загрузка материалов, организация очереди, получение доступа к конференции и прочие во- просы. Появление новых технических процедур не привело ни к одной заметной проблеме, поскольку студенты в подобных вопросах ориентируются достаточно свободно, а преподава- телям, у которых возникали сложности, в обязательном порядке помогали администраторы. В результате оценивание в онлайн-формате оказалось более внимательным, более непо- средственным, более мотивированным. Если речь идет о мероприятиях с высокими ставками, таких как ЕГЭ, то здесь безопасность – это ключевой момент. В условиях пандемии ЕГЭ в Армении проводились очно, так как обеспечить академическую безопасность имеющимися методами тестирования пока невоз- можно. Поскольку процедура единого экзамена уже отработана и доказала свою жизнеспо- собность, было принято решение о проведении этих процедур в очном формате. Первосте- пенной задачей при этом стало обеспечение эпидемиологической безопасности. Принятые Министерством образования Армении решения, касающиеся оценочных проце- дур, сложно назвать абсолютно эффективными из-за особенностей форс-мажора. В корот- кий срок адаптации сложно найти универсальные решения, которые бы предусматривали все возможные аспекты и минимизировали потери. Решения принимались экстренно, при 49 Опыт проживания пандемии системами школьного образования стран постсоветского пространства отсутствии глубоких исследований, литературы и специалистов в области функционирова- ния системы оценивания и в целом системы образования в условиях дистанционной работы. Единственный опыт, на который могла опираться система, – это онлайн курсы, которые суще- ствовали и до пандемии. Одним из временных решений Министерства образования Армении, направленных на ми- нимизацию эпидемиологических рисков, был переход к поступлению в вузы по результатам только одного экзамена. На специальности, где в обычное время абитуриент сдавал два или три экзамена, в 2020 году можно было поступить, сдав всего один. У этого решения законо- мерно появились негативные последствия. Если результаты трех предметов позволяли ран- жировать абитуриентов, то при поступлении по одному экзамену рассеивание результатов значительно меньше. Возникла ситуация, при которой абитуриентов с одинаковыми баллами больше, чем соответствующих мест в вузах. Подобные последствия принятых решений, ско- рее, не ошибка, а просто неизбежная побочная реакция. Сложно представить, как могла бы развиваться ситуация с пандемией, если бы состоялись все три экзамена. Вводимые изменения сопровождались широкими информационными мероприятиями. Разъ- яснительная работа по принимаемым Министерством решениям проводилась по телевиде- нию, на сайте Центра оценки и тестирования, на сайте Министерства и в прямом эфире в Фейсбуке. Все причины и особенности принятых решений были опубликованы и максималь- но широко озвучены, но, как показало время, многие их не прочли или не разобрались во всех тонкостях, что в итоге привело к определенному недовольству заинтересованных субъ- ектов. Ожидаемо наибольшее негативное отношение к принятым решениям возникло со сто- роны той части абитуриентов, кто не прошел конкурс, и их родителей. В целом же отношение остальной части населения было нейтральным, так как общество понимает риски и причины принимаемых решений. Оценивая последствия проведения ЕГЭ и приемной кампании, можно сделать вывод, что Центр оценки и тестирования справился с организацией очных экзаменов с точки зрения эпидемиологической безопасности. Вспышек заболеваемости и явных негативных послед- ствий выявлено не было. Более того, возникли предложения провести в 2021 году два экза- мена с тем же уровнем организации. Здесь важно будет взвесить возможные риски с учетом актуальных к тому времени показателей уровня заболеваемости и понять цели, ради которых стоит рисковать. Отсутствие на сегодняшний момент универсальных решений в сфере оценки качества об- разования в дистанционном формате не позволяет уверенно говорить об общей модели дальнейшего развития системы ОКО. Например, сейчас невозможно представить никакой альтернативы очному проведению ЕГЭ. Часто озвучиваемое предложение проводить ЕГЭ по аналогии с TOEFL 50 требует для эффективной реализации такого же авторитета, как у ETS (Educational Testing Service 51 ). Если Центр оценки и тестирования будет иметь такой же авто- ритет, то тогда онлайн-экзамены могут быть возможны, но при этом потребуется полная раз- работка новых тестов, контрольно-измерительных материалов и новой системы оценивания. 50 TOEFL (Test of English as a Foreign Language, то есть «Тест на знание английского языка как иностранного») – стан- дартизованный тест на знание английского языка, результаты которого могут использоваться для подтвержде- ния уровня владения английским языком абитуриентами из неанглоязычных стран при поступлении в вузы США, а также Европы и Азии. 51 Служба образовательного тестирования (ETS), основанная в 1947 году, является крупнейшей в мире частной некоммерческой организацией по тестированию и оценке в сфере образования. Разрабатывает и проводит раз- личные стандартизированные тесты, в том числе международные, в более чем 180 странах мира. 50 Оценка качества образования в условиях дистанционного обучения Даже опыт дистанционного обучения в условиях пандемии не подтолкнул систему ОКО Ар- мении к развитию этого направления. Еще до пандемии было очевидно, что мир движется в сторону компьютерного тестирования. Насколько мне известно, в Грузии еще до пандемии пробовали проводить тестирование по системе CAT — Computer adaptive testing. Это совер- шенно особая система, где нет фиксированного теста, но есть банк заданий, из которого тестируемому последовательно поступают новые задачи, которые компьютер подбирает на основе результатов решения предыдущих. Таким образом система адаптируется к уровню способностей, знаний, умений испытуемого. Подход, подобный CAT, имеет множество преи- муществ и дополнительных возможностей в части оценки качества образования, но академи- ческая безопасность при вступительных экзаменах, то есть экзаменах с высокими ставками, вероятнее всего, будет страдать. В Армении тестировалась не CAT-система, а фиксированный онлайн-тест. Вопрос перехода очных экзаменов в онлайн-формат вызывает необходимость определить цели этого перехода. Опыт Армении показал, что при грамотной санитарно-эпидемиологи- ческой организации взрыва заболеваемости не происходит, а академическая безопасность даже усилилась, так как ради социальной дистанции было увеличено расстояние между те- стируемыми, что практически полностью исключило возможность списывания. Тем не менее, будущее за адаптивным тестированием, но для перехода к новой системе не- обходимо почти полное разрушение старой. Здесь вновь встает вопрос о целях. Адаптивное тестирование для выпускного экзамена кажется нелогичным. Суть адаптивного тестирова- ния в том, чтобы максимально увеличить точность измерения. Если стоит вопрос об оконча- нии школы, то есть об аттестации, то нужна ли такая точность? Адаптивное тестирование работает следующим образом: изначально система принимает знания тестируемого за среднее значение, а потом, по мере решения им задач, начинается подбор белее сложных или более легких заданий. На основе этого методом последователь- ных приближений выясняется точный уровень знаний испытуемого. В школьных выпускных экзаменах, как и в сессионных и в государственных экзаменах вузов, нет необходимости в такой точности. С учетом этого система ОКО Армении в ближайшее время вряд ли пойдет по пути разработки новых оценочных процедур. Наиболее вероятно, что лучшим решением в условиях пандемии будет усиление процедуры обеспечения эпидемиологической безопасности при сохране- нии всех оценочных процедур, которые уже годами сложились и функционируют с высоким уровнем эффективности. Важно сохранить суть отработанных инструментов. При этом сам тест может быть реализован не на бумажном носителе, а на электронном, например, на план- шете, ноутбуке. Но если мы говорим об экзаменах с высокими ставками, то академическая безопасность выходит на первый план, ведь если есть возможность мошенничества, то какой смысл в точности результатов? В Армении была попытка начать исследования того, как можно переориентировать систему на компьютерное тестирование. Российская программа READ1, организованная совместно с Всемирным банком, ориентировалась на финансирование актуальных проектов в области оценки качества образования. Одно из предложенных направлений исследований заклю- чалось в сравнении результатов теста по математике по методу действующего теста ЕГЭ в бумажном и цифровом варианте. Были использованы параллельные тесты, результаты кото- 51 Опыт проживания пандемии системами школьного образования стран постсоветского пространства рых подлежали сравнению. Есть гипотеза, что использование компьютера не влияет на ре- зультаты, что, в целом, подтверждается, например, результатами TIMSS. Тем не менее, проект остался на пилотном уровне, а основное исследование так и не состоялось. Сейчас все попытки начать исследования или опыты по переходу на новые формы оценива- ния упираются в финансы. Новых веяний по поводу изменения процедур пока не возникает, тем более по поводу ЕГЭ. Единственное новое решение, обусловленное опытом 2020 года — ввести для поступления в вузы сдачу двух предметов вместо одного. Новые подходы к оцениванию нужно пробовать и применять, но чего это будет стоить и ка- кие риски повлечет? Не будет ли способ решения влиять на оценку? Для перехода к новым формам необходимо разрушение всех отлаженных процедур, поэтому важно оценивать объ- емы потенциальных потерь и выгод. Необходимо сформулировать цели и обосновать необ- ходимость этих рисков, если она действительно существует. 52 Оценка качества образования в условиях дистанционного обучения Казахстан: Оценка качества образования в условиях дистанционного образования Кали Абдиев Чрезвычайное положение в Казахстане было введено с 16 марта 2020 года, два раза его сроки продлевались, и этот режим действовал до 11 мая. Ограничительные меры по недопу- щению распространения коронавирусной инфекции в разных объемах и границах регионов продолжали действовать до конца 2020 года и продлены на несколько месяцев 2021-го. Внутришкольное текущее и промежуточное оценивание В первые дни карантина были приняты меры по организованному завершению третьей четверти в школах и переходу на дистанционное обучение с началом четвертой четверти 2019/20 учебного года. Нормативной базой для этих мер стал приказ Министра образования и науки Республика Казахстан (МОН РК) от 14 марта «Об усилении ограничительных мер по недопущению коронавирусной инфекции COVID-19 в организациях образования на период пандемии» 52 . Приказом продолжительность весенних школьных каникул вместо обычных 10- 12 дней была определена в 21 день. Были также утверждены «Методические рекомендации по организованному завершению третьей четверти учебного года». Следующие решения стали основными по этому приказу: ● досрочное проведение Суммативного оценивания 53 четверти (СОЧ), при этом количе- ство дисциплин, по которым оно проводится, не было изменено и соответствовало предусмотренному в Типовых учебных планах; ● указания по разработке планов уроков по непройденным материалам 16-20 марта и 3-5 апреля, с включением учебных заданий. Также рекомендовано разработать учебные задания на каникулярное время (не по всем предметам); ● результаты Суммативного оценивания разделов (СОР) и СОЧ заносятся в электронные журналы, к которым в каникулярное время обеспечивается доступ обучающимся, педа- гогам и родителям; ● педагоги предоставляют обязательную обратную связь обучающимся и родителями по выполнению учебных заданий в электронном журнале и в онлайн-режиме. 52 |