пиза. Международные сравнительные исследования как составная часть системы оценки качества образования
 Скачать 3.42 Mb.
|
|
МЕЖДУНАРОДНЫЕ СРАВНИТЕЛЬНЫЕ ИССЛЕДОВАНИЯ КАК СОСТАВНАЯ ЧАСТЬ СИСТЕМЫ ОЦЕНКИ КАЧЕСТВА ОБРАЗОВАНИЯ В РОССИЙСКОЙ ФЕДЕРАЦИИ Денисенко Илья Сергеевич заместитель директора ФГБУ «ФИОКО» denisenko@fioco.ru Международные сопоставительные исследования в Российской Федерации Федеральная служба по надзору в сфере образования и науки (Рособрнадзор) МЕТОДОЛОГИЯ и критерии оценки качества общего образования в общеобразовательных организациях на основе практики международных исследований качества подготовки обучающихся Единый государственный экзамен Более 600 тыс участников 11 классы Обеспечение приема в вузы, итоговая аттестация по обязательным предметам Государственная итоговая аттестация Школьное оценивание Выборочные исследования Основной государственный экзамен 9 классы более 1,2 млн участников Итоговая аттестация по программе основного общего образования, помощь в выборе траектории дальнейшего обучения Сравнительные международные исследования От 2 до 6 тыс участников PISA, TIMSS, PIRLS, ICCS, TALIS Сопоставление результатов России по годам и с другими странами Национальные исследования качества образования 4-10 классы Около 50 тыс участников Исследование значимых тенденций и проблем в образовании Всероссийские проверочные работы Более 3 млн участников 4, 5, 10, 11 классы Ежегодное добавление классов Результаты используются для мониторинга введения образовательных стандартов, продвижения единых ориентиров в оценивании уровня подготовки школьников, самодиагностики школ, организации адресного повышения квалификации Исследования компетенций учителей От 2 до 15 тыс участников Подготовка к введению единых принципов аттестации учителей на основе профессионального стандарта ЕСОКО. Оценка предметных и метапредметных результатов Оценка Единая система оценки качества образования (ЕСОКО) o Результаты образования обучающихся o Профессиональные компетенции учителей, директоров школ o Региональные и муниципальные управленческие механизмы o Отношение общества к системе образования Аналитика Рекомендации Управление o Развитие управленческих механизмов o Корректировка программ развития образования o Реализация адресных проектов в области образования o Единая база данных ОКО o Формирование управленческих решений на основе анализа o Для всех уровней системы образования o Для учителей o Для родителей Единая база данных оценки качества образования o база результатов оценочных процедур на федеральном и региональном уровне o контекстные данные o база данных об управленческих механизмах и инструментах o в перспективе – единые кодификаторы содержания и требований Развитие подходов к анализу индивидуальных образовательных траекторий Инструменты управления o поиск позитивных практик o зоны риска, зоны контроля o рекомендации Инструменты проведения процедур ОКО o банк заданий ВПР, генерация вариантов o банк заданий для процедур контроля качества образования Аналитика – основа ЕСОКО Ключевые факторы повышения результатов Требования к результатам (включая умения) Содержание Требования к условиям обучения Научная и педагогическая экспертиза Регулярное обновление, актуализация СТАНДАРТЫ УЧЕБНИКИ, ПОСОБИЯ Образовательные результаты учеников Компетенции учителей Механизмы обеспечения качества образования ОБЪЕКТИВНАЯ ОЦЕНКА Международные сравнительные исследования качества образования Организация экономического сотрудничества и развития – OECD PISA TALIS PIAAC Международная Ассоциация по оценке образовательных достижений – IEA TIMSS PIRLS Международное исследование Анализ результатов Проверка заданий с открытым ответом Контроль за проведением исследований Координация работы региональных центров Перевод инструментария Верификация инструментария Адаптация инструментария Международные сравнительные исследования качества образования TALIS Teaching and Learning International Survey является масштабным и авторитетным международным сопоставительным исследованием школьной образовательной среды, условий профессиональной деятельности и развития учителей. Цикл исследования TALIS составляет 5 лет: • 2008 год (24 страны) • 2013 год (34 страны ) • 2018 год ( 46 стран) • Отчет по результатам проведения третьего цикла исследования TALIS будет опубликован ОЭСР в 2019 году. TALIS Российская Федерация принимает участие в исследовании TALIS начиная с первого цикла. Область оценивания: • условия работы школьных учителей; • различные аспекты школьной образовательной среды; • особенности организации работы учителей; • используемые учителями методики преподавания; • прохождение учителями программ повышения квалификации; • роль директоров школ в организации работы учителя и поддержка, которую они оказывают учителям TALIS PIAAC The Programme for the International Assessment of Adult Competencies – это исследование ключевых компетенций и навыков работы с информацией у взрослого населения и использования данных навыков на работе, дома и в других ситуациях. • Исследование оценивает компетенции взрослых по трем направлениям (когнитивный тест): - Читательская грамотность - Математическая грамотность - Способность решать практические задачи в технологически насыщенной среде • Исследование собирает дополнительно информацию о… (базовый опросник): - Уровне образования - Опыте работы - Практике применения искомых компетенций в работе - Уровне социально-экономического благополучия Направление исследования PIAAC 2008–2019 – первый цикл Три «раунда» первого цикла: 2008–2013, 2012–2016, 2015–2019 2018–2023 – второй цикл Циклы исследования PIAAC PIAAC 2018–2023 • 2018–2019 – подготовка инструментария • 2020 год – апробация нового инструментария • 2021 год – основное исследование • 2022 год – анализ данных • 2023 год – объявление международных результатов • Исследование образовательных достижений учащихся 4 и 8 классов в области математики и естествознания, включающее оценку не только их знаний и умений, но и отношения к предметам, интересы и мотивации к обучению TIMSS Trends in Mathematics and Science Study сравнительное исследование качества математического и естественнонаучного образования Циклы исследования TIMSS • Цикл исследования TIMSS составляет 4 года: 1995 год 1999 год 2003 год 2007 год 2011 год 2015 год 2019 год Российская Федерация принимает участие в исследовании TIMSS с 1995 года. Структура естественнонаучной части теста исследования TIMSS (4 и 8 классы) по разделам естествознания и видам познавательной деятельности (Распределение времени тестирования, в %) 4 класс 8 класс Содержательные области теста 45% Биология 35% Биология 35% Физические науки 20% Химия 20% География 25% Физика 20% География Виды деятельности 40% Знание 35% Знание 40% Применение 35% Применение 20% Рассуждение 30% Рассуждение Структура математической части теста исследования TIMSS (4 и 8 классы) по разделам математики и видам познавательной деятельности (Распределение времени тестирования, в %) Математическая часть теста TIMSS 4 класс 8 класс Содержательные области теста 50% Числа 30% Числа 35% Геометрия 30% Алгебра 15% Анализ данных 20% Геометрия 20% Анализ данных Виды деятельности 40% Знание 35% Знание 40% Применение 40% Применение 20% Рассуждение 25% Рассуждение Исследование eTIMSS-2019 • 2018 год – апробационный этап исследования eTIMSS-2019 • 32 образовательные организации из 3 субъектов Российской Федерации • 1626 учащихся 4 классов и 1514 учащихся 8 классов Особенность исследования eTIMSS-2019 – компьютерный формат, включение интерактивных заданий. Исследование eTIMSS-2019 1 • Инструкция 2 • Задания по математике 3 • Задания по естествознанию 4 • Краткая анкета Инструментарий исследования eTIMSS-2019 Компьютерный тест учащегося состоит из 4 частей: Примечание: учащийся получает задания и по математике, и по естествознанию, последовательность предъявления заданий зависит от варианта, который получает учащийся. Анкета учащегося (бумажный формат) Анкета родителей учащихся 4-х классов Анкета учителей (онлайн) Анкета администрации (онлайн) Анкеты Инструментарий исследования eTIMSS-2019 Вид работы Время 4 классы 8 классы 1. Организационная часть: распределение учащихся по рабочим местам, чтение инструкции и т.д. ≈ 30 мин ≈ 30 мин 2. Выполнение первой части теста. 36 мин 45 мин 3. Перерыв (Длительность перерыва по усмотрению администрации школы). ≈ 10-20 мин ≈ 10-20 мин 4. Выполнение второй части теста. 36 мин 45 мин 5. Заполнение анкеты ≈ 10 мин ≈ 10 мин Всего: ≈ 122 – 132 мин ≈ 140 – 150 мин Распределение времени на проведение тестирования на компьютере в 4 и 8 классах (eTIMSS) PIRLS Progress in International Reading Literacy Study международное исследование качества чтения и понимания текста учащимися начальной школы Циклы исследования PIRLS Цикл исследования PIRLS составляет 5 лет: 2001 год (35 стран) 2006 год (40 стран) 2011 год (49 стран) 2016 год (50 стран) 2021 год Российская Федерация принимает участие в исследовании PIRLS с 2001 года. Результаты Российской Федерации в исследовании PIRLS • PIRLS-2001 • 16 место среди 35 участников • PIRLS-2006 • 1-е место среди 45 участников • PIRLS-2011 • 2-е место среди 35 участников • PIRLS-2016 • 1-е место среди 50 участников Результаты исследования PIRLS-2016 Российская Федерация 581 балл Выборка российских учащихся 4577 выпускников начальной школы из 206 образовательных организаций 42 регионов страны Изменение результатов российских школьников за четыре цикла исследования PIRLS По сравнению с 1-м циклом исследования PIRLS результаты российских учащихся увеличились на 53 балла. Международное исследование качества чтения и понимания текста PIRLS • В исследовании PIRLS оцениваются два вида чтения, которые чаще других используются учащимися во время учебных занятий и вне школы: чтение с целью приобретения читательского литературного опыта; чтение с целью освоения и использования информации. Проверяемые умения: • нахождение информации, заданной в явном виде; • формулирование простых выводов; • интерпретация и обобщение информации; • анализ и оценка содержания, языковых особенностей и структуры текста. Международное мониторинговое исследование читательской грамотности PIRLS ( 4 класс) Инструментарий исследования PIRLS-2016 • Тетрадь на бумажной основе, которая включает два текста (один текст художественный, другой – научно-популярный) с заданиями к каждому из них; • Анкета для учащегося; • Анкета для учителя; • Анкета для родителей; • Анкета для администрации школы. ePIRLS -2021 – инновационное исследование цифрового чтения Отличительные особенности исследования ePIRLS-2021: • 1) Компьютерный формат проведения тестирования • 2) Использование интерактивной интернет-среды (окно веб- браузера с открытым веб-сайтом, всплывающие окна и анимация ) • Исследование ePIRLS оценивает то, насколько хорошо учащиеся могут читать в онлайн среде, включая умение пользоваться вкладками, навигационной панелью, графическими символами, ссылками и полосой прокрутки. Пример задания на контроль умения работать с гиперссылками ePIRLS -2021 инновационное исследование цифрового чтения Согласно информации на сайте, что такое орбита? Пример задания на интерпретацию и интеграцию информации с веб-страницы с использованием навигации по интерактивным изображениям ePIRLS -2021 инновационное исследование цифрового чтения Соедините каждый элемент робота с той функцией, которую он выполняет. Международная программа по оценке образовательных достижений учащихся PISA (Programme for International Student Assessment) – это международное сопоставительное исследование качества образования, в рамках которого оцениваются знания и навыки учащихся школ в возрасте 15-ти лет. PISA Исследовательский вопрос: «Обладают ли учащиеся 15-летнего возраста, получившие общее обязательное образование, знаниями и умениями, необходимыми им для полноценного функционирования в обществе?» функционирования в обществе?» Циклы исследования PISA 2000 год 2003 год 2006 год 2009 год 2012 год 2015 год 2018 год 2021 Россия принимает участие во всех циклах исследования PISA начиная с первого цикла. Цикл исследования PISA составляет 3 года: Страны-участницы PISA-2018 Выборка РФ в исследовании PISA-2018 1.Республика Башкортостан 2.Республика Дагестан 3.Республика Карелия 4.Республика Марий Эл 5.Республика Саха (Якутия) 6.Республика Северная Осетия - Алания 7.Республика Татарстан 8.Чеченская Республика 9.Чувашская Республика 10.Алтайский край 11.Краснодарский край 12.Красноярский край 13.Ставропольский край 14.Астраханская область 15.Брянская область 16.Волгоградская область 17.Воронежская область 18.Ивановская область 19.Иркутская область 20.Калининградская область 21.Кемеровская область 22.Курганская область 23.Курская область 24.Ленинградская область 25.Московская область 26.Нижегородская область 27.Новосибирская область 28.Оренбургская область 29.Пензенская область 30.Пермский край 31.Ростовская область 32.Рязанская область 33.Самарская область 34.Саратовская область 35.Сахалинская область 36.Свердловская область 37.Томская область 38.Тульская область 39.Челябинская область 40.Забайкальский край 41.г. Москва 42.г. Санкт-Петербург 43.Ханты-Мансийский автономный округ 43 региона РФ 9 708 учащихся 15-летнего возраста из 264 образовательных организаций (коэффициент участия 95,6%). Выборка: • 151 образовательная организация • 7 852 учащихся (52 учащихся 15-летнего возраста от каждой образовательной организации) Исследование PISA-2018 в г. Москва Исследование PISA-2018 в Московской области • Фактически в исследовании приняли участие 2 541 учащихся 15-летнего возраста из 61 образовательной организации Московской области. Коэффициент участия составляет 97,2%. • Исследование PISA-2018 в Республике Татарстан • Фактически в исследовании PISA приняли участие 7348 учащихся 15-летнего возраста в 239 образовательных организациях Республики Татарстан. Коэффициент участия составляет 97,1%. Этап 1: отбор образовательных организаций • Назначается региональный координатор • У региональных координаторов запрашивается база всех образовательных организаций общего образования региона (формируется в формате электронной таблицы программы Excel в шаблоне базы данных ) • Проверка и корректировка баз данных, полученных из регионов • Процесс формирования выборки • Согласование выборки образовательных организаций с региональными координаторами • Согласование выборки образовательных организаций с Международным центром исследования PISA Формирование выборки в исследовании PISA • Этап 2: процесс отбора учащихся • Региональные координаторы высылают список, в который должны быть включены все без исключения учащиеся 2002 года рождения • Формирование выборки учащихся в специальной программе KeyQuest • Программа KeyQuest: – формирует список учащихся, которые будут принимать участие в тестировании; – присваивает участникам тестирования идентификационные номера; – определяет номера вариантов (форм) для каждого участника тестирования. Формирование выборки в исследовании PISA Модель оценки функциональной грамотности PISA Читательская грамотность Естественнонаучная грамотность Математическая грамотность Читательская грамотность – способность человека понимать и использовать письменные тексты, размышлять о них и заниматься чтением для того, чтобы достигать своих целей, расширять свои знания и возможности, участвовать в социальной жизни. Естественнонаучная грамотность – это способность человека занимать активную гражданскую позицию по вопросам, связанным с естественными науками, и его готовность интересоваться естественнонаучными идеями. Естественнонаучно грамотный человек стремится участвовать в аргументированном обсуждении проблем, относящихся к естественным наукам и технологиям, что требует от него следующих компетентностей: научно объяснять явления, оценивать и планировать научные исследования, научно интерпретировать данные и доказательства. Математическая грамотность – это способность индивидуума формулировать, применять и интерпретировать математику в разнообразных контекстах. Она включает математические рассуждения, использование математических понятий, процедур, фактов и инструментов, чтобы описать, объяснить и предсказать явления. Она помогает людям понять роль математики в мире, высказывать хорошо обоснованные суждения и принимать решения, которые должны принимать конструктивные, активные и размышляющие граждане. Читательская грамотность Естественнонаучная грамотность Математическая грамотность Глобальные компетенции Финансовая грамотность Модель оценки функциональной грамотности PISA-2018 Инструментарий исследования Учащиеся 15-ти летнего возраста (52 от школы) Администрация школы • Тест (USB) • Анкета (USB) • Анкета онлайн Анкета учащегося Анкета учащегося содержит вопросы: • об образовании родителей; • должности родителей, характере выполняемой ими работы; • культурных, материальных и образовательных ресурсах семьи. Анкета администрации Расчет времени проведения исследования PISA Вид работы Общее время Время на выполнение работы учащимися Подготовка компьютерного класса 60 минут (примерно) - Ввод учетных данных учащихся при входе в программу тестирования и выполнение тренировочных заданий 15 минут (примерно) 15 минут (примерно) Чтение инструкции к Разделу 1 теста 5 минут (примерно) 5 минут (примерно) Тестирование (первый час работы) 60 минут (ровно) 60 минут (ровно) Короткий перерыв Не более 5 минут Не более 5 минут Чтение инструкции к Разделу 2 теста 5 минут (примерно) 5 минут (примерно) Тестирование (второй час работы) 60 минут (ровно) 60 минут (ровно) Перерыв 15 минут 15 минут Анкетирование учащихся 50 минут (примерно) 50 минут (примерно) Завершение работы, сбор и передача данных 5 минут (примерно) 5 минут (примерно) Упаковка материалов тестирования и приведение в порядок помещения для тестирования 30-40 минут (примерно) - Всего 5 ч 20 мин - 5 ч 40 мин (примерно) 3ч 30 мин - 3 ч 50 мин (примерно) Результаты PISA по Российской Федерации Результаты исследования PISA в РФ Наблюдается повышение результатов российских учащихся. PISA-2021 Математическая грамотность (основное направление исследования PISA -2021) Читательская грамотность Естественнонаучная грамотность Креативное мышление fioco.ru Оценка качества образования Международные сопоставительные исследования Благодарю за внимание! |