Ковалева_Оценка_функциональной_грамотности_26_02_2019. Оценка функциональной грамотности учащихся основной школы. Разработка измерительных
 Скачать 4.22 Mb.
|
|
Оценка функциональной грамотности учащихся основной школы. Разработка измерительных материалов. Ковалева Галина Сергеевна, руководитель Центра оценки качества образования Института стратегии развития образования Российской академии образования, к.п.н. Вопросы для обсуждения 1. Введение. Функциональная грамотность и международный контекст развития исследований по функциональной грамотности. 2. Мониторинг формирования функциональной грамотности. Общие подходы к оценке функциональной грамотности учащихся основной школы. 3. Разработка спецификации измерительных материалов. 4. Требования к заданиям для оценки функциональной грамотности. 5. Этапы разработки измерительных материалов. 6. Обеспечение валидности и надежности оценки. 2 «Мы должны научиться измерять то, что важно, а не то, что легко измерить» 1. Введение. Функциональная грамотность и международный контекст развития исследований по функциональной грамотности. Основные изменения в системе оценки образовательных достижений: отечественный и зарубежный опыт (1) • К традиционной функции обратной связи добавляется функция ориентации системы образования на новые результаты. • Изменение целевых установок: от контроля и оценки качества образования к управлению и обеспечению качества образования. • Основной задачей оценки и критерием оценки выступают не овладение обязательным минимумом содержания, а овладение системой учебных действий с изучаемым учебным материалом: способность к решению учебно- познавательных и учебно-практических задач. Основные изменения в системе оценки образовательных достижений: отечественный и зарубежный опыт (2) • Расширяются объекты оценки: комплексная оценка – ФГОС (предметные, метапредметные и личностные результаты); МСИ – функциональная грамотность и стандарты XXI века. • Изменяется инструментарий оценки: переход на компьютерные форматы, введение интерактивных симуляций, оценка стратегий поведения. • Меняется система обработки данных: вводятся вероятностные математические модели. • К традиционным формам представления результатов добавляются комплексные профили образовательных результатов. • Разрабатываются рекомендации для учащихся с разными уровнями подготовки с учетом контекстной информации. Понятие функциональной грамотности (1) • Термин «функциональная грамотность» введен ЮНЕСКО в 1957 году. • Функциональная грамотность понималась как «совокупность умений читать и писать для использования в повседневной жизни и удовлетворения житейских проблем». • Особенности понятия: – Направленность на решение бытовых проблем; – Основа – базовый уровень навыков чтения и письма – Цель – возможность решения стандартных стереотипных задач – Применялось в основном ко взрослому населению, которое нуждалось в формировании элементарной грамотности. Определение функциональной грамотности А. А. Леонтьев: «Функционально грамотный человек — это человек, который способен использовать все постоянно приобретаемые в течение жизни знания, умения и навыки для решения максимально широкого диапазона жизненных задач в различных сферах человеческой деятельности, общения и социальных отношений» [ Образовательная система «Школа 2100». Педагогика здравого смысла / под ред. А. А. Леонтьева. М.: Баласс, 2003. С. 35. ] . Международный контекст развития исследований по функциональной грамотности Definition and Selection of Competencies: Theoretical and Conceptual Foundations (DeSeCo) www.deseco.admin.ch Основные положения компетентностно-ориентированной оценки Положение 1: Три области для разработки содержания оценки: - действовать автономно и рефлексивно; - использовать различные средства интерактивно; - функционировать в социально гетерогенных группах. Положение 2: Ключевые компетентности многофункциональны, взаимозависимы и взаимосвязаны. Положение 3: Для оценки необходимы разнообразные методы, выходящие за рамки традиционных письменных тестов. Ключевые компетенции (DESECO, OECD 1999) • Действовать автономно Фокус: персональная идентификация/относительная автономия • Использовать интерактивно различные средства Фокус: взаимодействие с миром с помощью различных средств • Функционировать в социально гетерогенных группах Фокус: взаимодействие с другими 3 области для разработки содержания оценки Кр и ти ческ о е м ы шл е н и е / р еф л ек си вн ы й / хо л и ст и ческ и й по дх о д Ключевые компетенции (DESECO, OECD 1999): Действовать автономно • Защищать права, интересы, проявлять ответственность, осознавать ограничения и потребности • планировать и реализовывать жизненные планы / личные проекты • действовать масштабно Способность Кр и ти ческ о е м ыш л ен и е / р еф л ек си вн ы й / хо л и ст и чес ки й п о дх о д Ключевые компетенции (DESECO, OECD 1999): Использовать интерактивно различные средства • Использовать интерактивно язык, символы, тексты • Использовать интерактивно знания и информацию • Использовать интерактивно (новые) технологии Способность Кр и ти чес ко е м ы ш л ен и е / р еф л ек си вны й / хо л и ст и ческ и й по дх о д Ключевые компетенции (DESECO, OECD 1999): Функционировать в социально гетерогенных группах • Устанавливать хорошие взаимоотношения • сотрудничать • разрешать конфликты Способность Кр и ти ческ о е м ы шл ен и е / р еф л ек си вн ы й / хо л и ст и ческ и й по дх о д Ключевые компетенции (DESECO, OECD 1999): Важные характеристики ключевых компетенций • критическое мышление • рефлексивный/холистический подход Предметная компетентность – способность решать проблемы, возникающие в окружающей действительности, средствами предмета • распознавать проблемы, возникающие в окружающей действительности, которые могут быть решены средствами данного предмета; • формулировать эти проблемы на языке данного предмета; • решать эти проблемы, используя предметные знания и методы; • анализировать использованные методы решения; • интерпретировать полученные результаты с учетом поставленной проблемы; формулировать и записывать окончательные результаты решения поставленной проблемы. Реализация компетентностного подхода в реальных измерениях Область 1: Действовать автономно и рефлексивно. Область 2: Использовать средства (язык, тексты, информацию, знания, умения, технологии и др.) интерактивно. Область 3: Функционировать в социально гетерогенных группах. ICCS – граждановедческая компетентность PISA – учебные стратегии Самооценка PISA - читательская, математическая, естественнонаучная , финансовая грамотности, компетентность в области решения проблем, глобальные компетенции, креативное мышление. ICILS – ИКТ-компетентность PISA: решение комплексных проблем в сотрудничестве ФГОС РФ (начальная школа): групповые проекты 18 Международная программа по оценке образовательных достижений учащихся PISA (Programme for International Student Assessment) Проводит: Организация экономического сотрудничества и развития – OECD Циклы исследования PISA: 2000, 2003, 2006, 2009, 2012, 2015, 2018 годы Основная цель: Оценка функциональной грамотности 15- летних учащихся в области математики, чтения и естествознания Исследовательский вопрос: «Обладают ли учащиеся 15- летнего возраста, получившие обязательное общее образование, знаниями и умениями, необходимыми им для полноценного функционирования в современном обществе, т.е. для решения широкого диапазона задач в различных сферах человеческой деятельности, общения и социальных отношений?» Фокус: Выявление факторов, позволяющих объяснить различия в результатах стран оценка качества и эффективности образования, равенства доступа к образованию Новый взгляд на образование Модели Европейской классификацией навыков, компетенций и профессий (ESCO), Партнерства за навыки XXI века, enGauge, Brookings и Pearson. Организация экономического сотрудничества и развития. 2013. http://www.oecd.org/site/piaac/surveyofadultskills.htm Чему должны научиться дети (OECD 2030) Через оценку качества образования система образования настраивается на новые результаты Schleicher A., Ramos G. Global competency for an inclusive world // OECD, 2016. URL: https://www.oecd.org/pisa/aboutpisa/Global-competency-for-an-inclusive-world.pdf Как дети способны действовать Предметные Межпредметные Практические Когнитивные и мета-когнитивные Социальные и эмоциональные Физические и практические Способность мобилизовать знания, умения, отношения и ценности, а также проявлять рефлексивный подход к процессу обучения, обеспечивающая возможность взаимодействовать и действовать в мире Парадокс компетентности Компетентность (действенные знания, умения, способы) обнаруживает себя • за пределами учебных ситуаций, • в задачах, не похожих на те, где эти знания, умения, способы приобретались. Российская академия образования Модель оценки функциональной грамотности: PISA-2018 Математическая грамотность Естественнонаучная грамотность Глобальные компетенции Читательская грамотность 4% 4% 4% 33% 33% 22% Финансовая грамотность Уровни функциональной грамотности в исследовании PISA Самостоятельно мыслящие и способные функционировать в сложных условиях 4 уровень – проявляется способность использовать имеющиеся знания и умения для получения новой информации 2 уровень – пороговый, при достижении которого учащиеся начинают демонстрировать применение знаний и умений в простейших не учебных ситуациях М Ч Е 669 708 708 6 607 626 633 5 545 553 559 4 482 480 484 3 420 407 409 2 358 335 335 1 Среднее значение международной шкалы 500 400 600 Математическая грамотность (исследование PISA) Проблема, в контексте Результаты в контексте Математическая проблема Математические результаты Оценивать Интерпретировать Применять Формулировать РЕАЛЬНЫЙ МИР МАТЕМАТИЧЕСКИЙ МИР Математическая грамотность – это способность индивидуума формулировать, применять и интерпретировать математику в разнообразных контекстах. Она включает математические рассуждения, использование математических понятий, процедур, фактов и инструментов, чтобы описать, объяснить и предсказать явления. Она помогает людям понять роль математики в мире, высказывать хорошо обоснованные суждения и принимать решения, которые должны принимать конструктивные, активные и размышляющие граждане. Пример задания «Парусные корабли» Типичная задача для учащихся 5-6 классов: «За год двигатель на корабле потребляет 3500000 л топлива, 1 литр топлива стоит 0,42 р. Установка паруса на корабле стоит 2500000 р. Парус экономит 20% топлива. Через сколько лет экономия топлива покроет стоимость установки паруса?» Создать модель решения и выполнить арифметические действия Девяносто пять процентов товаров в мире перевозят по морю примерно 50 000 танкеров, грузовых кораблей и контейнеровозов. Большинство этих кораблей используют дизельное топливо. Инженеры планируют разработать поддержку кораблей, используя силу ветра. Их предложение заключается в прикреплении к кораблям кайтов (парящих в воздухе парусов) и использовании силы ветра, чтобы уменьшить расход дизельного топлива и его влияние на окружающую среду. • Результат российских учащихся: 16% • Средний результат учащихся стран ОЭСР: 15% • Максимальный результат: 47% Через сколько примерно лет экономия на дизельном топливе покроет стоимость установки кайта? Приведите вычисления, подтверждающие ваш ответ. МАТЕМАТИЧЕСКИЙ МИР РЕАЛЬНЫЙ МИР Читательская грамотность (исследование PISA) Читательская грамотность – способность человека понимать и использовать письменные тексты, размышлять о них и заниматься чтением для того, чтобы достигать своих целей, расширять свои знания и возможности, участвовать в социальной жизни. Опора на текст Опора на внетекстовое знание 3. осмыслить и оценить содержание текста форму текста 1. найти и извлечь (информацию ) 2. интегрировать и интерпретировать (сообщения текста) Чтение и понимание текстов (PIRLS) Читательская грамотность(PISA) Пример задания для оценки читательской грамотности Как поступили бы вы, купив такое печенье? ____________________________ Почему бы вы так поступили? Используйте информацию из объявления для обоснования своего ответа. Ситуация функционирования текста: Общественная Формат текста: Несплошной Тип текста: Инструкция Читательское действие: Осмысление и оценка информации текста Комментарии эксперта. Вопрос «Как поступили бы вы, купив такое печенье?» допускает ограниченное, но весьма обширное число вариантов ответа. Отвечая на этот вопрос, читатель должен предположить, как он сам поступил бы в житейской, знакомой ситуации (съесть ли потенциально опасную пищу). Обязательная опора на личный опыт, невозможность ответить на вопрос, опираясь только на текст, – критерий для отнесения вопроса к категории «осмысление и оценка информации текста». Легкость этого вопроса объясняется тем, что ответ не предполагает никаких специальных знаний, которые нужно извлечь из текста. Уровень рефлексии, требуемый для понимания самого вопроса и соответствующих элементов текста, весьма низок. 83% российских учащихся справились с вопросом успешно. Что могло затруднить остальных 17% учеников? Среди множества возможных причин остановимся на двух, порождаемых традицией отечественного образования. Во-первых, на этот вопрос нет одного единственно верного ответа (принимается и вариант «съем», и противоположный вариант «верну в магазин»). Во-вторых, при ответе на этот вопрос нужно применить умения работы с текстом, полученные в школе, к житейской ситуации. Иными словами, данное задание иллюстрирует основной подход тестов компетентности к оценке образовательных результатов: ценно то знание и умение, которое применяется в новой ситуации. В данном случае новым мог оказаться сам переход от текста к жизни. Вспомним Буратино. Не всем удается «яблоки из учебника» делить по тем же правилам, что «яблоки из жизни». ОБЪЯВЛЕНИЕ В СУПЕРМАРКЕТЕ Осторожно – аллерген! Арахис в лимонном печенье Дата: 04 февраля 2008 г. |