Отечественная из bbарbbубbbежbbнаbbя педагогика 2 (70) т 2020
 Скачать 4.65 Mb.
|
|
Методология исследования Методология исследования базируется на установках компетентност- ного, концептного, контекстного, системно-деятельностного и задачного подходов к проблеме формирования и оценки функциональной грамотности. Она учитывает основные критерии системы международной оценки качества общего образования в формате исследования PISA [13; 14; 15; 16; 18] и опыт российской педагогической школы в этой области [2; 3; 5; 7; Диагностика функциональной грамотности прежде всего связана с выявлением уровня сформированности компетенций как способности мобилизовывать знания, умения, отношения и ценности при решении практических задач, проявлять рефлексивный подход к процессу обучения и обеспечивать возможность взаимодействовать и действовать в различных жизненных ситуациях, вырабатывая осознанную стратегии поведения [17]. Эти положения предлагают использование задачного подхода для формирования и оценки каждого вида функциональной грамотности. В большинстве случаев одно задание, описывающее проблемную ситуацию, содержит три-четыре типа задач. Их последовательное выполнение способствует тому, что, двигаясь от задачи к задаче, ученики погружаются в ситуацию, демонстрируя уровень владения знаниями и функциональными навыками. Для основных видов функциональной грамотности в международной и отечественной практике предлагаются следующие характеристики задач содержательная область компетентностная область оценки (компетенции контекст уровень сложности формат ответа. Функциональная грамотность характеризуется набором разнообразных компетенций, которые в зависимости от контекста ситуации функционирования личности в системе социальных отношений проявляются по-разному ив разных сочетаниях. Она имеет сложную структуру, и выводы об уровне ее сформированности могут быть сделаны только на основе анализа конкретного вида грамотности читательской, математической, естественнонаучной, финансовой и др. Каждый вид функциональной грамотности имеет свою специфику, поэтому оценивается отдельно, и показатели не суммируются. Для проведения РДР по оценке уровня функциональной грамотности учащихся хи х классов образовательных организаций Санкт- Петербурга был создан сбалансированный банк задач, который полноценно отражает специфику основных видов функциональной грамотности. Диагностический инструментарий для каждого варианта работы в хи в х классах включал девять заданий, которые состояли из 30 и 32 задач соответственно. Ответы учащиеся записывали в бланки ответов. Для оценивания результатов выполнения работы обучающимися использовался общий балл. Проверка выполнения задач осуществлялась на основании критериев, разработанных для каждой задачи В Таблицах 1–4 представлены характеристики задачи их количественное соотношение, используемые для оценки каждого из четырех видов функциональной грамотности, включенных в РДР: читательской, естественнонаучной, математической и финансовой. Характеристики задач соответствуют концептуальной рамке международного исследования по каждому виду грамотности. Таблица Характеристики задач для оценки читательской грамотности обучающихся хи х классов в РДР (Санкт-Петербург, февраль 2020 г.) Характеристики задач класс класс Количе- ство задач вариант Количество задач вариант Количество задач вариант Количество задач вариант Структура текста Сплошной 3 3 3 3 Несплошной 6 6 6 6 Компетенции Находить и извлекать информацию 3 3 Интегрировать и интерпретировать информацию Осмысливать и оценивать содержание и форму текста 3 3 3 О. А. Абдулаева, И. Ю. Алексашина, Ю. П. Киселев, ИВ. Муштавинская Тип текста Научно-популярный 3 3 3 Разворот книги 3 3 Карты, схемы 3 3 3 Контекст Учебный 3 Личный 6 6 Социальный Когнитивный уровень Низкий 2 3 3 Средний 3 3 Высокий 3 3 3 Научно-популярные тексты являлись основой для выполнения 1/3 всех задач по оценке читательской грамотности. Несплошные тексты были предложены в каждом из двух вариантов для хи х классов и выступили основой для выполнения 2/3 задач. Уровень сформи- рованности читательской грамотности учащихся оценивался в трех заданиях, содержащих девять задач поияск информации в тексте (три задачи — 33%); интерпретация текста (три задачи — 33%); рефлексия на содержание или форму текста и его оценка (три задачи — 33%). Каждая из этих групп умений включала общую ориентацию в содержании текста и понимание его смысла. В Таблице 2 дается характеристика задач, используемых для оценки естественнонаучной грамотности, включенных в РДР. Таблица Характеристики задач для оценки естественнонаучной грамотности обучающихся хи х классов в РДР (Санкт-Петербург, февраль 2020 г.) Характеристики задач класс класс Количество задач вариант Количество задач вариант Количество задач вариант Количество задач вариант Компетенция Научное объяснение явлений 2 3 Применение методов естественнонаучного исследования 3 3 Интерпретация данных и использование научных доказательств для получения выводов 4 3 Оценка функциональной грамотности обучающихся в Санкт-Петербурге ... Типы научного знания Знание содержания 4 3 Знание процедур 5 4 Эпистемологическое знание 2 Контекст Личный 4 4 6 Местный социальный 2 1 Глобальный 3 2 Когнитивный уровень Низкий 2 2 3 Средний 4 3 Высокий 3 3 В заданиях для обеих параллелей использовались проблемные ситуации, схожие по тематике. В тоже время часть задач различались контекстами, когнитивным уровнем и типами проверяемого знания. В силу возрастных особенностей в м классе спектр задач расширился. По типам научного знания он обогатился задачами на эпистемологическое знание. В Таблице 3 представлена характеристика задач, используемых для оценки математической грамотности, включенных в РДР. Таблица Характеристики задач для оценки математической грамотности обучающихся хи х классов в РДР (Санкт-Петербург, февраль 2020 г класс класс Характеристики задач Количество задач вариант Количество задач вариант Количество задач вариант Количество задач вариант Компетенция Формулировать ситуацию математически Применять математические понятия, факты, процедуры размышления Интерпретировать, использовать и оценивать математические результаты 4 3 3 О. А. Абдулаева, И. Ю. Алексашина, Ю. П. Киселев, ИВ. Муштавинская Область математического содержания Пространство и форма 2 1 Изменение и зависимости Количество 4 2 Неопределенность и данные 2 Контекст Личная жизнь 7 7 Образование 2 3 Когнитивный уровень Низкий 4 4 2 Средний 4 4 Высокий 1 4 В заданиях на оценку математической грамотности для обеих параллелей также использовались проблемные ситуации, близкие по тематике, но различающиеся контекстами, когнитивным уровнем, областью математического содержания задач. Почти 45% задач РДР на оценку математической грамотности для 5 класса можно отнести к содержательной области Количество, в то время как в 7 классе доля этих задач составляет 20%. В силу особенности математического содержания основной образовательной программы основного общего образования когнитивный уровень задач становится выше, в содержательном плане задачи в 7 классе обогащены разделом Неопределенность и данные (20%) и увеличилась доля задач в содержательной области Изменения и зависимости (с 33% до В Таблице 4 представлена характеристика задач, используемых для оценки финансовой грамотности, включенных в РДР. Таблица Характеристики задач для оценки финансовой грамотности обучающихся хи х классов в РДР (Санкт-Петербург, февраль 2020 г.) Характеристики задач класс класс Количество задач вариант Количество задач вариант Количество задач вариант Количество задач вариант Компетенция Выявление финансовой информации Оценка функциональной грамотности обучающихся в Санкт-Петербурге ... Анализ информации в финансовом контексте 2 3 Оценка финансовых проблем 1 — — — Применение финансовых знаний и понимание — 1 — — Содержательная форма оценки Деньги и денежные операции Планирование и управление финансами 2 1 Риски и вознаграждения Финансовая среда (отдельные вопросы из области финансов) — — — — Контекст Домашний и семейный дом и семья 2 1 Личностный (личные траты, досуги отдых Общественный ( сообщество и гражданин сообщества Когнитивный уровень Низкий 1 1 1 Средний 2 3 3 Высокий — — — — Анализ характеристик задач для оценки читательской, естественнонаучной и математической грамотности для учащихся хи х классов показывает их идентичную структуру по видам компетенций, контек- стами уровням сложности. В работе обеих параллелей для каждого вида функциональной грамотности использовались несколько (2–3) якорных задач, идентичных по содержанию и основным характеристикам. Они использовались с целью сопоставления результатов диагностической О. А. Абдулаева, И. Ю. Алексашина, Ю. П. Киселев, ИВ. Муштавинская работы учащихся хи х классов по отдельным видам компетенций читательской, естественнонаучной и математической грамотности и выдвижению предположений о динамике их развития. Анализ характеристик задач для оценки финансовой грамотности показывает их частично идентичную структуру для хи х классов по ряду показателей. Ограниченное количество заданий на выявление уровня финансовой грамотности (около 10% от общего числа задач всей работы) не позволяет сопоставлять результаты диагностической работы по видам компетентностей (за исключением анализа информации в финансовом контексте) и делать предположения об уровне сформи- рованности финансовой грамотности учащихся хи х классов. Для анализа результатов выполнения заданий по оценке функциональной грамотности учащимися хи х классов использовались следующие показатели процент учащихся, успешно выполнивших задачи дали верный / частично верный ответ процент выполнения задач учащимися, характеризующий качество из выполнения (доля набранного учащимися суммарного балла к максимально возможному суммарному баллу доля учащихся по набранному суммарному баллу за выполнение всех задач по каждому виду функциональной грамотности При разработке диагностического инструментария, обработке и интерпретации результатов учитывался пилотный характер исследования 2020 года и его направленность в первую очередь на проработку методологии проведения исследования, подходов к разработке системы диагностического инструментария. Организаторами исследования было принято решение, что впервой региональной работе задачи диагностического инструментария будут по форме закрытыми (единичный и множественный выбор, на соответствие) или с кратким ответом, что отличает проводимое исследование от международной модели PISA поэтому параметру. Так, например, впервой диагностической работе по оценке функциональной грамотности учащихся хи х классов Санкт-Петербурга открытые задачи с кратким ответом составили 37% от числа предложенных задач. Работа не содержала открытые задачи с развернутым ответом. Это объясняется отсутствием на период проведения диагностической работы сформированного пула экспертов, имеющих специальную подготовку для проверки развернутых ответов школьников. С целью преодоления данного противоречия сотрудниками Санкт-Петербургского центра оценки качества образования Оценка функциональной грамотности обучающихся в Санкт-Петербурге ... и информационных технологий и Санкт-Петербургской академии пост- дипломного педагогического образования разработаны совместные программы повышения квалификации педагогов по подготовке экспертов для проверки заданий с развернутыми ответами. Они направлены на освоение педагогами особенностей методологии и критериев оценки качества общего образования в общеобразовательных организациях на основе практики международных исследований качества подготовки обучающихся (диагностический инструментарий, концептуальные рамки и примеры заданий по каждому виду функциональной грамотности). На следующем этапе проведения исследования планируется корректировка диагностического инструментария в направлении увеличения на 10–15% открытых задач с развернутыми ответами, что будет соответствовать общей методологии разработки заданий для оценки функциональной грамотности, принятой в международном сравнительном исследовании PISA (в среднем не менее 50% задач с открытыми ответами). Результаты исследования Все измерительные материалы прошли апробацию на представительной выборке. Выборка общеобразовательных организаций (далее — ОО) включала школы с разными уровнями образовательных достижений гимназии (12%), лицеи (8%), общеобразовательные школы с углубленным изучением предметов (21%), общеобразовательные школы (58%), другие образовательные организации (1%). В каждой общеобразовательной организации в тестировании могли принять участие несколько классов из параллели хи х классов, ноне менее одного в каждой параллели. В РДР по функциональной грамотности приняли участие 13 154 обучающихся х классов из 558 образовательных организаций и 12 480 обучающихся х классов из 557 образовательных организаций из 18 районов Санкт-Петербурга [6]. В исследовании приняли участие учащиеся школ городского подчинения, негосударственных и частных образовательных учреждений образовательных организаций, участвовавших в апробации ФГОС основного и среднего общего образования среди них пятиклассников — 1 479 человек семиклассников — 1 430 человек. Совокупность этих образовательных организаций условно назовем контрольной группой. Репрезентативность выборки дает возможность распространить полученные при анализе результатов выводы на всю генеральную со О. А. Абдулаева, И. Ю. Алексашина, Ю. П. Киселев, ИВ. Муштавинская 246 вокупность пятиклассников или семиклассников Санкт-Петербурга. Распределение ответов учащихся, выполнявших РДР по функциональной грамотности в хи х классах, по суммарному баллу (в процентном соотношении) соответствуют нормальному распределению. Небольшой разброс полученных данных между образовательными организациями позволяет говорить о высокой валидности представленных результатов. Результаты предоставляются по каждому ученику, классу, образовательному учреждению, району и региону в целом Проанализируем результаты выполнения задач по компетенциям каждого вида функциональной грамотности с учетом результатов решения якорных задач. Для сопоставления результатов исследования в РДР использовался прием перекрытия вариантов, который позволяет выделить 30% общих для параллелей хи х классов задач (якорных, или узловых. Они использовались для обеспечения контроля за соотношением трудности вариантов и динамики развития компетенций по каждому виду функциональной грамотности. Читательская грамотность Результаты выполнения задач учащихся хи х классов по ключевым компетенциям читательской грамотности представлены на диаграмме Рисунок Рисунок 1. Процент выполнения задач по отдельным видам компетенций читательской грамотности учащимися хи х классов ОО Санкт-Петербурга Анализ выполнения задач по видам компетенций читательской грамотности показывает, что 90,8% учащихся х классов и 55,7 % учащихся 5- х классов успешно справились с задачами на оценку компетенции Находить и извлекать информацию Результаты свидетельствуют о достаточной сформированности базовых умений данной компетенции определять местонахождения искомой информация и извлекать одну или несколько единиц необходимой. Учащиеся продемонстрировали понимание формулировки задач, умение определять основную мысль или стратегическую идею текста, находить оптимальный путь поиска верного ответа. Рекомендации: осуществлять методическую работу среди учителей начальных классов и основной школы по внедрению в практику разнообразия методических приемов работы с текстами на уроках разных дисциплин, снижая количество репродуктивных заданий, не требующих от учащихся самостоятельного размышления над текстом. При оценке компетенции Интегрировать и интерпретировать Рисунок 1. Процент выполнения задач по отдельным видам компетенций читательской грамотности учащимися хи х классов ОО Санкт-Петербурга Оценка функциональной грамотности обучающихся в Санкт-Петербурге ... Анализ выполнения задач по видам компетенций читательской грамотности показывает, что 90,8% учащихся х классов и 55,7% учащихся х классов успешно справились с задачами на оценку компетенции Находить и извлекать информацию Результаты свидетельствуют о достаточной сформированности базовых умений данной компетенции определять местонахождения искомой информации и извлекать одну или несколько единиц. Учащиеся продемонстрировали понимание формулировки задач, умение определять основную мысль или стратегическую идею текста, находить оптимальный путь поиска верного ответа. Рекомендации:осуществлять методическую работу среди учителей начальных классов и основной школы по внедрению в практику разнообразия методических приемов работы с текстами на уроках разных дисциплин, снижая количество репродуктивных заданий, не требующих от учащихся самостоятельного размышления над текстом. При оценке компетенции Интегрировать и интерпретировать информацию учащиеся хи х классов продемонстрировали следующие результаты выполнения задачи соответственно. Достаточно высокий процент выполнения задач, относящихся к данной компетенции в х классах, объясняем тем, что традиционно в отечественной методике обучения гуманитарным дисциплинам этой компетенции работы с текстами всегда уделялось большое внимание. Этим же объясняется рост показателей результата от го к 7-му классу. Рекомендации:формировать данную компетенцию при изучении не только гуманитарных, но и других учебных дисциплин — это обусловит развитие способности интерпретировать и интегрировать прочитанное / увиденное в тексте вне зависимости от предложенного содержания. Обеспечить перенос приемов интеграции и интерпретации информации, разработанных в методиках гуманитарных дисциплин (литературы, русского языка, истории, в методику других учебных дисциплин. Распределение результатов решения задач на оценку компетенции Осмысливать и оценивать содержание и форму текста в хи х класса практически совпадают 71,3% и 73,1% соответственно. Полученные данные свидетельствуют об отсутствии возрастной динамики сформированно- сти данной компетенции. У многих учащихся разных возрастных групп, включая старшеклассников, оценка содержания и формы текста или его элементов (примеров, аргументов, иллюстраций и т. п) относительно целеполагания автора традиционно вызывает большие затруднения О. А. Абдулаева, И. Ю. Алексашина, Ю. П. Киселев, ИВ. Муштавинская Рекомендации начинать систематическое формирование компетенции Осмысливать и оценивать содержание и форму текста для разных видов текстов (сплошные, несплошные, составные) и их целостных смысловых фрагментов на этапе начальной школы внести коррективы в методику преподавания литературного чтения и окружающего мира в начальной школе за счет разнообразия учебных и вспомогательных текстов и приемов работы сними, включая элементы проектной и исследовательской деятельности, с учетом возрастных особенностей учащихся. |