реферат. лит 5. Исследование осуществлено в 2010 г в рамках программы фундаментальных исследований ГувшЭ и проекта Центра международного сотрудничества по развитию образования
 Скачать 1.22 Mb.
|
|
ГА. Цукерман, ГС. Ковалева, МИ. Кузнецова ПобедА в PIRLS И ПорАженИе в PISA: СудьбА чИтАтельСКой ГрАМотноСтИ 10–15‑летнИх шКольнИКов 1 Тест PIRLS свидетельствует о высоком уровне готовности летних выпускников российской начальной школы к обучению с помощью текстов. Тест PISA обнаружил низкий уровень готовности летних выпускников основной школы к использованию текстов для решения широкого круга бытовых, социальных и образовательных задач. Для изучения динамики читательской грамотности летних учеников основной школы была создана диагностическая методика «Тяни‑толкай», сочетающая подходы PIRLS и PISA. Приведены данные о читательской грамотности учеников х, хи х классов, оцененной с помощью этого единого измерителя. Показано, что два года обучения в российской основной школе (й и й классы) ничего не изменяют в способности школьников понимать информационные тексты. й класс значимо отличается по уровню читательской грамотности от го, однако ее накопление за пять лет обучения весьма незначительно. Результаты расцениваются как свидетельство того, что в современной российской школе остро стоит проблема качества учебников и способов их использования в учебном процессе. Ключевые слова читательская грамотность, читательские умения, PIRLS, PISA, образовательные переходы, основная школа, учебники. 1 Исследование осуществлено в 2010 г. в рамках программы фундаментальных исследований Гу–вшЭ и проекта Центра международного сотрудничества по развитию образования Анх разработка комплексного инструментария оценки школьных стратегий формирования грамотности чтения учащихся начальной и основной школы (74/07‑10 от 24 июня 2010 г. Авторы выражают искреннюю благодарность А. в. Постульгину — директору тамбовского областного государственного учреждения Центр экспертизы образовательной деятельности и сотрудникам Центра за организацию эксперимента по методике «тяни‑толкай», а также в. Ю. барановой, н. в. нурминской, н. Г. Кошеленко, сотрудникам Центра оценки качества образования урАо Институт содержания и методов обучения — за подготовку к проведению эксперимента и статистическую обработку результатов измерения по методике «тяни‑толкай». Аннотация Статья поступила в редакцию в феврале 2011 г Теоретические и прикладные исследования в последнее десятилетие наши представления о значении чтения для развития человека и общества существенно обогатились. установлена связь между оценкой по шкале читательской грамотности в тесте PISA и вероятностью того, что молодой человек окончит школу и продолжит образование. Показано, что высокий уровень читательской грамотности, измеренной с помощью теста PISA, является более надежным предсказателем будущего экономического благополучия человека, чем оценки в школьном аттестате. обнаружено, что средний уровень читательской грамотности в стране лучше предсказывает экономический рост, чем обобщенный показатель учебных достижений. Эти и подобные им важные сообщения поступают из стран с развитой экономикой и сложившейся демократией. для россии, где связи между образованием и годовыми доходами граждан не столь прозрачны, острый интерес к проблеме читательской грамотности выпускников школы связан в первую очередь сна шей верой (ибо умом россию не понять) в силу письменного слова. люди, решающие сегодня судьбы отечественного образования, сами выросли на книгах ив большинстве своем уверены, что письменность является краеугольным камнем не только прошлой, но и будущей цивилизации. Авторы этой статьи не скрывают своего пристрастия к книжной культуре и полагают вслед за Иосифом бродским, что языки то, что на нем написано, — вещи более древние, неизбежные, долговечные, чем любая форма общественной организации. И поэтому введение новых поколений в письменную речь — это педагогическое средство удержания связи времен. отчет об исследовании динамики читательской грамотности летних школьников мы начинаем с этих символов педагогической веры, ибо хотим, чтобы технические детали — эта обязательная составляющая честного экспериментального описания — не заслонили патетической значимости предмета нашего экспериментирования. личный смысл изучения читательской грамотности для нас — проверить, не ослабела, не разорвалась ли дней связующая нить». Профессиональный смысл этого исследования состоит в том, чтобы ответить на вопрос, которым в последние годы задаются многие чем объясняется гигантский разрыв между результатами российских школьников в двух международных сравнительных исследованиях, связанных с оценивани‑ ем читательской грамотности, — PIRLS и PISA. напомним, что PIRLS оценивает читательскую грамотность в конце обучения в начальной школе, на переходе от обучения самому процессу чтения к использованию чтения как одного из основных средств дальнейшего обучения. PISA оценивает читательскую 2 OECD (2010). PISA 2009 Framework: Key competencies in reading, mathematics and science. Paris: Иосиф бродский. нобелевская речь http://www.serann.ru/t/t166.html 1. Зачем нужны новые измерения читательской грамотности грамотность у летних учащихся, на переходе от использования чтения как средства обучения к использованию чтения как средства ориентации в реальной жизни. в сущности, оба теста оценивают готовность школьников к новому способу использования письменных сообщений для решения задач, соответствующих следующей возрастной и образовательной ступени. в PIRLS российские четвероклассники дважды (2001, 2006 гг.) продемонстрировали высокие результаты почтению (статистически значимо выше среднего международного показателя) [Цукерман, 2001]. в 2006 г. россия значимо улучшила собственные результаты и возглавила группу стран — лидеров исследования. результаты летних российских учащихся в исследовании PISA по грамотности чтения существенно ниже среднего показателя по странам оЭСр там же. Этот результат был получен четырежды (2000, 2003, 2006, 2009), но главное для нас не рейтинговые показатели, а динамика наших собственных результатов. увы, между 2000 и 2009 г. в состоянии читательской грамотности российских школьников не изменилось ничего. в связи со свидетельством острого неблагополучия отечественной школы, представленным тестом PISA, принято пенять на дурное управление образованием. Мол, во всем виноваты управленцы, это они не извлекли уроков из участия россии в международных сравнительных исследованиях, которые помогают сопоставить наши представления об образовательных целях и результатах с представлениями мирового сообщества, осознать достоинства и болевые точки нашей системы образования. однако такое направление мысли непродуктивно. во‑первых, во всем упрекать начальство — известный способ оправдывать собственное энергичное топтание на месте. во‑вторых, такие упреки не вполне справедливы. новые стандарты образования зафиксировали (пусть непоследовательно и во многом деклара‑ тивно) появление новых ценностных ориентиров отечественного образования. не без влияния международных мониторингов российская школа присягнула на верность компетентностному подходу. Это значит, что, по крайней мерена словах, российское педагогическое сообщество признало такие образовательные результаты, как умение учиться, результативно действовать совместно с другими людьми, выражать собственное мнение (а значит, иметь таковое, не менее важным итогом школьной жизни, чем сумма знаний и умений. введение еГЭ и ГИА свидетельствует о появлении еще одной ценности — культуры объективных измерений результатов образования. Мы — авторы этой статьи — несколько лет топчемся вокруг вопроса о том, почему возникает впечатляющий разрыв в грамотности чтения в отечественной начальной и основной школе, зафиксированный в исследованиях PIRLS и PISA. За это время был проверен ряд гипотез, которые могли бы объяснить этот разрыв. Г. А. Цукерман, ГС. Ковалева, МИ. Кузнецова Победа в PIRLS и поражение в PISA: судьба читательской грамотности летних школьников Теоретические и прикладные исследования Гипотеза 1. Тесты PIRLS и PISA имеют разные предметы измерения, поэтому их результаты нельзя сравнивать. Мы сопоставили представления о целях и задачах чтения, которые в свернутом виде представлены в определениях читательской грамотности, данных авторами PIRLS 4 и PISA 5 , и пришли к выводу, что с помощью тестов PIRLS и PISA измеряются чрезвычайно близкие предметы. оба теста пытаются схватить практическую, действенную, функциональную сторону любого умения, приобретаемого в школе, в том числе и умения понимать прочитанное и использовать его при решении собственных задач [Цукерман, Ковалева, Кузнецова, Мы сопоставили также и представления авторов PIRLS и PISA о строении читательской деятельности, воплощенные в структуре читательских умений, измеряемых тестами. в тесте PISA созданы три шкалы для независимого измерения разных читательских умений 1) умение находить и извлекать информацию из текста 2) умение интегрировать (связывать в единую картину) и интерпретировать (прояснять для самого себя) сообщения текста 3) умение размышлять о тексте и оценивать его с собственной точки зрения. Каждый диагностический вопрос теста маркирован указателем на то читательское умение, которое в наибольшей степени определяет успешность ответа на вопрос. в тесте PIRLS такие маркировки также существуют, но их не три, а четыре. Кроме читательских умений, выделенных в тесте PISA, для маленьких читателей выделено еще одно умение формулировать прямые выводы, делать простейшие умозаключения на основе информации, извлеченной из текста [Mullis, Martin, Kennedy et al., 2009]. Это единственное разночтение в общем для двух тестов понимании состава читательской деятельности определено возрастными особенностями чтения летних и летних читателей. для маленьких читателей минимальная мыслительная переработка буквальных значений, вычитанных из текста, безусловно, является отдельной работой для более зрелых читателей эта работа читательская грамотность — способность понимать и использовать письменную речь во всем разнообразии ее форм для целей, требуемых обществом и (или) ценных для индивида. на основе разнообразных текстов юные читатели конструируют собственные значения. они читают, чтобы учиться, чтобы участвовать в школьных и внешкольных читательских сообществах и для удовольствия [Mullis, Martin, Kennedy et al. P. читательская грамотность — способность человека понимать и использовать письменные тексты, размышлять о них и заниматься чтением для того, чтобы достигать своих целей, расширять свои знания и возможности, участвовать в социальной жизни [OECD (2010). P. Примечательно, что авторы обоих тестов при спецификации предмета измерения ссылаются практически на один и тот же корпус теорий, описывающих целостный процесс чтения во всей его сложности — от распознавания букв до построения умственной репрезентации содержания текста (2010). PISA 2009 Framework: Key competencies in reading, mathematics and science. Paris: OECD. совершается также автоматически, как и построение дословной репрезентации словесной ткани текста Проведенный анализ теоретических представлений о чтении, лежащих в основе PIRLS и PISA, показал, что гипотеза 1 не подтверждается. общность теоретических конструктов двух тестов позволяет сравнивать их результаты. Гипотеза 2. При общем успехе работы над читательской грамотностью в начальной школе, подтвержденном высокими результатами PIRLS, в обучении чтению уже на этой ступени есть болевые точки, которые в основной школе переходят в хроническую болезнь, приводя к глубокому отставанию в читательской грамотности и к низким результатам в углубленный качественный анализ выполнения заданий PIRLS‑2006 показал, что при общих высоких результатах, достигнутых российскими четвероклассниками, работа с информационными текстами представляет для них более серьезные трудности, чем понимание художественных текстов. При этом наибольший дефицит в понимании информационных текстов был обнаружен в базисных читательских умениях извлекать из текста информацию, сообщенную в явном виде, и делать на ее основе простейшие умозаключения [Кузнецова, Этот результат объясняется практикой обучения чтению, что убедительно продемонстрировал анализ учебников, бытующих в сегодняшней начальной школе россии. Пособия по предмету окружающий мир, являющиеся основным источником информационных текстов, не ориентированы на развитие и проверку читательских умений <…> Менее всего они обеспечивают развитие умения формулировать простые выводы на основе имеющихся фактов. Поиск информации, данной в явном виде, сведен к воспроизведению авторского текста. Процесс выявления нужной информации максимально упрощен Пинская, 2009. С. если в начальной школе ученик испытывает некоторые затруднения с поиском нужной информации в тексте, с простейшими умозаключениями на основе найденной информации, можно ожидать усиления соответствующих проблем в основной школе с ее предметным обучением. Иными словами, гипотеза 2 требует дальнейшей разработки, нов рамках данного частного экспериментального исследования она останется на периферии. Гипотеза 3. Основная причина провала России в тесте PISA лежит за пределами начальной школы. успех российских школьников в тесте PIRLS показал их высокую готовность к обучению с помощью текстов. однако от этой готовности до развитого умения использовать текст как средство самообучения дистанция такая же, как от готовности шестилетки к школьному обучению до развитого умения учиться. Путь от готовности к обучению до умелости почти невозможно пройти самостоятельно, без помощи учителя. Поэтому правомочна гипотеза о том, что основная школа недостаточно помогает выпускникам ГА. Цукерман, ГС. Ковалева, МИ. Кузнецова Победа в PIRLS и поражение в PISA: судьба читательской грамотности летних школьников Теоретические и прикладные исследования начальной школы, в высшей степени готовым научиться учиться с помощью текстов, стать компетентными читателями информационных текстов. для проверки этого предположения было предпринято пилотное сравнительное исследование читательской грамотности учеников хи х классов. Эксперимент показал, что между читателями, которых разделяют два года школьного обучения, отсутствуют какие бы тони было различия в понимании информационных текстов. Причем именно в эти два года резко возрастает нагрузка на обучение с использованием информационных текстов учебников. ошеломляющий эффект этого исследования был резко снижен техническими погрешностями примененной экспериментальной процедуры. Качество использованного измерителя читательской грамотности, характеристики сравниваемых выборок вызывали сомнения. Мы решили повторить и расширить это исследование, проведя его с соблюдением строгих требований к экспериментальной процедуре. чтобы постичь судьбу читательской грамотности винтер вале между двумя ее измерениями — с помощью тестов PIRLS и PISA, — необходимо проследить динамику читательской грамотности летних школьников. Мы решили в первом приближении оценить эту динамику потрем точкам й, й и й класс. й класс привязан к измерению PIRLS, й класс — к измерению PISA, й выбран достаточно произвольно 9 для чистоты задуманного измерения нужно было использовать один и тот же измеритель читательской грамотности, не отличающийся по своей сути от тестов PIRLS и PISA, которые близки между собой и концептуально, и методически. Иными словами, мы планировали предложить учащимся разных возрастных групп прочитать одни и те же тексты и ответить на одни и те же вопросы к ним. За основу требуемого измерителя мы взяли тексты и вопросы из материалов PIRLS и PISA, открытых для научного и педагогического сообщества. При отборе материалов мы учитывали потенциальный интерес, который текст PIRLS вызовет у учащихся хи х классов, и доступность текста PISA для учащихся х, х классов. в результате были выбраны два текста из открытого неожиданная победа российские школьники читают лучше других / ред. И.д. Фрумин. М Изд. дом Гу–вшЭ, теперь, получив аппроксимацию потрем точкам, мы видим необходимость в дальнейшем более пристально изучить состояние читательской грамотности учеников хи х классов. 10 в соответствии с принятыми в международных исследованиях правилами часть текстов и заданий к ним после проведения очередного цикла не подлежит разглашению, так как будет использоваться в следующем цикле, а часть текстов открывается, те. становится доступной для ознакомления. Со всеми открытыми материалами вы можете познакомиться на сайте www.centeroko.ru. 2. Измерение читательской грамотности с помощью гибрида PIRLS и PISA 2.1. Характеристика диагностической методики «Тя- ни-толкай» инструментария PIRLS — оба несплошные 11 (информация в словесном виде чередуется с информацией, представленной в виде рисунков, схем, таблиц) — и два текста из инструментария PISA, в которых вся информация представлена вербально. Мы сделали небольшие дополнения к текстам из инструментария PISA, выбранным для целей нашего эксперимента, чтобы адаптировать их копыту и знаниям летних читателей. например, к одному тексту были добавлены рисунки, которые должны помочь четвероклассникам войти в тему сообщения, к обоим текстам были добавлены сноски, объясняющие значение слов, которые могут быть незнакомы учащимся го иго класса. новую диагностическую методику мы условно назвали «тяни‑ толкай», акцентируя две ее особенности 1) одноприродность подходов PIRLS и PISA к измерению читательской грамотности и 2) обращенность новой методики к двум возрастным группам читателей — к выпускникам начальной и основной школы. наиболее сложной частью подготовки материалов для методики «тяни‑ толкай» была разработка дополнительных вопросов к каждому тексту. необходимость разработки новых вопросов продиктована двумя причинами. во‑первых, таковы статистические требования к надежности инструментария только наличие значительного количества вопросов в тесте в целом и отдельно по каждой группе читательских умений позволяет проводить объективные измерения и делать на их основе обоснованные выводы. во‑вторых, мы стремились уравновесить степень сложности всего набора вопросов к текстам. для этого к текстам PIRLS необходимо было добавить более сложные вопросы, требующие, например, умений работать с противоречивой или недоопределенной информацией, рассматривать проблему с разных точек зрения, прогнозировать другой вариант развития событий. К текстам PISA, напротив, необходимо было добавить более простые вопросы — на поиск информации, которая представлена в тексте в явном виде, на формулирование несложных выводов. в результате к исходному набору вопросов PIRLS и PISA (31 вопрос) были добавлены еще 20 новых вопросов. К добавленным вопросам были составлены руководства для оценивания детских ответов. для описания методики «тяни‑толкай» необходима классификация читательских умений, единая для вопросов PIRLS и PISA. Мы выбрали три шкалы PISA, а не четыре шкалы PIRLS. дело в том, что при обработке и описании результатов PIRLS умение вычитывать информацию, сообщенную в тексте в явном виде, и умение делать на основе этой информации простые выводы и умозаключения сведены в единую шкалу. Кроме того, для статистического анализа результатов диагностики всегда предпочтительнее работать с большим количеством заданий. в табл. 1 представлены данные о количестве вопросов по каждой из групп читательских умений Поданным, российские школьники имеют значительные трудности в понимании несплошных текстов. Г. А. Цукерман, ГС. Ковалева, МИ. Кузнецова Победа в PIRLS и поражение в PISA: судьба читательской грамотности летних школьников Теоретические и прикладные исследования в методике «тяни‑толкай». Эти данные указывают на направление дальнейшей доработки нашей методики. для того чтобы она стала подлинным гибридом PIRLS и PISA, необходимо увеличить число вопросов, побуждающих читателя извлекать информацию из текста в первую очередь из текстов PISA. данные о соотношении исходных и добавленных вопросов по степени сложности приведены ниже при анализе результатов нашего эксперимента (табл. Таблица 1 Данные о количественном составе вопросов методики «Тяни-толкай» |