Ил. Методические рекомендации по организации и проведению оценки РУМ. Методические рекомендации по организации и проведению оценки механизмов управления качеством образования в субъектах Российской Федерации
 Скачать 1.61 Mb.
|
|
1.3.2.4. Система мониторинга качества дошкольного образования Система мониторинга качества дошкольного образования ориентирована на выявление степени соответствия образовательных программ дошкольного образования и условий осуществления образовательной деятельности дошкольными образовательными организациями нормативным требованиям и социальным ожиданиям. Кроме того, она направлена на совершенствование управления качеством дошкольного образования, что предполагает координацию усилий представителей различных ведомств на различных уровнях управления системой образования, которые непосредственно влияют на его качество. Основные подходы и принципы оценки по данному направлению содержатся в Концепции мониторинга качества дошкольного образования Российской Федерации, которая формирует единую методологическую основу федеральных, региональных и муниципальных, внутриорганизационных систем мониторинга и оценки качества дошкольного образования, систем независимой оценки качества дошкольного образования и задает условия для формирования единого образовательного пространства Российской Федерации. При формировании региональных концептуальных документов по направлению в качестве показателей могут быть определены следующие: – доля ДОО, в которых разработаны и реализуются образовательные программы дошкольного образования, соответствующие требованиям ФГОС ДО к структуре и содержанию образовательных программ дошкольного образования; – доля ДОО, в которых созданы условия для обучающихся с ОВЗ; – доля ДОО, в которых содержание образовательной программы ДО обеспечивает развитие личности в соответствии с возрастными и индивидуальными особенностями детей по следующим компонентам: социально-коммуникативное развитие; познавательное развитие; речевое развитие; художественно-эстетическое развитие; физическое развитие; Методические рекомендации по организации и проведению оценки РУМ 40 – доля ДОО с низким/высоким уровнем качества образовательной среды; – доля ДОО, в которых созданы условия по обеспечению здоровья, безопасности и качеству услуг по присмотру и уходу за детьми (состояние здоровья воспитанников; в ДОО созданы санитарно-гигиенические условия; в ДОО проводятся мероприятия по сохранению и укреплению здоровья; в ДОО организован процесс питания в соответствии с установленными требованиями; в ДОО организовано медицинское обслуживание; обеспечена безопасность внутреннего помещения ДОО (группового и внегруппового); обеспечена безопасность территории ДОО для прогулок на свежем воздухе; проводится контроль за чрезвычайными ситуациями и несчастными случаями); – доля руководителей ДОО, обладающих требуемым качеством профессиональной подготовки, от общего числа руководителей всех ДОО региона; – доля ДОО, в которых кадровые условия соответствуют требованиям ФГОС ДО: обеспеченность ДОО педагогическими кадрами (%); доля педагогических работников, аттестованных на первую/высшую квалификационную категорию; доля педагогических работников, прошедших курсы повышения квалификации по актуальным вопросам дошкольного образования за последние 3 года; доля педагогических работников с высшим образованием; рабочая нагрузка педагога (размер группы и соотношение между количеством воспитанников и количеством педагогов); – доля ДОО, в которых развивающая предметно-пространственная среда (предметно-пространственная среда группового помещения) соответствуют требованиям ФГОС ДО: в помещении (группе) достаточно места для детей, взрослых, размещения оборудования; достаточно мебели для повседневного ухода, игр, учения; в группе есть мягкая мебель (уютный уголок); в группе оборудовано как минимум 2 различных центра интересов, которые дают возможность детям приобрести разнообразный учебный опыт; в группе предусмотрено место для уединения; наличие в группе связанного с детьми оформления пространства; в группе оборудовано пространство для развития крупной моторики; в группе оборудовано пространство для развития мелкой моторики; предметно- пространственная среда на свежем воздухе, доступная воспитанникам группы, соответствует возрастным потребностям воспитанников; предметно-пространственная среда ДОО, доступная воспитанникам группы вне группового помещения (наличие спортивного зала, музыкального зала, бассейна, специализированных кабинетов (логопеда, дефектолога и пр.); – доля ДОО, в которых психолого-педагогические условия соответствуют требованиям ФГОС ДО: использование в образовательной деятельности форм и методов работы с детьми, соответствующих их возрастным и индивидуальным особенностям; поддержка инициативы и самостоятельности детей в специфических для них видах деятельности; защита детей от всех форм физического и психического насилия; поддержка родителей (законных представителей) в воспитании детей, охране и укреплении их здоровья, вовлечение семей непосредственно в образовательную деятельность и др.; – доля ДОО, в которых организовано взаимодействие с семьей: число родителей, участвующих в образовательной деятельности ДО; удовлетворенность родителей качеством дошкольного образования; наличие индивидуальной поддержки развития детей в семье; – доля ДОО, в которых функционирует ВСОКО; – доля ДОО, в которых разработана программа развития; – и т. п. Методические рекомендации по организации и проведению оценки РУМ 41 2. Технология проведения оценки механизмов управления качеством образования в субъектах Российской Федерации 2.1. Категории специалистов, привлекаемых к организации и проведению Оценки Для организации и проведения Оценки привлекаются следующие категории специалистов: – федеральный координатор: осуществляет информационную поддержку и консультационно-методическую помощь экспертам и региональным координаторам, осуществляет экспертную деятельность, формирует итоговые результаты Оценки; – региональные координаторы: взаимодействуют с федеральным координатором, отраслевыми отделами регионального органа исполнительной власти в сфере образования, заполняют формы сбора первичных данных по всем направлениям Оценки; – эксперты: осуществляют обработку заполненных форм сбора первичных данных, проводят анализ соответствия представленных данных критериям Оценки. 2.2. Этапы проведения Оценки Оценка проводится в 3 этапа: 1) сбор данных – заполнение формы сбора первичных данных регионами; 2) экспертиза – обработка заполненных форм сбора первичных данных экспертами, анализ полученной информации, расчет показателей, формирование результатов Оценки; 3) предоставление результатов Оценки – первичных результатов, статистических и аналитических сведений по итогу проведения Оценки. 2.3. Заполнение формы сбора первичных данных Форма сбора первичных данных представляет собой электронную таблицу, содержащую: – поле для указания кода региона; – поле для указания наименования региона; – перечень позиций оценивания; – максимальные баллы по каждой позиции оценивания; – поля для размещения электронных ссылок на документы и материалы, по которым проводится Оценка; – поля для комментариев к ссылкам. Ниже представлен алгоритм заполнения формы сбора первичных данных. 1. Региональный координатор получает форму сбора первичных данных от федерального координатора. 2. Региональный координатор заполняет поле для указания кода региона, поле для указания наименования региона. 3. Региональный координатор приступает к заполнению полей для размещения электронных ссылок на документы и материалы, по которым проводится Оценка, и полей для комментариев к ссылкам. Ссылки на документы и материалы размещаются напротив позиций оценивания. Для каждой ссылки используется своя ячейка. При этом в графе «Комментарий к ссылке» Методические рекомендации по организации и проведению оценки РУМ 42 указывается наименование документа, который предоставляется для оценивания. Ссылки, размещенные в ячейках напротив направлений, показателей или компонентов управленческого цикла (например, напротив направления «Система оценки качества подготовки обучающихся», показателя «Механизмы управления качеством образовательных результатов» или компонента управленческого цикла «Цели»), оценке не подлежат. В случае если документ, предоставляемый для Оценки, превышает 10 страниц, в графе «Комментарий к ссылке» указываются номера страниц, на которых содержится информация, подлежащая Оценке. В случае если несколько документов размещены по одной ссылке, ссылка дублируется для каждого документа в ячейки для ссылок, а в графе «Комментарий к ссылке» указывается наименование необходимого документа. В случае предоставления ссылок на документы и материалы, размещенные в закрытом доступе, в графе «Комментарий к ссылке» необходимо указать логин, пароль или другие сведения, необходимые для открытия документа. По одной позиции оценивания возможно размещение до 5 ссылок. При заполнении таблицы создание новых строк, столбцов, а также объединение ячеек недопустимо. Оценке подлежит содержание материалов, предоставленных в комплексе, одни и те же материалы могут быть представлены по нескольким направлениям, если их содержание соответствует позициям оценивания каждого из направлений. Оценке подлежат нормативные правовые акты, утвержденные после вступления в силу Федерального закона от 29 декабря 2012 года № 273-ФЗ «Об образовании в Российской Федерации», остальные материалы (проведенные мероприятия, мониторинги, анализ, разработанные адресные рекомендации и т. п.) – за последние 3 года. Оценке не подлежат ссылки на новостную ленту официальных сайтов. Оценке не подлежат ссылки на мероприятия без документов, подтверждающих проведение мероприятия. Оценке подлежат только документы и материалы по указанным направлениям, никакая другая информация в виде текста или таблиц при проведении Оценки не учитывается. При проведении Оценки могут быть выявлены показатели, приводящие к негативным последствиям для отдельных категорий участников образовательных отношений и, как следствие, для системы образования в целом, а также неэффективные показатели, мониторинг которых не приведет к совершенствованию системы образования. За наличие таких показателей у региона вычитаются баллы. 4. Региональный координатор должен удостовериться, что все представленные ссылки открываются, все представленные документы соответствуют требованиям к предоставлению материалов. 5. Региональный координатор направляет заполненную и проверенную форму сбора первичных данных федеральному координатору. Методические рекомендации по организации и проведению оценки РУМ 43 2.4. Алгоритм проведения экспертизы и некоторые особенности оценивания Экспертиза документов и материалов, предоставленных органами исполнительной власти субъектов Российской Федерации в сфере образования для Оценки, представляет собой процедуру, направленную на исследование региональных образовательных систем, а также анализ их элементов с целью получения мотивированного заключения о состоянии этих систем для дальнейшего их совершенствования. Экспертиза осуществляется экспертами – высококвалифицированными специалистами, владеющими специальными знаниями и экспертными технологиями. В отношении каждого региона экспертизу осуществляют три эксперта. Ниже представлен алгоритм проведения экспертизы. 1. Эксперт № 1 и эксперт № 2 получают форму сбора первичных данных, заполненную регионами, и форму протокола работы экспертов (форму для оценивания) от федерального координатора. 2. Эксперты № 1 и № 2 построчно изучают документы и материалы, анализируют их содержание, выставляют в форме протокола работы экспертов баллы по каждой позиции оценивания в графе «Балл», а также аргументируют выставленные ими баллы в графе «Комментарий эксперта». Комментарии от эксперта должны быть конкретными и обоснованными. Оценивание представленных документов и материалов по каждой позиции осуществляется в соответствии с параметрами оценивания. За наличие параметров оценивания выставляются соответствующие баллы, за отсутствие – выставляется 0 баллов. Оценка материалов и документов, характеризующих компонент управленческого цикла «Цели». Все материалы и документы, соответствующие позициям оценивания этого компонента управленческого цикла, оцениваются по следующим параметрам: – наличие цели; – обоснование цели; – реалистичность цели. Если цель представлена, обоснована и реалистична, то выставляются баллы за наличие всех трех параметров оценивания. Если цель представлена, но не обоснована или не реалистична, то баллы выставляются за ее наличие и за тот параметр (обоснование/реалистичность), который присутствует, а за отсутствующий параметр выставляется 0 баллов. Если цель отсутствует, то по всем трем параметрам выставляется 0 баллов. Цель считается отсутствующей, если по данной позиции оценивания не представлены соответствующие документы и материалы, если в представленных документах и материалах она не содержится или если представленные документы и материалы не соответствуют позиции оценивания. Оценка материалов и документов, характеризующих компонент управленческого цикла «Показатели». Все материалы и документы, соответствующие позициям оценивания этого компонента управленческого цикла, оцениваются по следующим параметрам: – наличие показателя/перечня показателей; – соответствие показателей обоснованной цели; – наличие неэффективных показателей и/или показателей с негативными последствиями. Методические рекомендации по организации и проведению оценки РУМ 44 Если показатель/перечень показателей по позиции оценивания представлен, соответствует обоснованной цели и в нем нет неэффективных показателей и/или показателей с негативными последствиями, то соответствующие баллы выставляются за наличие показателя(-ей) и за соответствие показателя(-ей) обоснованной цели, а за наличие неэффективных показателей и/или показателей с негативными последствиями выставляется 0 баллов. Если показатель/перечень показателей по позиции оценивания представлен, не соответствует обоснованной цели и в нем нет неэффективных показателей и/или показателей с негативными последствиями, то соответствующие баллы выставляются за наличие показателя(-ей), а за соответствие показателя(-ей) обоснованной цели и за наличие неэффективных показателей и/или показателей с негативными последствиями выставляется 0 баллов. Если позиция оценивания представлена перечнем показателей, которые соответствуют обоснованной цели, но в нем есть хотя бы один неэффективный показатель и/или показатель с негативными последствиями, то по первым двум параметрам выставляются соответствующие баллы с положительными значениями, а по третьему параметру – с отрицательным, то есть за наличие неэффективных показателей и/или показателей с негативными последствиями баллы вычитаются. Если позиция оценивания представлена перечнем показателей, которые не соответствуют обоснованной цели, и в нем есть хотя бы один неэффективный показатель и/или показатель с негативными последствиями, то по первому параметру выставляются баллы с положительными значениями, по второму параметру выставляется 0 баллов, а по третьему параметру выставляются баллы с отрицательными значениями. Если позиция оценивания представлена одним показателем и он является неэффективным и/или с негативными последствиями, то по первым двум параметрам выставляется 0 баллов, а за наличие неэффективного показателя и/или показателя с негативными последствиями баллы вычитаются. Если показатель/перечень показателей отсутствует, то по всем параметрам оценивания выставляется 0 баллов. Показатели с негативными последствиями и/или неэффективные показатели могут быть выявлены по каждой из позиций оценивания, характеризующих компонент управленческого цикла «Показатели». При этом эксперты ведут учет таких показателей и фиксируют их в форме протокола работы экспертов в графе «Комментарии эксперта». Оценка материалов и документов, характеризующих компонент управленческого цикла «Методы сбора и обработки информации». Все материалы и документы, соответствующие позициям оценивания этого компонента управленческого цикла, оцениваются по следующим параметрам: – наличие описания методов сбора информации; – наличие описания методов обработки информации; – использование информационных систем для сбора информации. Если представлены сведения с описанием методов сбора и обработки информации и об использовании информационных систем для сбора информации, то выставляются баллы за наличие всех трех параметров оценивания. Методические рекомендации по организации и проведению оценки РУМ 45 Если сведения о методах сбора и обработки информации представлены частично, то баллы выставляются только по тем параметрам оценивания, которые отражены в представленных для Оценки региональных материалах и документах. Если сведения о методах сбора и обработки информации, а также сведения об использовании информационных систем для сбора информации не представлены, то по всем трем параметрам выставляется 0 баллов. Оценка материалов и документов, характеризующих компонент управленческого цикла «Мониторинг показателей». Все материалы и документы, соответствующие позициям оценивания этого компонента управленческого цикла, оцениваются по следующим параметрам: – наличие мониторинга показателей; – наличие сведений о сроках проведения мониторинга; – наличие сведений об использовании результатов мониторинга показателей. Мониторинг неэффективных показателей и/или показателей с негативными последствиями при оценивании не учитывается. Если представлен мониторинг перечня показателей, среди которых есть неэффективные и/или с негативными последствиями (но не все), то он подлежит Оценке. Если все из показателей, по которым представлен мониторинг, неэффективные и/или с негативными последствиями или если позиция оценивания представлена только одним показателем и он является неэффективным и/или с негативными последствиями, то за наличие мониторинга таких показателей выставляется 0 баллов. Если мониторинг представлен и содержит сведения о сроках его проведения и об использовании результатов, то соответствующие баллы выставляются по трем параметрам оценивания. Если мониторинг представлен, но второй и/или третий параметр в документах/материалах не отображен, то по этому(-им) параметру(-ам) выставляется 0 баллов, а за наличие мониторинга выставляется соответствующий балл. Если мониторинг отсутствует, то по всем трем параметрам выставляется 0 баллов. Оценка материалов и документов, характеризующих компонент управленческого цикла «Анализ результатов мониторинга». Все материалы и документы, соответствующие позициям оценивания этого компонента управленческого цикла, оцениваются по следующим параметрам: – наличие анализа результатов мониторинга показателей; – использование элементов кластеризации при проведении анализа; – выявление факторов, влияющих на результаты анализа. Анализ результатов мониторинга неэффективных показателей и/или показателей с негативными последствиями при оценивании не учитывается. Если представлен анализ результатов мониторинга перечня показателей, среди которых есть неэффективные и/или с негативными последствиями (но не все), то он подлежит Оценке. Если все показатели, по которым представлен анализ, неэффективные и/или с негативными последствиями или если позиция оценивания представлена только одним показателем и он является неэффективным и/или с негативными последствиями, то за наличие анализа результатов мониторинга таких(-ого) показателей(-я) выставляется 0 баллов. Если анализ представлен, содержит элементы кластеризации и сведения о факторах, влияющих на результаты анализа, то соответствующие баллы выставляются по трем параметрам оценивания. Если анализ результатов мониторинга показателей представлен, но второй и/или третий параметр в документах/материалах не отображен, то по этому(-им) Методические рекомендации по организации и проведению оценки РУМ 46 параметру(-ам) выставляется 0 баллов, а за наличие анализа результатов мониторинга выставляется соответствующий балл. Если анализ отсутствует, то по всем трем параметрам оценивания выставляется 0 баллов. Оценка материалов и документов, характеризующих компонент управленческого цикла «Адресные рекомендации по результатам анализа». Все материалы и документы, соответствующие позициям оценивания этого компонента управленческого цикла, оцениваются по следующим параметрам: – наличие рекомендаций/материалов; – адресность рекомендаций/материалов; – учет результатов анализа при разработке рекомендаций/материалов. Если представленные рекомендации являются адресными и разработаны с учетом результатов анализа, то соответствующие баллы выставляются по трем параметрам оценивания. Если рекомендации представлены, но не адресные или разработаны без учета результатов анализа, то баллы выставляются за их наличие и за тот параметр (адресность/учет результатов анализа при разработке), который присутствует, а за отсутствующий параметр выставляется 0 баллов. Если рекомендации отсутствуют, то по всем трем параметрам выставляется 0 баллов. Оценка материалов и документов, характеризующих компонент управленческого цикла «Меры, мероприятия». Все материалы и документы, соответствующие позициям оценивания этого компонента управленческого цикла, оцениваются по следующим параметрам: – наличие мер/мероприятий; – наличие сведений о сроках реализации; – наличие сведений об ответственных/участниках. Если представленные документы и материалы о мерах/мероприятиях содержат сведения о сроках реализации, об ответственных/участниках, соответствующие баллы выставляются по трем параметрам оценивания. Если представленные документы и материалы о мерах/мероприятиях не содержат сведения о сроках реализации, об ответственных/участниках, то баллы выставляются за их наличие и за тот параметр (сведения о сроках реализации/сведения об ответственных/участниках), который присутствует, а за отсутствующий параметр выставляется 0 баллов. Если меры/мероприятия отсутствуют, то по всем трем параметрам выставляется 0 баллов. Оценка материалов и документов, характеризующих компонент управленческого цикла «Управленческие решения». Все материалы и документы, соответствующие позициям оценивания этого компонента управленческого цикла, оцениваются по следующим параметрам: – наличие управленческих решений; – наличие сведений о сроках реализации; – наличие сведений об ответственных/участниках. Методические рекомендации по организации и проведению оценки РУМ 47 Если представленные документы и материалы об управленческих решениях содержат сведения о сроках реализации, об ответственных/участниках, соответствующие баллы выставляются по трем параметрам оценивания. Если представленные документы и материалы об управленческих решениях не содержат сведения о сроках реализации, об ответственных/участниках, то баллы выставляются за их наличие и за тот параметр (сведения о сроках реализации/сведения об ответственных/участниках), который присутствует, а за отсутствующий параметр выставляется 0 баллов. Если управленческие решения отсутствуют, то по всем трем параметрам выставляется 0 баллов. Оценка материалов и документов, характеризующих компонент управленческого цикла «Анализ эффективности принятых мер». Все материалы и документы, соответствующие позициям оценивания этого компонента управленческого цикла, оцениваются по следующим параметрам: – наличие анализа эффективности принятых мер/мероприятий; – наличие сведений о сроках проведения анализа эффективности принятых мер/мероприятий; – определение проблемы по итогам проведенного анализа. Если представленные документы и материалы об анализе эффективности принятых мер/мероприятий содержат сведения о сроках его проведения и включают проблему, определенную по итогам проведенного анализа, соответствующие баллы выставляются по трем параметрам оценивания. Если представленные документы и материалы об анализе эффективности принятых мер/мероприятий не содержат сведения о сроках его проведения или не включают проблему, определенную по итогам проведенного анализа, то баллы выставляются за наличие анализа и за тот параметр (сведения о сроках проведения анализа эффективности мер/мероприятия/определение проблемы по итогам проведенного анализа), который присутствует, а за отсутствующий параметр выставляется 0 баллов. Если анализ эффективности принятых мер отсутствует, то по всем трем параметрам выставляется 0 баллов. 3. Эксперт № 3 осуществляет повторную проверку региональных материалов и документов, принимает итоговое решение по начислению баллов по каждой позиции оценивания. 2.5. Формирование результатов Оценки Формирование результатов Оценки осуществляется в несколько этапов. 1. Оценка соответствия содержания документов и материалов, предоставленных регионами, позициям оценивания критериев. Итогом такой оценки являются выставленные экспертами первичные баллы. 2. Оценка компонентов управленческого цикла по каждому направлению путем суммирования первичных баллов, набранных регионом, по позициям оценивания, характеризующим каждый компонент управленческого цикла: – цели; – показатели; Методические рекомендации по организации и проведению оценки РУМ 48 – методы сбора и обработки информации; – мониторинг показателей; – анализ результатов мониторинга; – адресные рекомендации по результатам анализа; – меры и мероприятия; – управленческие решения; – анализ эффективности принятых мер. 3. Определение степени сформированности компонентов управленческого цикла как отношение баллов за каждый из компонентов управленческого цикла каждого направления к максимально возможному баллу, выраженной в процентах. 4. Расчет результатов региона по каждому направлению, для этого суммируются баллы по компонентам управленческого цикла каждого из направлений. 5. Расчет индексов (в %) систем управления качеством образования, определяющих их степень сформированности и эффективность функционирования, которые вычисляются как отношение суммы баллов региона по каждому направлению к максимально возможному баллу. 6. Расчет значений показателей, агрегированных по двум блокам: «Механизмы управления качеством образовательных результатов» и «Механизмы управления качеством образовательной деятельности», которые вычисляются как сумма баллов региона по направлениям, входящим в каждый из показателей. 7. Расчет индекса механизмов управления качеством образовательных результатов и индекса механизмов управления качеством образовательной деятельности, определяющих степень сформированности и эффективность функционирования этих механизмов в региональной системе образования, которые вычисляются как отношение суммы баллов региона по каждому механизму к максимально возможному баллу. 8. Расчет итогового балла, который вычисляется как сумма баллов региона по показателям «Механизмы управления качеством образовательных результатов» и «Механизмы управления качеством образовательной деятельности». 9. Расчет индекса механизмов управления качеством образования в регионе, определяющего степень сформированности и эффективность функционирования механизмов управления качеством образования, который вычисляется как отношение результата региона по итогам проведения Оценки к максимально возможному баллу. В результате Оценки могут быть получены положительные, нулевые или отрицательные значения (в баллах). Значения индексов варьируются в диапазоне от 0 % до 100 %. Если по компоненту управленческого цикла/направлению/показателю результат представлен отрицательным значением (в баллах), то индекс сформированности компонента управленческого цикла/направления/показателя равен 0%. |