Методика комплексной оценки качества образовательных результатов обучающихся общеобразовательных организаций, расположенных на территории

Ханты-Мансийского автономного округа – Югры

Ханты-Мансийск – 2019

1    Основные принципы

2    Обязательные критерии и группы показателей

3    Система сбора информации

4    Группировка показателей и алгоритм формирования результатов

5    Состав показателей комплексной оценки за 2019 год

ЗАКЛЮЧЕНИЕ

ТЕЗАУРУС

Комплексная оценка качества образовательных результатов обучающихся – структурный элемент региональной системы оценки качества образования, представляющий собой систематическое стандартизированное (в части критериев и групп основных показателей) наблюдение за структурой и динамикой изменений интегрального показателя (индекса) образовательных результатов обучающихся образовательных организаций, реализующих программы начального, основного и среднего общего образования - показателя, формируемого с учетом результатов совокупности оценочных процедур в отношении учебных и вне учебных достижениях обучающихся за отчетный период (год), базируется на принципах открытости, объективности, прозрачности, общественно-профессионального участия.

Индекс образовательных результатов (ИОР) – интегральный показатель, рассчитываемый за отчетный год для сравнения средних значений образовательных результатов обучающихся образовательных организаций, реализующих программы общего образования, формируемый на основе значений и весовых коэффициентов установленных настоящей Методикой показателей, относящихся к критерию идентификации «Устойчивость образовательных результатов обучающихся на уровне начального общего, основного общего и среднего общего образования», и распределенных по группам:

-     группа основных показателей «Государственная итоговая аттестация»;

-     группа основных показателей «Всероссийские проверочные работы»;

-     группа основных показателей «Региональные диагностические работы»;

-     группа вспомогательных показателей «Олимпиады»;

-     группа вспомогательных показателей «Образовательные и профессиональные траектории».

Индекс образовательных результатов для каждой образовательной организации принимает значение в диапазоне от 0 до 1, характеризуя положение организации относительно других участников исследования.

В зависимости от значения ИОР организации принято классифицировать по уровню достигнутых результатов: высокий (четвертый квартиль), выше среднего (третий квартиль), ниже среднего (второй квартиль) и низкий (первый квартиль) уровень.

Индекс социального благополучия школы (ИСБШ) – совокупный показатель, рассчитанный на основе регрессивной модели путем суммирования нескольких наиболее значимых контекстных характеристик с присвоенными весами, которые определяются по принципу наибольшего вклада показателей в дисперсию показателей успеваемости, характеризующий внешние условия образовательного процесса для каждой конкретной организации на основе анализа:

-     условий осуществления образовательной деятельности;

-     социальных характеристик обучающихся;

-     характеристики территории расположения организации.

В зависимости от значения ИСБШ организации принято классифицировать по уровню социального благополучия: высокий (четвертый квартиль), выше среднего (третий квартиль), ниже среднего (второй квартиль) и низкий (первый квартиль) уровень.

Квартиль – значения, которые делят таблицу данных (совокупность школ – участников исследования) на четыре группы, содержащие приблизительно равное количество наблюдений. Общее количество проранжированных по значению ИСБШ (ИОР) школ делится на четыре примерно равные части по 25 % каждая: от 1 квартиля (самого низкого значения индекса) до 4 квартиля (самого высокого значения индекса).

Контекстные характеристики – обстоятельства (социально-экономические характеристики контингента, ресурсной обеспеченности, территориальных особенностей образовательных организаций), в которых протекает образовательный процесс, внешние по отношению к этому процессу, но оказывающие на него существенное влияние. Для целей настоящего исследования критерий контекстного анализа «Устойчивость образовательных результатов обучающихся на уровне начального общего, основного общего и среднего общего образования» включает в себя следующие группы показателей:

-     группа показателей «Социальные условия»;

-     группа показателей «Тип образовательной организации»;

-     группа показателей «Кадровой состав организации».

Школы со стабильно высокими образовательными результатами – это группа школ, которые по совокупности образовательных результатов занимают лидирующие позиции, входя на протяжении последних 3-х лет в состав высокого (четвертого) квартиля ИОР.

Школы со стабильно низкими образовательными результатами – это группа школ, которые по совокупности образовательных результатов характеризуются как находящиеся в кризисной ситуации, входя на протяжении последних 3-х лет в состав низкого (первого) квартиля ИОР.

Школы, функционирующие в сложных социально-экономических условиях – это группа школ, которые по совокупности контекстных характеристик, оказывающих негативное влияние на качество образовательных результатов, характеризуются как находящиеся в кризисной ситуации.

Кризисная ситуация – это ситуация, последствия которой могут сказаться на эффективности работы организации, ее репутации и/или возможностях осуществления дальнейшей деятельности, требующая принятия нестандартных управленческих решений и мобилизации ресурсов.

Кризисная ситуация характеризует две группы общеобразовательных организаций:

-     школы со стабильно низкими образовательными результатами;

-     школы, функционирующие в сложных социальных условиях.

Школы «зоны риска» – группы школ, которые по выделенным признакам характеризуются как находящиеся в ситуации риска.

Ситуация риска (в широком смысле) – характеристика ситуации, имеющей неопределенность исхода, при обязательном наличии неблагоприятных последствий (это неуверенность или невозможность получения достоверного знания о благоприятном исходе при указанных ограничениях).

Ситуация риска (в узком смысле) – вероятность неблагоприятного исхода при наличии факта резкой дифференциации (неустойчивости) средних показателей образовательных результатов в динамике и/или в рамках различных оценочных процедур (ГИА, ВПР, РДР) по отдельной обследуемой организации, в т.ч. интерпретируемые как признаки необъективной оценки.

«Эффективные» школы – школы с одновременно высокими значениями ИСБШ и ИОР (среднее значение за последние 3 года), т.е. школы, укладывающиеся в обозначенные рамки и, в отсутствии социальных ограничениях, демонстрирующие высокие образовательные результаты.

«Резильентные» школы – школы с низким значением ИСБШ при одновременно высоком значении ИОР, т.е. школы, способные преодолевать заданные социальные ограничения и демонстрировать высокие результаты качества образования;

«Несправляющиеся» школы – школы с высоким значением ИСБШ и одновременно низким значением ИОР, т.е. школы, которые в отсутствии социальных ограничений показывают низкие образовательные результаты;

«Депривированные» школы – с одновременно низким значением ИСБШ и ИОР, т.е. школы, укладывающиеся в обозначенные рамки и, при имеющихся социальных ограничениях, демонстрирующие низкие образовательные результаты.

Условные обозначения

ВПР – всероссийская проверочная работа

ГВЭ – государственный выпускной экзамен

ГИА – государственная итоговая аттестация

ЕГЭ – единый государственный экзамен – форма государственной итоговой аттестации обучающихся по основным образовательным программам среднего общего образования

ИОР – индекс образовательных результатов

ИСБШ – индекс социального благополучия школы

ОГЭ – основной государственный экзамен – форма государственной итоговой аттестации обучающихся по основным образовательным программам основного общего образования

РДР – региональная диагностическая работа

ФЦПРО – Федеральная целевая программа развития образования на 2016-2020 годы

ВВЕДЕНИЕ

Государственная программа Российской Федерации «Развитие образования» на 2013-2020 годы, определяя своей целью обеспечение высокого качества российского образования в соответствии с меняющимися запросами населения, а также обеспечение его конкурентоспособности на мировом рынке образования, ставит одной из задач «создание современной системы оценки качества образования на основе принципов открытости, объективности, прозрачности, общественно-профессионального участия».

Федеральной целевой программой развития образования на 2016-2020 годы определена необходимость «формирование востребованной системы оценки качества образования и образовательных результатов». В качестве важнейшего целевого показателя ФЦПРО 2016-2020 заявлена «доля региональных систем общего образования, в которых разработаны и реализуются мероприятия по повышению качества образования в общеобразовательных организациях, показавших низкие образовательные результаты по итогам учебного года, и в общеобразовательных организациях, функционирующих в неблагоприятных социальных условиях, в общем количестве региональных систем общего образования».

Методическими рекомендациями по заполнению заявок на участие в открытом конкурсе региональных программ развития образования в целях предоставления бюджетам субъектов Российской Федерации субсидий на софинансирование расходов, возникающих при реализации государственных программ субъектов Российской Федерации, мероприятия которых направлены на повышение качества образования в школах с низкими результатами обучения и в школах, функционирующих в неблагоприятных социальных условиях, путем реализации региональных проектов и распространения их результатов в рамках ведомственной целевой программы «Развитие современных механизмов и технологий дошкольного и общего образования» государственной программы Российской Федерации «Развитие образования», утвержденной постановлением Правительства Российской Федерации от 26 декабря 2017 г. № 1642, в качестве критерия отнесения образовательных организаций к типу «школа с низкими результатами обучения» определены «Устойчивые низкие результаты обучения учащихся на всех ступенях образования, ведущие к дезадаптации учащихся и препятствующие продолжению их образовательной и профессиональной траектории». В качестве рекомендуемых показателей в рамках критерия заявлено следующее:

-     25 % школ с самыми низкими результатами ЕГЭ, ОГЭ и ВПР за последние 3 года;

-     менее 60% обучающихся, продолжающих обучение на старшей ступени образования;

-     расхождение между средним баллом ЕГЭ, ОГЭ и ВПР по региону и средним баллом школы составляет более 20 баллов;

-     0,5% обучающихся, за последние 3 года принимавших участие в региональных и всероссийских олимпиадах и конкурсах.

В 2019 году Ханты-Мансийский автономный округ – Югра (далее – автономный округ, Югра) на системной основе продолжает реализацию мероприятия 2.2 «Повышение качества образования в школах с низкими результатами обучения и в школах, функционирующих в неблагоприятных социальных условиях, путем реализации региональных проектов и распространение их результатов» Федеральной целевой программы развития образования на 2016-2020 годы (далее – мероприятие 2.2 ФЦПРО 2016-2020), победителем конкурсного отбора региональных программ развития образования в целях предоставления бюджетам субъектов Российской Федерации субсидий на поддержку реализации Программы по которому автономный округ стал в 2017 году.

К 2020 году в Югре по направлению «формирование востребованной системы оценки качества образования и образовательных результатов» будет обеспечено достижение таких результатов ФЦПРО 2016-2020 как:

-     функционирование на региональном уровне системы мониторинга оценки образовательных результатов;

-     создание информационной системы пообъектного сбора данных об образовательных результатах, обеспечивающая автоматическую генерацию показателей мониторинга оценки образовательных результатов.

В целях информатизации региональной системы оценки качества образования на региональном уровне разработан «Региональный мониторинг», программный модуль платформы ABBYY Мониторинг, обеспечивающий сбор и хранение контекстной информации об образовательных организациях, а также результатов государственной итоговой аттестации и всероссийских проверочных работ, участия обучающихся в олимпиадах. Среди импортируемой в систему контекстной информации – данные о типе (городская, сельская) и виде (гимназия, лицей, средняя школа и т.д.) общеобразовательной организации; предметах углубленного изучения в общеобразовательной организации (при наличии); общей численности обучающихся в общеобразовательной организации и численности педагогических работников, в т.ч. молодых учителей, и т.п.

Региональная система оценки качества образования направлена среди прочего на повышение качества образования в школах с низкими образовательными результатами обучения и в школах, функционирующих в неблагоприятных социальных условиях, а также на создание условий для получения качественного общего образования, в т.ч. в части выявления общеобразовательных организаций, имеющих стабильно высокие образовательные результаты, и определения направлений их деятельности по распространению эффективных педагогических практик и передового опыта.

К началу 2019 года в автономном округе на системной основе реализуется комплекс мероприятий, включающий в т.ч. ежегодную идентификацию школ со стабильно низкими образовательными результатами, периодические мониторинги результативности реализации программ повышения качества образования в школах с низкими образовательными результатами обучения и в школах, функционирующих в неблагоприятных социальных условиях.

Система оценки образовательных результатов Ханты-Мансийского автономного округа – Югры в 2019 году в соответствии с приказом Департамента образования и молодёжной политики Ханты-Мансийского автономного округа – Югры от 11.10.2018 № 1387 «Об образовательных организациях, имеющих стабильно высокие образовательные результаты в Ханты-Мансийском автономном округе – Югре» дополняется ежегодным мониторингом общеобразовательных организаций, расположенных на территории Ханты-Мансийского автономного округа – Югры, в целях выявления общеобразовательных организаций, имеющих стабильно высокие образовательные результаты.

Интеграция дополнительного элемента в сложившуюся в автономном округе систему оценки качества образовательных результатов, упорядочивания имеющихся подходов, а также закрепление базовых принципов системы оценки требует актуализации имеющихся методик оценки качества образовательных результатов обучающихся общеобразовательных организаций, расположенных на территории Ханты-Мансийского автономного округа – Югры.

Основная цель комплексной оценки качества образовательных результатов обучающихся общеобразовательных организаций, расположенных на территории Ханты-Мансийского автономного округа – Югры, (далее – комплексная оценка качества образовательных результатов, Комплексная оценка) – формирование информационно-аналитической основы реализации комплекса мероприятий повышения качества общего образования в Ханты-Мансийском автономном округе – Югре.

Задачи комплексной оценки:

-     анализ показателей относительной результативности за последние 3 года в отношении качества образовательных результатов обучающихся школ Ханты-Мансийского автономного округа – Югры с учетом комплексных данных по образовательным результатам системы общего образования Югры (формирование «взвешенных» показателей образовательной результативности школ, соотнесенных с фактически достигнутыми образовательными результатами всех школ округа за рассматриваемый период) и контекстных характеристик реализации образовательного процесса;

-     анализ эффективности и результативности мероприятий, направленных на повышение качества образования в образовательных организациях Ханты-Мансийского автономного округа – Югры, имеющих стабильно низкие образовательные результаты, а также в школах, функционирующих в неблагоприятных социальных условиях;

-     идентификация по итогам очередного года школ, имеющих стабильно высокие и стабильно низкие образовательные результаты обучающихся;

-     выявление школ «зоны риска», демонстрирующих резкую дифференциацию (неустойчивость) средних показателей образовательных результатов в динамике и/или в рамках различных оценочных процедур (ГИА, ВПР, РДР), в т.ч. интерпретируемую как признак необъективной оценки;

-     выявление на основе сопоставления значения индекса образовательных результатов (далее – ИОР) и индекса социального благополучия (далее – ИСБШ) групп школ:

ü «эффективных» – с одновременно высокими значениями ИСБШ и ИОР;

ü «резильентных» – с низким значением ИСБШ при одновременно высоком значении ИОР;

ü «несправляющихся» – с высоким значением ИСБШ и одновременно низким значением ИОР;

ü «депривированных» – с одновременно низким значением ИСБШ и ИОР;

-     формирование расширенных профилей образовательных организаций, содержавших сведения о результатах оценки качества образования в отношении уровня подготовки обучающихся на основе аккумулированных сведений о результатах оценочных процедур в рамках региональной системы оценки качества образования, а также отдельных контекстных данных, для целей реализации системы индикативного управления.

Результаты ежегодной комплексной оценки качества образовательных результатов обучающихся общеобразовательных организаций, расположенных на территории Ханты-Мансийского автономного округа – Югры, призваны обеспечить на постоянной основе контроль эффективности реализации комплекса мероприятий повышения качества общего образования в Ханты-Мансийском автономном округе – Югре.

МЕТОДИКА И ИНСТРУМЕНТАРИЙ КОМПЛЕКСНОЙ ОЦЕНКИ КАЧЕСТВА ОБРАЗОВАТЕЛЬНЫХ РЕЗУЛЬТАТОВ ОБУЧАЮЩИХСЯ ОБЩЕОБРАЗОВАТЕЛЬНЫХ ОРГАНИЗАЦИЙ, РАСПОЛОЖЕННЫХ НА ТЕРРИТОРИИ ХАНТЫ-МАНСИЙСКОГО АВТОНОМНОГО ОКРУГА – ЮГРЫ

Комплексная оценка качества образовательных результатов обучающихся общеобразовательных организаций, расположенных на территории Ханты-Мансийского автономного округа – Югры, осуществляется в соответствии и с учетом нормативных правовых актов Российской Федерации и Ханты-Мансийского автономного округа – Югры, включая:

·      Федеральный закон от 29.12.2012 № 273-ФЗ «Об образовании в Российской Федерации» (с изм. и доп.);

·      Постановление Правительства Российской Федерации от 05.08.2013 № 662 «Об осуществлении мониторинга системы образования» (с изм. и доп.);

·      Постановление Правительства Российской Федерации от 26.12.2017 № 1642 «Об утверждении государственной программы Российской Федерации «Развитие образования» (с изм. и доп.);

·      Постановление Правительства Российской Федерации от 12.10.2017 № 1243 «О реализации мероприятий федеральных целевых программ, интегрируемых в отдельные государственные программы Российской Федерации» (с изм. и доп.);

·      приказ Министерства образования и науки РФ от 14.02.2014 № 115 «Об утверждении Порядка заполнения, учета и выдачи аттестатов об основном общем и среднем общем образовании и их дубликатов» (с изм. и доп.);

·      Закон Ханты-Мансийского автономного округа – Югры от 1 июля 2013 года № 68-оз «Об образовании в Ханты-Мансийском автономном округе – Югре» (с изм. и доп.);

·      приказы Департамента образования и молодежной политики Ханты-Мансийского автономного округа – Югры:

-       от 31.08.2015 № 1202 «Об утверждении модели региональной системы оценки качества образования в Ханты-Мансийском автономном округе – Югре»;

-       от 11.11.2015 № 1511 «О внесении изменений в приказ Департамента образования и молодежной политики Ханты-Мансийского автономного округа – Югры от 31 августа 2015 года «Об утверждении модели региональной системы оценки качества образования в Ханты-Мансийском автономном округе – Югре»;

-      от 18.08.2017 № 1246 «Об утверждении перечня общеобразовательных организаций, расположенных на территории Ханты-Мансийского автономного округа – Югры, работающих в сложных социальных условиях в 2017-2018 учебном году»;

-       от 26.04.2018 № 551 «Об утверждении плана мероприятий, направленных на повышение качества образования в образовательных организациях Ханты-Мансийского автономного округа – Югры, имеющих стабильно низкие образовательные результаты, в 2018 году и на плановый период до 2020 года»;

-       от 11.10.2018 № 1387 «Об образовательных организациях, имеющих стабильно высокие образовательные результаты в Ханты-Мансийском автономном округе – Югре»;

-       от 19.12.2018 № 1705 «Об утверждении перечня общеобразовательных организаций Ханты-Мансийского автономного округа – Югры, имеющих стабильно низкие образовательные результаты, на 2018-2019 учебный год»;

-       от 06.03.2019 «Об утверждении плана мероприятий («дорожной карты») по совершенствованию и развитию региональной системы оценки качества образования в Ханты-Мансийском автономном округе – Югре на 2019-2021 годы»;

-       иные акты, регулирующие отношения в сфере образования по вопросам оценки качества образования.

В основу методики комплексной оценки качества образовательных результатов обучающихся общеобразовательных организаций, расположенных на территории Ханты-Мансийского автономного округа – Югры, положены:

-       методические рекомендации от 25.04.2019 по заполнению заявок на участие в открытом конкурсе региональных программ развития образования в целях предоставления бюджетам субъектов Российской Федерации субсидий на софинансирование расходов, возникающих при реализации государственных программ субъектов Российской Федерации, мероприятия которых направлены на повышение качества образования в школах с низкими результатами обучения и в школах, функционирующих в неблагоприятных социальных условиях, путем реализации региональных проектов и распространения их результатов в рамках ведомственной целевой программы «Развитие современных механизмов и технологий дошкольного и общего образования» государственной программы Российской Федерации «Развитие образования» (далее – Методические рекомендации к конкурсу региональных программ реализации мероприятий ФЦПРО 2016-2020);