Методические рекомендации по организации мониторинга

В решении задач, поставленных перед образовательным учреждением, педагогическому мониторингу придается большое значение, так как без наличия целостной системы непрерывного отслеживания результатов образовательной деятельности и  воздействия на личность обучающегося трудно оценить эффективность работы учреждения,   невозможно представить его успешное функционирование и  развитие.

В научных исследованиях  мониторинг рассматривается как системная диагностика качественных и количественных характеристик эффективности функционирования и тенденций саморазвития образовательной системы, включая ее цели, содержание, формы, методы, дидактические средства, условия и результаты обучения. В таком аспекте мониторинг нацелен на получение  точной и объективной информации о реальном качестве образования, его соответствии современным требованиям.

Одним из важнейших направлений мониторинга является отслеживание результатов образовательного процесса, что позволяет отметить достижения, выделить и конкретизировать значимые проблемы образовательной ситуации, объективно оценить их и на основе анализа результатов работы.   Осуществление такого мониторинга -  необходимая часть работы по организации  педагогического процесса в творческих объединениях. Он является неотъемлемой частью организации технологии процесса обучения как часть процесса целеполагания, а в дальнейшем определения перспектив, моделирования и конструирования образовательного процесса в целях достижения его высокого качества.

В отличие от общего образования, где процесс выявления и сопоставления результатов образовательной деятельности достаточно четко отработан, в дополнительном образовании этот вопрос вызывает реальные затруднения, так как имеется ряд проблем:

– отсутствуют единые образовательные стандарты;

– многообразие реализуемых образовательных программ различных направленностей предполагает разнообразие оценочных систем и критериев оценивания, что приводит  к сложности или невозможности сопоставления результатов реализации образовательных программ;

– отсутствует  инструментарий для фиксации результатов, обработки и анализа результатов диагностики,  четко разработанная схема (матрица) диагностики образовательных результатов, которая может быть наполнена конкретным содержанием в соответствии с особенностями образовательной деятельности.

Данные методические рекомендации направлены на решение имеющихся проблем в области организации мониторинга результативности образовательной деятельности и адресованы педагогам дополнительного образования, методистам, заместителям директора по учебно-воспитательной работе и предлагаются для использования в практической деятельности образовательных учреждений. 

Особенность представленной модели мониторинга по отношениюк описанным в литературе и применяемым в деятельности  – в применении сравнительного подхода к обработке количественной информации.  Сравнительный характер данных проявляется в том,  что результат определяется в сравнении с условной нормой. За условную норму принимается максимально возможный  показатель по данному параметру, прежнее состояние или целевое состояние показателя.  Количественные оценки по всем параметрам мониторинга представляются в процентном отношении. Качественные оценки диагностической составляющей формируются как комментарии к ним. 

Такая статистическая обработка данных дает возможность:

– определить относительное место обучаемого в группе;

– выделить группы учащихся с низкими и высокими показателями;

– определить динамику результатов образовательной деятельности в группе и учреждении;

– проводить  сравнение групп различной направленности по заданным параметрам;

– получать сравнительную оценку качества работы педагогов;

– определить уровень кадрового потенциала.

Практическая ценность представленной модели заключается в:

– возможности отбора параметров мониторинга с учетом особенностей реализуемых образовательных программ и критериев оценивания результата;

– возможности применения инструментария (предлагаемых таблиц) для получения реальной картины результативности по всем параметрам мониторинга для любой образовательной программы и на любом уровне организации учебно-воспитательного процесса (на уровне творческого объединения, на уровне подразделения (групп одной направленности), на уровне учреждения в целом);

– возможности сопоставления результатов образовательной деятельности независимо   от направленности и уровня образовательной программы благодаря полученным количественным показателям (статистическим данным);

– возможности применения компьютерных технологий для обработки и хранения данных диагностических измерений и создания банка данных мониторинга результативности образовательной деятельности.

 Цель настоящих методических рекомендаций: совершенствование алгоритма мониторинга результативности образовательного процесса в системе дополнительного образования, осуществление единых подходов к проведению диагностических измерений  и отслеживанию результативности образовательной  деятельности.
Задачи:

– представить алгоритм организации мониторинга результативности образовательной деятельности;

– представить инструментарий для фиксации результатов;

– дать рекомендации по обработке данных диагностических измерений.  

В настоящих методических рекомендациях представлена модель организации мониторинга результативности образовательной деятельности, разработанная методистом  муниципального бюджетного образовательного учреждения дополнительного образования детей Центр интеллектуального развития Ювента и апробированная педагогами данного учреждения с 2007 – 2008 учебного года по настоящее время.

Содержание деятельности по организации мониторинга в Центре Ювента основано на нормативных положениях действующих законодательных актов:

– Закон Российской Федерации «Об образовании» №3266-1 от 10.07.1992  (в редакции Федеральных законов от 13.01.1996 №12-ФЗ, с последующими изменениями).

– Типовое положение об образовательном учреждении дополнительного образования детей, (утверждено приказом Министерства образования и науки РФ от26 июня 2012 г. N 504).

– Письмо Министерства образования и науки РФ от 11.12.2006 г. № 06-1844 «О примерных требованиях к программам дополнительного образования детей».

– Устав Муниципального образовательного учреждения дополнительного образования детей Центра интеллектуального развития Ювента.

– Образовательная программа Центра Ювента, которая представляет собой нормативный документ, определяющий цели и задачи, обязательный минимум содержания, требования к знаниям и умениям учащихся по каждому курсу, т.е. определяет стандарт образования.

Для проведения мониторингового исследования подготовлен  пакет локальных документов:

– Положение о мониторинге в муниципальном образовательном учреждении дополнительного образования детей Центре интеллектуального развития Ювента.

– Годовой план-график проведения диагностических исследований.

– Приказы о проведении диагностических исследований и о результатах диагностики.

– Инструментарий для проведения диагностики (анкеты, карточки, задания, автоматизированные компьютерные тесты и т.п.) и для фиксации результатов и обработки и анализа данных (таблицы и электронные банки данных).

В качестве основных показателей  результативности образовательной деятельности в Центре Ювента в соответствии с нормативными требованиями выше названных документов, определены следующие показатели:

– уровень выполнения образовательной программы;

– уровень и качество усвоения программного материала;

– уровень сохранности и стабильности детских коллективов;

– уровень результативности предъявления продуктов деятельности (участие и результативность воспитанников в мероприятиях муниципального, регионального, федерального и международного уровней);

– результативность реализуемой образовательной программы. 

1.Уровень выполнения образовательной программы определяется путем анализа показателей выполнения программы по каждому курсу учебного плана Центра и включает:

– уровень реализации содержания программы  – соотношение фактически выданных разделов и тем и запланированных разделов и темпо курсу программы;

– уровень полноты выполнения программы  – соотношение фактически выданных и запланированных часов.

2.Уровень и качество усвоения программного материалаопределяются в процессе диагностики уровня ЗУН учащихся. Для оценивания знаний учащихся принята в Центре десятибалльная система оценки. Основные критерии оценивания, показатели степени обученности по  уровням процесса обучения и количественная  (балловая) интерпретация представлены в приложении 1.

 Уровень усвоения программного материалаопределяется путем соотношения общего количества обучающихся,    выполнивших  задания уровней  I – III (от 1 до 4 баллов), к количеству  выполнявших работу.

Уровень качества усвоения программного материала определяется путем соотношения количества  обучающихся,    выполнивших  задания уровней IV – VI  (от 5 до 10 баллов) к количеству  выполнявших работу.

 3.Уровень  сохранности коллектива учащихся –  соотношение количества учащихся на конец года к количеству учащихся на начало года;

Уровень стабильности детского коллектива– соотношение количества учащихся, прошедших курс обучения от начала и до конца года к общему количеству учащихся на конец года.

Движение учащихся, показатели сохранности и стабильности и другие характеристики контингента обучающихся (возрастные и гендерный показатели, школа) отслеживаются через электронный банк данных об учащихся Центра.

4.Результативность предъявления продуктов деятельности  определяется путем соотнесения количества воспитанников, участвовавших и занявших призовые места в мероприятиях к общему количеству учащихся группы, подразделения, учреждения.

Личные достижения обучающихся внесены в электронный банк данных  «Одаренные дети» с указанием персональных данных об обучающемся, названия и уровень конкурса, занятое место и педагог.

5.Результативность реализуемой образовательной программы   определяется  как среднее значение всех выше перечисленных показателей.

 Для обработки и анализа информации по каждому показателю результативности на уровне группы, подразделения и учреждения разработаны таблицы, инструкции по обработке результатов и рекомендации по определению того или иного показателя (приложения 2,3,4,5). В основе  разработанного инструментария лежат идеи специалистов Челябинского института дополнительного профессионального образования (повышения квалификации) педагогических работников.

Показатели результативности образовательной деятельности,  отчеты педагогов и руководителей структурных подразделений внесены в электронный банк данных о  результатах мониторинге результативности УВП. 

Разработанные таблицы были апробированы педагогами Центра с 2007 – 2008 учебного года.

По отзывам педагогов, они позволяют не только легко фиксировать результаты образовательной деятельности, но и наглядно представить результативность  УВП в процентном соотношении, анализировать и сравнивать их, т.е. осуществлять постоянный мониторинг результативности образовательной деятельности.

Таким образом, представленные рекомендации по организации  мониторинга результативности образовательной деятельности позволяют создать статистически объективную основу для формирования стратегии и тактики развития творческого объединения или учреждения дополнительного образования, поддерживая необходимый уровень эффективности деятельности на всех этапах функционирования.

Литература

1. Битинас Б.П., Кутаева Л.И., Педагогическая диагностика.: Сущность, функции, перспективы. // Педагогика. – №2, 1993
2. Буйлова Л.Н. Оценка результативности деятельности ЦДЮТ «Бибирево» // Бюллетень программно-методических материалов для УДОД (региональный опыт), 2003, №3.
3. Зверева В.И. Самоаттестация школы. – М.: Педагогический поиск, 1999.
4. Ингемкамп К. Педагогическая диагностика. – М., Педагогика, 1991.
5. Каргина З.А. Об итоговой аттестации воспитанников детских объединений // Внешкольник, 2003, №4.
6. Кленова Н.В., Буйлова Л.Н. Методика определения результатов образовательной деятельности детей // Дополнительное образование, 2004, №12.
7. Молчанов С.Г., Королева Г.В., Кузнецова Л.Е. Порядок проведения аттестации образовательных учреждений дополнительного образования детей (Инструктивное и инструментальное обеспечение). – Челябинск, 2001.
8. Симонов В.П. Десятибалльная шкала – это более достоверная оценка качества обучения. // Директор школы, 2007, №10.
9. Торгашев П.Н., Ситар И.В., Бояринцева Н.И. Система контроля и оценки результатов деятельности всех субъектов образовательного процесса // дополнительное образование, 2002, №10.
10. Шмелькова Л.В., Блохина Е.В., Митрейкина В.В. Педагогическая диагностика. Понятие, характеристика, инструментарий.

Приложение №1

Критерии оценки знаний учащихся.

Для оценивания знаний учащихся принята десятибалльная система оценки(В.П. Симонов*), которая позволяет:

– расширить возможности положительного оценивания учебной деятельности учащихся за счет расширения шкалы оценивания;

– стимулировать мотивацию достижения успехов учащихся;

– повысить объективность оценки знаний, умений и навыков учащихся;

– снять стереотипы при оценивании учебных достижений учащихся.

Оценивая результаты образовательного процесса, мы оцениваем качествообразования учащихся. Достоверная оценка качества характеризует степень обученности ученика (СОУ), то есть прочность, глубину, осознанность и системность знаний, умений и навыков, его компетентность.

Рассмотрим основные уровни процесса обучения. Нельзя не согласиться с такой их дифференциацией: на первом, или информационном, уровне формируются знания; на втором, или репродуктивном, вырабатываются простейшие умения; на третьем, или творческом, складываются сложные умения и навыки. Такова логика обучения. Из нее не может не вытекать вполне определенная логика выявления и оценки степени сформированности знаний, умений и навыков, то есть обученности, или, иными словами, качества обучения.

Обученностьхарактеризуется такими последовательными показателями: различение, запоминание, понимание, элементарные умения и навыки, действие по образцу, применение знаний и умений в новой ситуации, выполнение творческих заданий, которые и будут проверяться и оцениваться. Дадим условную количественную интерпретацию (уровень обученности  и баллы) этим показателям и получим модель обученности.

* Симонов В.П. Десятибалльная шкала – это более достоверная оценка качества обучения. // Директор школы, 2007, №10.

Приложение №2

Анализ результатов диагностики уровня ЗУН учащихся

 в группе________ педагога ____________________________

Дата проведения контроля __________________________

Цель диагностики _________________________________________________________________

__________________________________________________________________________________

Краткая характеристика заданий

Краткий анализ выполнения заданий ________________________________________________

___________________________________________________________________________________

___________________________________________________________________________________

___________________________________________________________________________________

___________________________________________________________________________________

___________________________________________________________________________________

___________________________________________________________________________________

___________________________________________________________________________________

Результаты диагностики

Анализ результатов

Уровень усвоения программного материала определяется путем умножения общего количества учащихся, получивших от 4 до 10 баллов  на 100% и деления результата на количество выполнявших работу.

 Качество усвоения программного материала определяется путем умножения общего количества учащихся, получивших от 5 до 10 баллов  на 100% и деления результата на количество выполнявших работу.

Критерии оценки знаний:

Вывод, рекомендации ____________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________

________________________________________________________________________________________________________________________________________________________________________

 Подпись ________________________                                             Дата __________________________                                                                              

Сводный отчет

 по итогам диагностики ЗУН в группах педагога___________________________

за _________________________________ учебный  год

Дата проведения диагностики ________________________________________________________________

Цель диагностики ___________________________________________________________________________

____________________________________________________________________________________________

____________________________________________________________________________________________

Результаты диагностики

Краткий анализ результатов диагностики

____________________________________________________________________________________________

____________________________________________________________________________________________

____________________________________________________________________________________________

____________________________________________________________________________________________

____________________________________________________________________________________________

____________________________________________________________________________________________

Вывод, рекомендации________________________________________________________________________

____________________________________________________________________________________________

____________________________________________________________________________________________

____________________________________________________________________________________________

____________________________________________________________________________________________

____________________________________________________________________________________________

____________________________________________________________________________________________

Показатели уровня усвоения программы и качества знаний:

Подпись___________________________                                     Дата _________________

Результаты диагностики уровня ЗУН учащихся

подразделения _____________________________

за __________________ учебный год

Показатели уровня усвоения программы и качества знаний:

Дата: ______________________                     Руководитель подразделения______________

                                                                                                                             (ФИО)

                                                                                 Подпись____________________________

Результаты диагностики уровня ЗУН учащихся

Центра Ювента

за _______________________ учебный год

Показатели уровня усвоения программы и качества знаний:

Дата: ___________________                      Зам. директора по УВР_____________________

                                                                                                                             (ФИО)

                                                                                 Подпись_______________________

Приложение №3

Полнота выполнения образовательной программы педагога        ________________________

за _________________________________ учебный год

Уровень полноты выполнения программы определяется следующим образом:

      Подпись____________________________                                                                                               Дата: __________________________

Полнота выполнения образовательной программы подразделения     ____________________________________________

за ___________________________________________ учебный год

Уровень полноты выполнения программы определяется следующим образом:

Дата: ______________________                     Руководитель подразделения________________________                                                                                                                              

                                                                                 Подпись____________________________

Полнота выполнения образовательных  программ Центра Ювента

за ______________________    учебный год

             Уровень полноты выполнения программы определяется следующим образом:

           Дата: ______________________                     Зам. директора по УВР________________

                                                                                                                                                                                                                                                                                                                                                      Подпись____________________________

Приложение №4

Личная результативность учащихся

педагога дополнительного образования  __________________________ за   ________________________учебный год

* в таблицу вносятся только призеры (1,2,3 место, победители призовых номинаций, лауреаты конкурсов. Поощрительные призы, поощрительные номинации не учитываются)

Количественный анализ личных достижений учащихся

педагога дополнительного образования  ______________________ за   ______________________учебный год

                   Педагог  ____________________ /_______________/                    Дата ___________________________

Результативность предъявления продуктов деятельности

подразделения _____________________________________ за ________________  учебный год

                       Дата: ___________________                      Руководитель подразделения _____________________

                                                                                                                             (ФИО)

                                                                                              Подпись_______________________

Результативность предъявления продуктов деятельности  Центра Ювента

за ________________ учебный год

                       Дата: ___________________                      Зам. директора по УВР_____________________

                                                                                                                             (ФИО)

                                                                                              Подпись_______________________

Приложение №5

Примечание. Для наглядности применения таблиц и выполнения расчетов в образцах приведены количественные показатели.

Результативность реализуемых образовательных программ педагога _________________________за  ______________________учебный год

Дата: _______________________                                                               Педагог ______________________

                                                                                                                                                                                                        (ФИО)

                                                                                                                          Подпись _______________________

Рекомендации по определению показателей результативности группы:

Столбцы 2,3  Уровень полноты выполнения программы включает показатели уровня полноты выполнения программы в часах (количество  фактически выданных часов умножается на 100% и делится на количество часов по плану) и уровня реализации содержания программы  (количество разделов и тем, выданных фактически, умножается на 100% и делится на количество разделов и тем по плану)

Столбцы 4, 5.  Уровень освоения содержания образования  включает показатели уровня усвоения программного материала и качества усвоения программного материала  иопределяется по результатам итогового контрольного мероприятия на основании критериев, определенных Образовательной программой Центра (см. Раздел 6 образовательных программ подразделений «Система контроля и оценки усвоения содержания образования»).

Уровень усвоения программного материала определяется путем умножения общего количества учащихся, получивших от 4 до 10 баллов  на 100% и деления результата на количество выполнявших работу.

Качество усвоения программного материала определяется путем умножения общего количества учащихся, получивших от 5 до 10 баллов  на 100% и деления результата на количество выполнявших работу.

Показатели уровня усвоения программы и качества знаний:

Столбец 7. Уровень сохранности контингента  определяется путем умножения количества учащихся в группе на конец года на 100% и деления на количество учащихся на начало года.

Столбец 9. Уровень стабильности контингента определяется путем умножения количества учащихся, прошедших полный курс обучения в группе с начала и до конца года, на 100% и деления на общее количество учащихся в группе на конец года.

Столбец 10. Уровень представления продуктов деятельности по каждому уровню  определяется путем умножения общего количества участников мероприятия соответствующего уровня на 100% и деления результата на количество обучающихся по данной программе (в группе).

Средний показатель по уровням предоставления результатов по всем уровням определяется путем умножения общего количества участников мероприятий всех уровней на 100% и деления на общее количество учащихся во всех группах педагога.

Столбец 11. Результативность каждой реализуемой образовательной программы определяется путем сложения всех показателей в %  (столбцы №№ 2,3,4,5,7,9,10) и деления полученного результата на  7 (общее количество процентных показателей).

Средний показатель результативности программ педагога по каждому параметру (столбцу) определяется путем сложения всех показателей и деления на общее количество программ.

Показатели уровня результативности образовательной программы:

–        Оптимальный – 100%    -- Достаточный – 80 – 99%     -- Критический (допустимый) – 50 – 79%        --Недопустимый – менее 50%

Результативность реализуемых образовательных программ подразделения_______________________ за ____________________учебный год

Дата: _______________________                                               Руководитель подразделения______________________

                                                                                                                                                                                                         (ФИО)

                                                                                                          Подпись ____________________________

Рекомендации по определению показателей результативности подразделения:

Столбцы 2,3  Уровень полноты выполнения программы включает средние показатели уровня полноты выполнения программы в часах  и уровня реализации содержания программы  каждого педагога подразделения.

Столбцы 4, 5.  Уровень освоения содержания образования  включает средние показатели  уровня усвоения программного материала и качества усвоения программного материала  каждого педагога подразделения.  

Показатели уровня усвоения программы и качества знаний:

Столбец 7. Уровень сохранности контингента  определяется путем умножения количества учащихся подразделения  на конец года на 100% и деления на количество учащихся подразделения на начало года.

Столбец 9. Уровень стабильности контингента определяется путем умножения количества учащихся подразделения, прошедших полный курс обучения в группе с начала и до конца года, на 100% и деления на общее количество учащихся подразделения  на конец года.

Столбец 10. Уровень представления продуктов деятельности по каждому уровню  определяется путем умножения общего количества участников мероприятия соответствующего уровня на 100% и деления результата на количество обучающихся подразделения.

Средний показатель предоставления результатов по всем уровням определяется путем умножения общего количества участников мероприятий всех уровней на 100% и деления на общее количество учащихся подразделения.

Столбец 11. Результативность реализуемой образовательной программы определяется путем сложения всех показателей в %  (столбцы №№ 2,3,4,5,7,9,10) и деления полученного результата на  7 (общее количество процентных показателей).

Средний показатель результативности программ подразделения по каждому параметру (столбцу) определяется путем сложения всех показателей и деления на общее количество программ (педагогов).

Показатели уровня результативности образовательной программы:

– Оптимальный – 100%

– Достаточный – 80 – 99%

– Критический (допустимый) – 50 – 79%

– Недопустимый – менее 50%